工作要求:
1. 本科以上學(xué)歷,3-5年相關(guān)工作經(jīng)驗(yàn),擁有一個(gè)或多個(gè)電力、能源行業(yè)數(shù)據(jù)系統(tǒng)開(kāi)發(fā)實(shí)施經(jīng)驗(yàn),有相關(guān)信息系統(tǒng)業(yè)務(wù)設(shè)計(jì)經(jīng)驗(yàn);
2.熟練掌握python語(yǔ)言;用過(guò)至少一種爬蟲(chóng)框架,如scrapy、feapder等,具備自研爬蟲(chóng)框架經(jīng)驗(yàn)者優(yōu)先考慮。
3.熟練掌握SQL語(yǔ)言及至少一種關(guān)系型數(shù)據(jù)庫(kù),熟練掌握Redis。
4.熟練掌握至少一種自動(dòng)化測(cè)試框架,例如playwright、selenium、chromedp等。
5.有web系統(tǒng)逆向工程經(jīng)驗(yàn)及反爬蟲(chóng)經(jīng)驗(yàn)者優(yōu)先考慮。
6.具備基礎(chǔ)的運(yùn)維能力。
工作內(nèi)容:
1.參與分布式數(shù)據(jù)采集平臺(tái)的架構(gòu)設(shè)計(jì)與研發(fā)落地。
2.負(fù)責(zé)和產(chǎn)品進(jìn)行需求對(duì)接,開(kāi)發(fā)數(shù)據(jù)采集腳本。
3.負(fù)責(zé)現(xiàn)有數(shù)據(jù)采集平臺(tái)和爬蟲(chóng)腳本的維護(hù)工作,保證數(shù)據(jù)穩(wěn)定、高效的采集。