職位簡(jiǎn)述：
爬蟲開發(fā)，java/python
崗位職責(zé)
1.負(fù)責(zé)各類電商平臺(tái)和app端數(shù)據(jù)抓取和平臺(tái)搭建;
2.負(fù)責(zé)對(duì)爬取數(shù)據(jù)進(jìn)行分類和解析;
3.負(fù)責(zé)開發(fā)高性能抓取架構(gòu)，支持業(yè)務(wù)發(fā)展
4.負(fù)責(zé)爬蟲技術(shù)公關(guān)和平臺(tái)運(yùn)維相關(guān)工作;
5.負(fù)責(zé)對(duì)目標(biāo)app自動(dòng)提交表單相關(guān)工作。
任職要求
1.本科及以上學(xué)歷，三年及以上相關(guān)工作經(jīng)驗(yàn);
2.熟悉linux平臺(tái)，熟練掌握java/Python/shel/htp協(xié)議，熟悉HTML、DOM、XPath，掌握git、maven、svn等工具和實(shí)踐，注重工程規(guī)范;
3.熟悉app端數(shù)據(jù)抓取(有逆向、脫殼等經(jīng)驗(yàn))，掌握Apktool、dex2iar、JD-GUI等工具，抓取過主流電商平臺(tái)和主流app軟件;
4.能維護(hù)Java語言寫的爬蟲代碼
5.至少2年的分布式爬蟲開發(fā)經(jīng)驗(yàn)，熟悉瀏覽器內(nèi)核，有cef、webkit開發(fā)經(jīng)驗(yàn)優(yōu)先;
6. ebay數(shù)據(jù)爬取經(jīng)驗(yàn)優(yōu)先，有app數(shù)據(jù)爬去經(jīng)驗(yàn)優(yōu)先。
7.性格開朗、善于溝通，有良好的自我驅(qū)動(dòng)學(xué)習(xí)能力，注重效率和團(tuán)隊(duì)意識(shí)，有團(tuán)隊(duì)管理經(jīng)驗(yàn)優(yōu)先。