職位：Python 爬蟲工程師
崗位職責(zé)
1. 負(fù)責(zé)編寫和優(yōu)化用于處理和分析數(shù)據(jù)的 Python 程序，確保數(shù)據(jù)的準(zhǔn)確性和完整性，并進(jìn)行存量數(shù)據(jù)分析、業(yè)務(wù)數(shù)據(jù)爬取及監(jiān)控等相關(guān)工作；
2. 根據(jù)業(yè)務(wù)需求，設(shè)計(jì)和開(kāi)發(fā)輔助工具，具備應(yīng)對(duì)反爬機(jī)制的能力，提升網(wǎng)頁(yè)抓取的效率和質(zhì)量。
3. 設(shè)計(jì)并實(shí)現(xiàn)爬蟲策略和防屏蔽規(guī)則，確保高效、可靠的數(shù)據(jù)獲取。
4. 開(kāi)發(fā)和整合 API，從數(shù)據(jù)庫(kù)獲取并整合前端所需內(nèi)容。
5. 獨(dú)立解決開(kāi)發(fā)過(guò)程中遇到的各種技術(shù)問(wèn)題。
崗位要求
1. 本科及以上學(xué)歷，2 年以上 Python 開(kāi)發(fā)經(jīng)驗(yàn)；
2. 有大型爬蟲開(kāi)發(fā)經(jīng)驗(yàn)，單個(gè)數(shù)據(jù)源采集量超過(guò)萬(wàn)條以上優(yōu)先；
3. 有網(wǎng)站建設(shè)經(jīng)驗(yàn)優(yōu)先，Python 或 Node 優(yōu)先；
4. 有產(chǎn)品思維優(yōu)先。