職位描述
Python爬蟲開發(fā)數(shù)據(jù)采集云計(jì)算/大數(shù)據(jù)運(yùn)營(yíng)商/增值服務(wù)
? 設(shè)計(jì)與開發(fā)可擴(kuò)展的爬蟲與采集框架，支持多站點(diǎn)、多協(xié)議采集
? 針對(duì)各類反爬機(jī)制（驗(yàn)證碼、限流、動(dòng)態(tài)渲染、IP封禁等）制定解決方案
? 構(gòu)建穩(wěn)健的抓取任務(wù)調(diào)度、分布式采集與監(jiān)控告警體系
? 提取與清洗結(jié)構(gòu)化/半結(jié)構(gòu)化數(shù)據(jù)，保證數(shù)據(jù)質(zhì)量與一致性
? 設(shè)計(jì)與優(yōu)化數(shù)據(jù)入庫流程，落地到關(guān)系型與NoSQL存儲(chǔ)
? 編寫高質(zhì)量、可測(cè)試的代碼，完善單元測(cè)試與集成測(cè)試
? 對(duì)采集性能進(jìn)行持續(xù)優(yōu)化，降低失敗率與重試成本
? 與產(chǎn)品/后端/數(shù)據(jù)團(tuán)隊(duì)協(xié)作，定義數(shù)據(jù)標(biāo)準(zhǔn)與接口規(guī)范
? 跟蹤行業(yè)與目標(biāo)站點(diǎn)變化，持續(xù)迭代采集策略與工具鏈
? 針對(duì)各類反爬機(jī)制（驗(yàn)證碼、限流、動(dòng)態(tài)渲染、IP封禁等）制定解決方案
? 構(gòu)建穩(wěn)健的抓取任務(wù)調(diào)度、分布式采集與監(jiān)控告警體系
? 提取與清洗結(jié)構(gòu)化/半結(jié)構(gòu)化數(shù)據(jù)，保證數(shù)據(jù)質(zhì)量與一致性
? 設(shè)計(jì)與優(yōu)化數(shù)據(jù)入庫流程，落地到關(guān)系型與NoSQL存儲(chǔ)
? 編寫高質(zhì)量、可測(cè)試的代碼，完善單元測(cè)試與集成測(cè)試
? 對(duì)采集性能進(jìn)行持續(xù)優(yōu)化，降低失敗率與重試成本
? 與產(chǎn)品/后端/數(shù)據(jù)團(tuán)隊(duì)協(xié)作，定義數(shù)據(jù)標(biāo)準(zhǔn)與接口規(guī)范
? 跟蹤行業(yè)與目標(biāo)站點(diǎn)變化，持續(xù)迭代采集策略與工具鏈
工作地點(diǎn)
北京市朝陽區(qū)高碑店鄉(xiāng)-惠河南街1102號(hào)-國(guó)粹苑A座2層2059-2063室
相似職位
- 爬蟲工程師1.5-2萬
北京 - 海淀
博彥科技承德有限公司 - 爬蟲工程師1.2-1.8萬·14薪
北京 - 石景山
中航信移動(dòng)科技股份有限公司 - Python互聯(lián)網(wǎng)數(shù)據(jù)采集（爬蟲）開發(fā)工程師8000-16000元·13薪
北京 - 海淀
北京萬智信達(dá)智能科技有限公司 - 爬蟲9000-15000元
北京 - 昌平
北京森艾電子 - python工程師9000-14000元
北京 - 海淀
北京盤拓?cái)?shù)據(jù)科技有限公司 - python爬蟲實(shí)習(xí)生100-200元/天
北京 - 通州
北京麥麥趣耕科技有限公司
熱門公司推薦
- 霸王茶姬招聘
- 肯德基招聘
- 順豐招聘
- 美團(tuán)招聘
- 京東招聘
- 餓了么招聘
- 比亞迪招聘
- 中國(guó)一汽招聘
- 北京汽車招聘
- 蔚來招聘
- 東風(fēng)汽車招聘
- 長(zhǎng)城汽車招聘
- 奇瑞汽車招聘
- 理想汽車招聘
- 長(zhǎng)鑫存儲(chǔ)招聘
- 天江藥業(yè)招聘
- 藍(lán)月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 聯(lián)想招聘
- ?？低曊衅?/a>
- 寧德時(shí)代招聘
- 中興招聘
- 新松招聘
- 京東方招聘
- 申通招聘
- 圓通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麥當(dāng)勞招聘
- 星巴克招聘
- 海底撈招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 騰訊招聘
- 百度招聘
- 快手招聘
- 字節(jié)跳動(dòng)招聘
- 新華網(wǎng)招聘
- 小米招聘
- 招商銀行招聘
- 中信銀行招聘
- 北京銀行招聘
- 興業(yè)銀行招聘
- 交通銀行招聘
- 建發(fā)集團(tuán)招聘
- 中國(guó)移動(dòng)招聘
- 中國(guó)聯(lián)通招聘
- 中國(guó)電信招聘
- 中糧集團(tuán)招聘
- 國(guó)藥控股招聘
- 中廣核招聘
- 中國(guó)船舶招聘
- 強(qiáng)生中國(guó)招聘
- 匯豐中國(guó)招聘
- 宜家招聘
- 立邦中國(guó)招聘
- 伊利招聘
- 青島啤酒招聘
- 京港地鐵招聘
- 寶馬招聘
- 小鵬汽車招聘
- 華為招聘
- 特斯拉招聘
- 吉利招聘
- 奔馳招聘
- 海爾招聘
- 美的招聘
- 京東方招聘
- 施耐德電氣招聘
- 德邦物流招聘
職位發(fā)布者
曲女士/人事經(jīng)理
剛剛活躍立即溝通
瑞爾國(guó)際物流(北京)有限公司從2006年成立至今，歷經(jīng)20年的拼搏發(fā)展，瑞爾國(guó)際物流集團(tuán)（以下簡(jiǎn)稱“瑞爾”）已從傳統(tǒng)的貨代物流企業(yè)發(fā)展成為一家綜合跨國(guó)物流企業(yè)。瑞爾不僅可以在全球范圍超過300個(gè)城市提供包括空/海/陸等各種運(yùn)輸方式在內(nèi)的門到門物流解決方案，而且分別在中國(guó)香港和美國(guó)洛杉磯建立了逆向物流與備件/備機(jī)中心，可以為客戶提供成熟的全球逆向物流與增值服務(wù)；同時(shí)，瑞爾香港海外倉具備中國(guó)進(jìn)口跨境電商B2B與B2C交付能力，自主研發(fā)了完善的倉儲(chǔ)管理系統(tǒng)，可對(duì)供應(yīng)鏈全程實(shí)現(xiàn)準(zhǔn)確控制和精細(xì)管理。目前，瑞爾的客戶遍布醫(yī)藥、食品、高科技、汽車、珠寶、能源設(shè)備、家居服飾、電子商務(wù)、材料化工等各個(gè)行業(yè)。關(guān)于R公司的信息介紹，請(qǐng)您參閱公司的網(wǎng)站信息。
公司主頁