職位描述
數(shù)據(jù)爬蟲反爬蟲PythonJavaHTMLCSSJavaScriptrequests計算機軟件
崗位職責：
1、負責設計和開發(fā)高效、穩(wěn)定的網(wǎng)絡爬蟲系統(tǒng)，從各種數(shù)據(jù)源中抓取數(shù)據(jù)；
2、對抓取到的數(shù)據(jù)進行清洗、去重、轉換等處理，確保數(shù)據(jù)的質量和準確性；
3、解決爬蟲過程中遇到的各種技術問題，如反爬機制、IP封鎖、驗證碼識別等；
4、持續(xù)優(yōu)化爬蟲策略和算法，提高數(shù)據(jù)抓取的效率和覆蓋率；
5、與數(shù)據(jù)分析師、開發(fā)團隊等合作，將抓取到的數(shù)據(jù)集成到公司的數(shù)據(jù)平臺或應用中。
任職要求：
1、計算機、軟件工程等統(tǒng)招本科及以上學歷，應屆生或有相關開發(fā)經驗；
2、熟練掌握至少一門編程語言 Python、Java 等，熟悉常用的爬蟲框架和工具，如 Requests、BeautifulSoup、Selenium（Python）/Jsoup、OkHttp、Selenium（Java） 等；
3、熟悉 HTTP 協(xié)議、HTML、CSS、JavaScript 等，能夠分析網(wǎng)頁結構和數(shù)據(jù)提取邏輯；
4、熟悉數(shù)據(jù)庫操作，如 MySQL、MongoDB等；
5、了解分布式爬蟲架構和技術，能夠應對各種復雜的反爬機制；有大規(guī)模數(shù)據(jù)抓取經驗者優(yōu)先；
6、對數(shù)據(jù)敏感，有數(shù)據(jù)分析和挖掘經驗者優(yōu)先；
7、具有良好的專業(yè)素養(yǎng)，有較好的學習能力，有分析問題、解決問題的能力，有較好的領悟力和執(zhí)行力；
8、工作積極互動，責任心強，服從安排，身心健康，有一定的抗壓能力；
9、善于溝通，具備較好的團隊合作精神。
1、負責設計和開發(fā)高效、穩(wěn)定的網(wǎng)絡爬蟲系統(tǒng)，從各種數(shù)據(jù)源中抓取數(shù)據(jù)；
2、對抓取到的數(shù)據(jù)進行清洗、去重、轉換等處理，確保數(shù)據(jù)的質量和準確性；
3、解決爬蟲過程中遇到的各種技術問題，如反爬機制、IP封鎖、驗證碼識別等；
4、持續(xù)優(yōu)化爬蟲策略和算法，提高數(shù)據(jù)抓取的效率和覆蓋率；
5、與數(shù)據(jù)分析師、開發(fā)團隊等合作，將抓取到的數(shù)據(jù)集成到公司的數(shù)據(jù)平臺或應用中。
任職要求：
1、計算機、軟件工程等統(tǒng)招本科及以上學歷，應屆生或有相關開發(fā)經驗；
2、熟練掌握至少一門編程語言 Python、Java 等，熟悉常用的爬蟲框架和工具，如 Requests、BeautifulSoup、Selenium（Python）/Jsoup、OkHttp、Selenium（Java） 等；
3、熟悉 HTTP 協(xié)議、HTML、CSS、JavaScript 等，能夠分析網(wǎng)頁結構和數(shù)據(jù)提取邏輯；
4、熟悉數(shù)據(jù)庫操作，如 MySQL、MongoDB等；
5、了解分布式爬蟲架構和技術，能夠應對各種復雜的反爬機制；有大規(guī)模數(shù)據(jù)抓取經驗者優(yōu)先；
6、對數(shù)據(jù)敏感，有數(shù)據(jù)分析和挖掘經驗者優(yōu)先；
7、具有良好的專業(yè)素養(yǎng)，有較好的學習能力，有分析問題、解決問題的能力，有較好的領悟力和執(zhí)行力；
8、工作積極互動，責任心強，服從安排，身心健康，有一定的抗壓能力；
9、善于溝通，具備較好的團隊合作精神。
工作地點
閔行區(qū)上海通用識別技術研究所(西門)恒南路1000號（國家電網(wǎng)對面）2號樓
相似職位
- 數(shù)據(jù)采集質檢專員1.1-1.6萬
上海 - 閔行
南京予芯科技有限公司 - 上海200/天數(shù)據(jù)采集員6000-8000元
上海 - 浦東
河北云啟科創(chuàng)企業(yè)服務有限公司 - 周末雙休200/天數(shù)據(jù)采集員3000-4000元
上海 - 浦東
河北云啟科創(chuàng)企業(yè)服務有限公司 - 采集文員180元/天
上海 - 浦東
河北云啟科創(chuàng)企業(yè)服務有限公司 上海 - 浦東
河北云啟科創(chuàng)企業(yè)服務有限公司- 數(shù)據(jù)采集質檢專員9000-15000元
上海 - 閔行
南京予芯科技有限公司
熱門公司推薦
- 霸王茶姬招聘
- 肯德基招聘
- 順豐招聘
- 美團招聘
- 京東招聘
- 餓了么招聘
- 比亞迪招聘
- 中國一汽招聘
- 北京汽車招聘
- 蔚來招聘
- 東風汽車招聘
- 長城汽車招聘
- 奇瑞汽車招聘
- 理想汽車招聘
- 長鑫存儲招聘
- 天江藥業(yè)招聘
- 藍月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 聯(lián)想招聘
- 海康威視招聘
- 寧德時代招聘
- 中興招聘
- 新松招聘
- 京東方招聘
- 申通招聘
- 圓通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麥當勞招聘
- 星巴克招聘
- 海底撈招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 騰訊招聘
- 百度招聘
- 快手招聘
- 字節(jié)跳動招聘
- 新華網(wǎng)招聘
- 小米招聘
- 招商銀行招聘
- 中信銀行招聘
- 北京銀行招聘
- 興業(yè)銀行招聘
- 交通銀行招聘
- 建發(fā)集團招聘
- 中國移動招聘
- 中國聯(lián)通招聘
- 中國電信招聘
- 中糧集團招聘
- 國藥控股招聘
- 中廣核招聘
- 中國船舶招聘
- 強生中國招聘
- 匯豐中國招聘
- 宜家招聘
- 立邦中國招聘
- 伊利招聘
- 青島啤酒招聘
- 京港地鐵招聘
- 寶馬招聘
- 小鵬汽車招聘
- 華為招聘
- 特斯拉招聘
- 吉利招聘
- 奔馳招聘
- 海爾招聘
- 美的招聘
- 京東方招聘
- 施耐德電氣招聘
- 德邦物流招聘
職位發(fā)布者
姬女士/人事招聘
昨日活躍立即溝通
上海現(xiàn)代通用識別技術有限公司
上?，F(xiàn)代通用識別技術有限公司是專門從事高端證件的防偽設計和制作、個性化數(shù)碼印刷服務的國有企業(yè)，承擔過許多重要身份識別項目的設計研發(fā)工作，國家和地方重要證件的設計制作，并積極努力參與市場竟爭，為社會開發(fā)了一系列相關技術產品。公司擁有先進的管理系統(tǒng)，通過了具有"國際貿易通行證"之稱的ISO9001國際質量體系認證，保證了每個產品成本合理、質量穩(wěn)定、性能可靠。公司擁有一批一流的研發(fā)人才保證了技術不斷創(chuàng)新，新品層出不窮。近些年來公司在技術創(chuàng)新方面取得了不斐的成績：證件塑卡防偽印刷方面：我們擁有一支高水平的設計、制版、印刷專業(yè)技術人才隊伍，在印刷防偽工藝上具有獨步的多方位的技術手段、配合先進的設計軟件和一流的工藝設備，能夠為用戶提供具有高防偽性、質量上乘、數(shù)字準確的高端防偽產品，如各種塑卡和紙質證件和有價證（券）以及證書等。在防偽印刷工藝、技術和材料和的開發(fā)方面我們注重特種材料和特殊工藝的研究和開發(fā)，主要產品有：特種紙張、特種油墨、激光全息、裝幀材料、微型標識等。在數(shù)碼印刷方面：我們擁有目前先進的富士施樂數(shù)碼印刷機，可以為我們的客戶提供從各種數(shù)碼圖文設計、彩色黑白數(shù)碼快印、可變數(shù)據(jù)快印等個性化，同時提供全套的印后加工服務。在技術研發(fā)方面：擁有高技術研發(fā)人員，針對特定項目開展定制化研發(fā)服務。公司位于閔行區(qū)浦江鎮(zhèn)863軟件孵化基地內，環(huán)境優(yōu)美、設施完備、配套齊全。除了通過ISO9001質量管理體系的認證、高新企業(yè)認證外，我公司還具備上海市保密局下發(fā)的保密印刷的資質，還擁有一支年輕，富有開拓創(chuàng)新精神的團隊。今后我們還將不斷的健全經營機制，完善管理模式，優(yōu)化服務體系，竭誠為您擔供優(yōu)質便捷的服務。
公司主頁