雇員點(diǎn)評(píng)標(biāo)簽
職位描述
Python數(shù)據(jù)治理Hadoop
職位描述：
參與并負(fù)責(zé)數(shù)據(jù)平臺(tái)的后端研發(fā)，包括PB級(jí)數(shù)據(jù)獲取、清洗工作；
參與設(shè)計(jì)并實(shí)現(xiàn)高穩(wěn)定性和高性能的分布式數(shù)據(jù)處理系統(tǒng)；
對(duì)現(xiàn)有系統(tǒng)方案能夠持續(xù)改進(jìn)和優(yōu)化，不斷提升系統(tǒng)穩(wěn)定性和性能，推進(jìn)技術(shù)在業(yè)務(wù)落地；
調(diào)研搜集高質(zhì)量數(shù)據(jù)，支持基礎(chǔ)數(shù)據(jù)集迭代更新；
參與并負(fù)責(zé)數(shù)據(jù)平臺(tái)的后端研發(fā)，包括PB級(jí)數(shù)據(jù)獲取、清洗工作；
參與設(shè)計(jì)并實(shí)現(xiàn)高穩(wěn)定性和高性能的分布式數(shù)據(jù)處理系統(tǒng)；
對(duì)現(xiàn)有系統(tǒng)方案能夠持續(xù)改進(jìn)和優(yōu)化，不斷提升系統(tǒng)穩(wěn)定性和性能，推進(jìn)技術(shù)在業(yè)務(wù)落地；
調(diào)研搜集高質(zhì)量數(shù)據(jù)，支持基礎(chǔ)數(shù)據(jù)集迭代更新；
任職要求
本科及以上學(xué)歷，2年以上非結(jié)構(gòu)化數(shù)據(jù)處理工作經(jīng)驗(yàn)，熟練掌握文本/視頻/圖片等多模態(tài)非結(jié)構(gòu)化數(shù)據(jù)處理；精通數(shù)據(jù)清洗，特征提取等技術(shù)。
熟悉 Python/Go 至少一門后端語言，并對(duì)語言特性有一定理解；
熟悉后端常用技術(shù)，包括不限于：數(shù)據(jù)庫、消息隊(duì)列、分布式存儲(chǔ)、異步任務(wù)隊(duì)列等；
熟悉常用數(shù)據(jù)處理算法（如視頻編碼、切分、去重、聚類、質(zhì)量評(píng)估等），有傳統(tǒng)CV、NLP 模型訓(xùn)練/應(yīng)用相關(guān)經(jīng)驗(yàn)者優(yōu)先；
熟悉數(shù)據(jù)處理相關(guān)的開源工具（如Ray、Hadoop 等），有大數(shù)據(jù)處理經(jīng)驗(yàn)者優(yōu)先；
了解云原生技術(shù)棧（K8S、Docker、微服務(wù)等），有云平臺(tái)相關(guān)經(jīng)驗(yàn)者優(yōu)先；
具有良好的業(yè)務(wù)理解和抽象設(shè)計(jì)能力，善于溝通，有責(zé)任心、務(wù)實(shí)，能很好的與他人合作；
有較強(qiáng)的學(xué)習(xí)能力，能夠持續(xù)關(guān)注和學(xué)習(xí)業(yè)界最新技術(shù)動(dòng)態(tài)。
加分項(xiàng)：千萬以上量級(jí)數(shù)據(jù)獲取、清洗經(jīng)驗(yàn)，全棧開發(fā)能力
本科及以上學(xué)歷，2年以上非結(jié)構(gòu)化數(shù)據(jù)處理工作經(jīng)驗(yàn)，熟練掌握文本/視頻/圖片等多模態(tài)非結(jié)構(gòu)化數(shù)據(jù)處理；精通數(shù)據(jù)清洗，特征提取等技術(shù)。
熟悉 Python/Go 至少一門后端語言，并對(duì)語言特性有一定理解；
熟悉后端常用技術(shù)，包括不限于：數(shù)據(jù)庫、消息隊(duì)列、分布式存儲(chǔ)、異步任務(wù)隊(duì)列等；
熟悉常用數(shù)據(jù)處理算法（如視頻編碼、切分、去重、聚類、質(zhì)量評(píng)估等），有傳統(tǒng)CV、NLP 模型訓(xùn)練/應(yīng)用相關(guān)經(jīng)驗(yàn)者優(yōu)先；
熟悉數(shù)據(jù)處理相關(guān)的開源工具（如Ray、Hadoop 等），有大數(shù)據(jù)處理經(jīng)驗(yàn)者優(yōu)先；
了解云原生技術(shù)棧（K8S、Docker、微服務(wù)等），有云平臺(tái)相關(guān)經(jīng)驗(yàn)者優(yōu)先；
具有良好的業(yè)務(wù)理解和抽象設(shè)計(jì)能力，善于溝通，有責(zé)任心、務(wù)實(shí)，能很好的與他人合作；
有較強(qiáng)的學(xué)習(xí)能力，能夠持續(xù)關(guān)注和學(xué)習(xí)業(yè)界最新技術(shù)動(dòng)態(tài)。
加分項(xiàng)：千萬以上量級(jí)數(shù)據(jù)獲取、清洗經(jīng)驗(yàn)，全棧開發(fā)能力
工作地點(diǎn)
思明區(qū)廈門國貿(mào)思明科創(chuàng)園8F801
相似職位
- 高級(jí)數(shù)據(jù)工程師1.2-2萬
廈門 - 湖里
軟通動(dòng)力信息技術(shù)(集團(tuán))股份有限公司 - 數(shù)據(jù)接入治理工程師1-1.2萬
廈門 - 思明
廈門安勝網(wǎng)絡(luò)科技有限公司 - FineReport數(shù)據(jù)開發(fā)1.3-1.7萬
廈門 - 思明
深圳新思 - 高級(jí)數(shù)據(jù)工程師1.2-1.5萬
廈門 - 思明
北京華科眾合科技有限公司海南分公司 - 數(shù)據(jù)專員1-1.5萬
廈門 - 翔安
廈門長江電子科技有限公司 - 大數(shù)據(jù)開發(fā)工程師1.3-2萬
廈門 - 思明
上海啟高信息科技有限公司
熱門公司推薦
- 霸王茶姬招聘
- 肯德基招聘
- 順豐招聘
- 美團(tuán)招聘
- 京東招聘
- 餓了么招聘
- 比亞迪招聘
- 中國一汽招聘
- 北京汽車招聘
- 蔚來招聘
- 東風(fēng)汽車招聘
- 長城汽車招聘
- 奇瑞汽車招聘
- 理想汽車招聘
- 長鑫存儲(chǔ)招聘
- 天江藥業(yè)招聘
- 藍(lán)月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 聯(lián)想招聘
- ?？低曊衅?/a>
- 寧德時(shí)代招聘
- 中興招聘
- 新松招聘
- 京東方招聘
- 申通招聘
- 圓通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麥當(dāng)勞招聘
- 星巴克招聘
- 海底撈招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 騰訊招聘
- 百度招聘
- 快手招聘
- 字節(jié)跳動(dòng)招聘
- 新華網(wǎng)招聘
- 小米招聘
- 招商銀行招聘
- 中信銀行招聘
- 北京銀行招聘
- 興業(yè)銀行招聘
- 交通銀行招聘
- 建發(fā)集團(tuán)招聘
- 中國移動(dòng)招聘
- 中國聯(lián)通招聘
- 中國電信招聘
- 中糧集團(tuán)招聘
- 國藥控股招聘
- 中廣核招聘
- 中國船舶招聘
- 強(qiáng)生中國招聘
- 匯豐中國招聘
- 宜家招聘
- 立邦中國招聘
- 伊利招聘
- 青島啤酒招聘
- 京港地鐵招聘
- 寶馬招聘
- 小鵬汽車招聘
- 華為招聘
- 特斯拉招聘
- 吉利招聘
- 奔馳招聘
- 海爾招聘
- 美的招聘
- 京東方招聘
- 施耐德電氣招聘
- 德邦物流招聘
職位發(fā)布者
趙攀學(xué)/HR
三日內(nèi)活躍立即溝通
軟通動(dòng)力信息技術(shù)(集團(tuán))股份有限公司軟通動(dòng)力信息技術(shù)（集團(tuán)）股份有限公司（以下簡稱“軟通動(dòng)力”）是中國數(shù)字技術(shù)產(chǎn)品和服務(wù)創(chuàng)新領(lǐng)導(dǎo)企業(yè)，致力于成為一家具有全球影響力的科技企業(yè)，企業(yè)數(shù)字化轉(zhuǎn)型可信賴合作伙伴。公司2005年成立于北京，多年來始終堅(jiān)持科技創(chuàng)新，具有軟硬全棧的智能技術(shù)產(chǎn)品和服務(wù)能力，提供軟件與數(shù)字技術(shù)服務(wù)、計(jì)算產(chǎn)品與數(shù)字基礎(chǔ)設(shè)施、數(shù)字能源與智算服務(wù)以及國際化服務(wù)。目前，公司在10余個(gè)重要行業(yè)服務(wù)超過1100家國內(nèi)外客戶，其中超過230家客戶為世界500強(qiáng)或中國500強(qiáng)企業(yè)，員工近90000人。軟通動(dòng)力擁有軟通咨詢、軟通金科、軟通工業(yè)互聯(lián)、機(jī)械革命、軟通華方等業(yè)務(wù)子品牌，并在全球40余個(gè)城市布局業(yè)務(wù)，構(gòu)建北美、日本、東南亞、中東四大國際交付中心，在北京城市副中心、江蘇無錫建設(shè)兩大智能制造基地。同時(shí)，公司前瞻布局智能制造、ICT軟硬基礎(chǔ)能力和生產(chǎn)力智能化產(chǎn)品，打造產(chǎn)業(yè)鏈閉環(huán)。軟通動(dòng)力設(shè)立30個(gè)能力中心，擁有1個(gè)國家級(jí)工程實(shí)驗(yàn)室，6個(gè)省市政府認(rèn)定的工程、技術(shù)實(shí)驗(yàn)室及研發(fā)中心，1個(gè)博士后科研工作站，50+技術(shù)合作伙伴的生態(tài)合作體系，不斷探索前沿技術(shù)的巨大商業(yè)應(yīng)用潛力。公司旗下教育品牌軟通教育，擁有一家全日制本科學(xué)院——鄭州西亞斯學(xué)院數(shù)字技術(shù)產(chǎn)業(yè)學(xué)院；同時(shí)在全國合作院校600多所，設(shè)有70多個(gè)校企聯(lián)合人才培養(yǎng)基地，通過校企合作、協(xié)同育人，為社會(huì)培養(yǎng)高素質(zhì)應(yīng)用型人才。軟通動(dòng)力先后獲得“2023年中國IT服務(wù)市場(chǎng)排名TOP 1”、“2024年Q4 PC出貨量國內(nèi)市場(chǎng)份額排名TOP 2”、“2024年中國軟件和信息技術(shù)服務(wù)競爭力百強(qiáng)企業(yè)”、“2023年中國信創(chuàng)企業(yè)100強(qiáng)”、“2024萬得ESG評(píng)級(jí)（Wind ESG Rating）AA級(jí)及信息技術(shù)服務(wù)行業(yè)ESG綜合得分排名第一”等榮譽(yù)及市場(chǎng)認(rèn)可，并擁有全球軟件工程領(lǐng)域最高級(jí)別CMMI V2.0成熟度5級(jí)評(píng)估認(rèn)證、國家研發(fā)運(yùn)營一體化（DevOps）三級(jí)能力成熟度模型認(rèn)證、信息技術(shù)服務(wù)標(biāo)準(zhǔn)（ITSS）運(yùn)維能力成熟度一級(jí)認(rèn)證等專業(yè)資質(zhì)，支撐公司更優(yōu)質(zhì)的服務(wù)體系。
公司主頁