職位描述
PythonETL數(shù)據(jù)庫(kù)開(kāi)發(fā)Sparkhive
核心職責(zé)：
1. 為調(diào)度系統(tǒng)構(gòu)建數(shù)據(jù)預(yù)處理流水線，保障輸入數(shù)據(jù)質(zhì)量
2. 開(kāi)發(fā)自動(dòng)化清洗工具，處理缺失/異常/重復(fù)數(shù)據(jù)，實(shí)施標(biāo)準(zhǔn)化
3. 設(shè)計(jì)數(shù)據(jù)質(zhì)量監(jiān)控規(guī)則（完整性/一致性校驗(yàn)）
4. 集成調(diào)度系統(tǒng)（Airflow等），優(yōu)化ETL流程銜接
5. 編寫(xiě)技術(shù)文檔，支持跨團(tuán)隊(duì)數(shù)據(jù)需求
6.本科及以上學(xué)歷， 3-5年工作經(jīng)驗(yàn)
必備技能：
1.熟悉Python（Pandas/NumPy）及SQL
2.數(shù)據(jù)清洗開(kāi)發(fā)經(jīng)驗(yàn)，熟悉正則/字符串處理
3.了解數(shù)據(jù)治理框架（DAMA/DCMM）
4.掌握ETL工具（PySpark/Great Expectations）
5.熟悉Linux環(huán)境與基礎(chǔ)Shell腳本
加分項(xiàng)：
1.調(diào)度系統(tǒng)（Airflow）或云平臺(tái)（AWS/Azure）經(jīng)驗(yàn)
2.數(shù)據(jù)血緣追蹤/元數(shù)據(jù)管理實(shí)踐
3.大數(shù)據(jù)生態(tài)（Spark/Hive）基礎(chǔ)
工作地點(diǎn)
通州區(qū)長(zhǎng)鑫集電(北京)存儲(chǔ)技術(shù)有限公司
相似職位
北京 - 朝陽(yáng)
中國(guó)航空綜合技術(shù)研究所- 大數(shù)據(jù)技術(shù)教師1-1.5萬(wàn)
北京 - 昌平
北京科技經(jīng)營(yíng)管理學(xué)院 - 阿里云數(shù)據(jù)中臺(tái)（雙休五險(xiǎn)一金年假體檢年終獎(jiǎng)節(jié)日生日福利）1.1-2萬(wàn)·13薪
北京 - 西城
山東華科信息技術(shù)有限公司 - 數(shù)據(jù)開(kāi)發(fā)（北京）1.6-1.8萬(wàn)
北京 - 昌平
新訊數(shù)字科技(杭州)有限公司北京分公司 - 大數(shù)據(jù)開(kāi)發(fā)工程師1.3-1.6萬(wàn)
北京 - 朝陽(yáng)
醫(yī)博士 - 大數(shù)據(jù)開(kāi)發(fā)工程師2-2.5萬(wàn)
北京 - 朝陽(yáng)
中福彩科技發(fā)展(北京)有限公司
熱門(mén)公司推薦
- 霸王茶姬招聘
- 肯德基招聘
- 順豐招聘
- 美團(tuán)招聘
- 京東招聘
- 餓了么招聘
- 比亞迪招聘
- 中國(guó)一汽招聘
- 北京汽車(chē)招聘
- 蔚來(lái)招聘
- 東風(fēng)汽車(chē)招聘
- 長(zhǎng)城汽車(chē)招聘
- 奇瑞汽車(chē)招聘
- 理想汽車(chē)招聘
- 長(zhǎng)鑫存儲(chǔ)招聘
- 天江藥業(yè)招聘
- 藍(lán)月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 聯(lián)想招聘
- ?？低曊衅?/a>
- 寧德時(shí)代招聘
- 中興招聘
- 新松招聘
- 京東方招聘
- 申通招聘
- 圓通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麥當(dāng)勞招聘
- 星巴克招聘
- 海底撈招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 騰訊招聘
- 百度招聘
- 快手招聘
- 字節(jié)跳動(dòng)招聘
- 新華網(wǎng)招聘
- 小米招聘
- 招商銀行招聘
- 中信銀行招聘
- 北京銀行招聘
- 興業(yè)銀行招聘
- 交通銀行招聘
- 建發(fā)集團(tuán)招聘
- 中國(guó)移動(dòng)招聘
- 中國(guó)聯(lián)通招聘
- 中國(guó)電信招聘
- 中糧集團(tuán)招聘
- 國(guó)藥控股招聘
- 中廣核招聘
- 中國(guó)船舶招聘
- 強(qiáng)生中國(guó)招聘
- 匯豐中國(guó)招聘
- 宜家招聘
- 立邦中國(guó)招聘
- 伊利招聘
- 青島啤酒招聘
- 京港地鐵招聘
- 寶馬招聘
- 小鵬汽車(chē)招聘
- 華為招聘
- 特斯拉招聘
- 吉利招聘
- 奔馳招聘
- 海爾招聘
- 美的招聘
- 京東方招聘
- 施耐德電氣招聘
- 德邦物流招聘
職位發(fā)布者
隋巖/人事經(jīng)理
三日內(nèi)活躍立即溝通
北京源于信科技有限公司北京源于信科技有限公司擁有雄厚的資金基礎(chǔ)、人才濟(jì)濟(jì)的研發(fā)陣容和具有先進(jìn)創(chuàng)新理念的運(yùn)營(yíng)團(tuán)隊(duì)。公司倡導(dǎo)團(tuán)隊(duì)協(xié)作，公平公正，強(qiáng)調(diào)員工與企業(yè)共成長(zhǎng)的企業(yè)文化，鼓勵(lì)創(chuàng)新，致力于為員工營(yíng)造充分展示自我才智、發(fā)揮潛能的舞臺(tái)。除了為員工提供極具競(jìng)爭(zhēng)力的薪酬福利待遇外，公司還建立了一整套與員工的職業(yè)生涯發(fā)展相結(jié)合的合理晉升體系，針對(duì)不同特點(diǎn)的員工設(shè)置不同的晉升通道，專(zhuān)業(yè)技能優(yōu)秀的員工可以按照技術(shù)路線晉升，管理才能卓越的員工可以按照職能體系晉升。員工晉升以績(jī)效考核結(jié)果為基礎(chǔ)，同時(shí)又作為薪酬調(diào)整的依據(jù)。公司內(nèi)部空缺崗位優(yōu)先考慮內(nèi)部競(jìng)聘人員，為員工提供廣闊的發(fā)展空間。
公司主頁(yè)