職位描述
數(shù)據(jù)挖掘PythonJavaETLHadoopSparkKafka
崗位職責(zé)：
1.實時&離線運行數(shù)據(jù)倉庫建設(shè)；
2.參與平臺Hadoop/spark/kafka等組件疑難問題的研究和解決；
3.設(shè)計、構(gòu)建和維護可擴展、高性能的數(shù)據(jù)管道，以收集、轉(zhuǎn)換和處理大規(guī)模數(shù)據(jù)，進行高級分析；
4.優(yōu)化數(shù)據(jù)提取、轉(zhuǎn)換和加載（ETL）過程，以提高數(shù)據(jù)質(zhì)量和效率；
5.數(shù)據(jù)中臺化能力（數(shù)據(jù)血緣，元數(shù)據(jù)管理、數(shù)據(jù)安全、MLops等）；
6.參與平臺作業(yè)的性能優(yōu)化與升級；
7.根據(jù)業(yè)務(wù)需求開發(fā)各類工具。
崗位要求：
1.計算機相關(guān)專業(yè)，碩士1年以上工作經(jīng)驗，本科3年以上工作經(jīng)驗；
2.熟練掌握Python/Java/Scala中至少一種編程語言；
3.熟悉HDFS、Spark、Flink、Kafka等相關(guān)開源項目，并從事過海量數(shù)據(jù)的實踐與流數(shù)據(jù)處理經(jīng)驗者優(yōu)先；
4.熟練使用Postgresql或Mysql數(shù)據(jù)庫，了解Clickhouse/Doris等OLAP型數(shù)據(jù)庫的使用；
5.熟練使用常見分布式存儲Redis、ES、Hbase、Hudi等；
6.加分：熟悉Spring boot的框架、微服務(wù)框架等；
7.加分：熟悉數(shù)據(jù)挖掘的常用算法，能夠進行海量數(shù)據(jù)處理和挖掘；有時序數(shù)據(jù)算法工作經(jīng)驗者優(yōu)先。
1.實時&離線運行數(shù)據(jù)倉庫建設(shè)；
2.參與平臺Hadoop/spark/kafka等組件疑難問題的研究和解決；
3.設(shè)計、構(gòu)建和維護可擴展、高性能的數(shù)據(jù)管道，以收集、轉(zhuǎn)換和處理大規(guī)模數(shù)據(jù)，進行高級分析；
4.優(yōu)化數(shù)據(jù)提取、轉(zhuǎn)換和加載（ETL）過程，以提高數(shù)據(jù)質(zhì)量和效率；
5.數(shù)據(jù)中臺化能力（數(shù)據(jù)血緣，元數(shù)據(jù)管理、數(shù)據(jù)安全、MLops等）；
6.參與平臺作業(yè)的性能優(yōu)化與升級；
7.根據(jù)業(yè)務(wù)需求開發(fā)各類工具。
崗位要求：
1.計算機相關(guān)專業(yè)，碩士1年以上工作經(jīng)驗，本科3年以上工作經(jīng)驗；
2.熟練掌握Python/Java/Scala中至少一種編程語言；
3.熟悉HDFS、Spark、Flink、Kafka等相關(guān)開源項目，并從事過海量數(shù)據(jù)的實踐與流數(shù)據(jù)處理經(jīng)驗者優(yōu)先；
4.熟練使用Postgresql或Mysql數(shù)據(jù)庫，了解Clickhouse/Doris等OLAP型數(shù)據(jù)庫的使用；
5.熟練使用常見分布式存儲Redis、ES、Hbase、Hudi等；
6.加分：熟悉Spring boot的框架、微服務(wù)框架等；
7.加分：熟悉數(shù)據(jù)挖掘的常用算法，能夠進行海量數(shù)據(jù)處理和挖掘；有時序數(shù)據(jù)算法工作經(jīng)驗者優(yōu)先。
工作地點
北京海淀區(qū)永澤北路11號縱橫機電南區(qū)
相似職位
北京
平安證券- 數(shù)據(jù)開發(fā)1.2-1.3萬
北京 - 豐臺
先進數(shù)通 - 數(shù)據(jù)開發(fā)-人保財險1.3-1.5萬
北京 - 朝陽
北京南天信息工程有限公司 - 數(shù)據(jù)工程師1.8-2.5萬
北京 - 西城
中國航空規(guī)劃設(shè)計研究總院有限公司 北京 - 石景山
國科電雷(北京)電子裝備技術(shù)有限公司- 高級大數(shù)據(jù)開發(fā)工程師1.6-2萬
北京 - 海淀
中電金信軟件有限公司
熱門公司推薦
- 霸王茶姬招聘
- 肯德基招聘
- 順豐招聘
- 美團招聘
- 京東招聘
- 餓了么招聘
- 比亞迪招聘
- 中國一汽招聘
- 北京汽車招聘
- 蔚來招聘
- 東風(fēng)汽車招聘
- 長城汽車招聘
- 奇瑞汽車招聘
- 理想汽車招聘
- 長鑫存儲招聘
- 天江藥業(yè)招聘
- 藍(lán)月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 聯(lián)想招聘
- ?？低曊衅?/a>
- 寧德時代招聘
- 中興招聘
- 新松招聘
- 京東方招聘
- 申通招聘
- 圓通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麥當(dāng)勞招聘
- 星巴克招聘
- 海底撈招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 騰訊招聘
- 百度招聘
- 快手招聘
- 字節(jié)跳動招聘
- 新華網(wǎng)招聘
- 小米招聘
- 招商銀行招聘
- 中信銀行招聘
- 北京銀行招聘
- 興業(yè)銀行招聘
- 交通銀行招聘
- 建發(fā)集團招聘
- 中國移動招聘
- 中國聯(lián)通招聘
- 中國電信招聘
- 中糧集團招聘
- 國藥控股招聘
- 中廣核招聘
- 中國船舶招聘
- 強生中國招聘
- 匯豐中國招聘
- 宜家招聘
- 立邦中國招聘
- 伊利招聘
- 青島啤酒招聘
- 京港地鐵招聘
- 寶馬招聘
- 小鵬汽車招聘
- 華為招聘
- 特斯拉招聘
- 吉利招聘
- 奔馳招聘
- 海爾招聘
- 美的招聘
- 京東方招聘
- 施耐德電氣招聘
- 德邦物流招聘
職位發(fā)布者
包女士/HRD
剛剛活躍立即溝通
北京德天博誠科技有限公司北京德天博誠科技有限公司成立于2008年，核心團隊由PLM/MES/CAPP/PDM領(lǐng)域的專業(yè)人士構(gòu)成。作為達索系統(tǒng)鉑金代理，是達索智能制造核心合作伙伴，公司集中了制造業(yè)信息化領(lǐng)域的專業(yè)人才、領(lǐng)先技術(shù)和一流產(chǎn)品及服務(wù)等資源優(yōu)勢，形成了具有鮮明特色的核心競爭力，是國內(nèi)具有較強競爭力的制造業(yè)信息化整體解決方案提供商。公司業(yè)務(wù)涵蓋了高科技、汽車、軌道交通等工業(yè)裝備行業(yè)，德天博誠以“產(chǎn)品+集成+服務(wù)”的模式構(gòu)筑制造業(yè)信息化整體解決方案，即以專業(yè)產(chǎn)品為點，為企業(yè)的研發(fā)設(shè)計部門提供功能強大的工具軟件，以管理軟件為線，為整個制造業(yè)企業(yè)提供先進的管理方式及理念。公司逐步形成了三大核心業(yè)務(wù)－－產(chǎn)品研發(fā)、代理銷售、咨詢服務(wù)，為制造業(yè)企業(yè)提供數(shù)字化設(shè)計和制造及數(shù)字化管理解決方案，通過縮短產(chǎn)品上市時間、減少錯誤發(fā)生等為企業(yè)節(jié)省大量開支，達到降本增效的目的，提升企業(yè)的競爭力?！芭c時俱進不斷創(chuàng)新”是德天博誠發(fā)展的原動力。經(jīng)過十幾年的發(fā)展，德天博誠不滿足于僅僅提供優(yōu)質(zhì)產(chǎn)品和先進的技術(shù)，公司正在尋求與客戶建立更深層次的關(guān)系，幫助客戶不斷創(chuàng)新并在市場上取得成功?！爸挥锌蛻臬@得成功，我們才會成功”，這種新的定位使德天博誠真正成為顧客導(dǎo)向型的IT服務(wù)公司。這種理念賦予企業(yè)一個新的身份——建立與客戶的關(guān)系并幫助他們獲得成功。如今，這種理念正滲透在德天博誠的業(yè)務(wù)經(jīng)營中。
公司主頁