職位描述
JavaHadoopSpark數(shù)據(jù)治理ETL數(shù)據(jù)倉(cāng)庫(kù)SqlFlink
崗位職責(zé)
1. 數(shù)據(jù)治理與開發(fā)
- 負(fù)責(zé)政務(wù)大數(shù)據(jù)平臺(tái)的數(shù)據(jù)接入、清洗、治理全流程開發(fā)工作
- 使用ETL工具（如DataX、Kettle、Informatica等）進(jìn)行數(shù)據(jù)集成與轉(zhuǎn)換
- 基于數(shù)倉(cāng)理論（ODS/DWD/DWS/ADS）進(jìn)行數(shù)據(jù)分層建模與開發(fā)
- 設(shè)計(jì)和優(yōu)化數(shù)據(jù)質(zhì)量監(jiān)控體系，提升數(shù)據(jù)準(zhǔn)確性
2. 系統(tǒng)開發(fā)與優(yōu)化
- 使用Java主流框架（SpringBoot/SpringCloud）開發(fā)數(shù)據(jù)服務(wù)API
- 負(fù)責(zé)大數(shù)據(jù)平臺(tái)核心功能模塊的設(shè)計(jì)與開發(fā)
- 優(yōu)化數(shù)據(jù)處理性能，解決高并發(fā)、大數(shù)據(jù)量場(chǎng)景下的技術(shù)難題
3. 系統(tǒng)運(yùn)維與問題排查
- 負(fù)責(zé)大數(shù)據(jù)平臺(tái)的問題排查與修復(fù)，包括代碼層優(yōu)化
- 維護(hù)消息中間件（Kafka/RabbitMQ/Redis）的穩(wěn)定運(yùn)行
- 配合運(yùn)維團(tuán)隊(duì)進(jìn)行系統(tǒng)監(jiān)控、性能調(diào)優(yōu)
4. 前端開發(fā)支持
- 使用jQuery等前端技術(shù)配合完成管理后臺(tái)開發(fā)
- 開發(fā)數(shù)據(jù)可視化相關(guān)功能
1. 數(shù)據(jù)治理與開發(fā)
- 負(fù)責(zé)政務(wù)大數(shù)據(jù)平臺(tái)的數(shù)據(jù)接入、清洗、治理全流程開發(fā)工作
- 使用ETL工具（如DataX、Kettle、Informatica等）進(jìn)行數(shù)據(jù)集成與轉(zhuǎn)換
- 基于數(shù)倉(cāng)理論（ODS/DWD/DWS/ADS）進(jìn)行數(shù)據(jù)分層建模與開發(fā)
- 設(shè)計(jì)和優(yōu)化數(shù)據(jù)質(zhì)量監(jiān)控體系，提升數(shù)據(jù)準(zhǔn)確性
2. 系統(tǒng)開發(fā)與優(yōu)化
- 使用Java主流框架（SpringBoot/SpringCloud）開發(fā)數(shù)據(jù)服務(wù)API
- 負(fù)責(zé)大數(shù)據(jù)平臺(tái)核心功能模塊的設(shè)計(jì)與開發(fā)
- 優(yōu)化數(shù)據(jù)處理性能，解決高并發(fā)、大數(shù)據(jù)量場(chǎng)景下的技術(shù)難題
3. 系統(tǒng)運(yùn)維與問題排查
- 負(fù)責(zé)大數(shù)據(jù)平臺(tái)的問題排查與修復(fù)，包括代碼層優(yōu)化
- 維護(hù)消息中間件（Kafka/RabbitMQ/Redis）的穩(wěn)定運(yùn)行
- 配合運(yùn)維團(tuán)隊(duì)進(jìn)行系統(tǒng)監(jiān)控、性能調(diào)優(yōu)
4. 前端開發(fā)支持
- 使用jQuery等前端技術(shù)配合完成管理后臺(tái)開發(fā)
- 開發(fā)數(shù)據(jù)可視化相關(guān)功能
任職要求
1. 必備技能
- 3年以上大數(shù)據(jù)平臺(tái)開發(fā)或數(shù)據(jù)治理相關(guān)經(jīng)驗(yàn)
- 精通Java開發(fā)，熟練掌握SpringBoot/SpringCloud等主流框架
- 熟練使用ETL工具進(jìn)行數(shù)據(jù)清洗與集成
- 熟悉數(shù)據(jù)倉(cāng)庫(kù)理論（維度建模、數(shù)據(jù)分層）
- 熟悉Kafka、RabbitMQ、Redis等消息中間件的開發(fā)應(yīng)用
- 具備Linux環(huán)境下的問題排查能力
2. 技術(shù)棧要求
- 后端：Java8+、SpringBoot、MyBatis、SpringCloud
- 大數(shù)據(jù)：Hadoop、Hive、Spark、Flink（至少熟悉一種）
- 數(shù)據(jù)庫(kù)：MySQL、Oracle、PostgreSQL
- 前端：jQuery、HTML5、CSS3（能獨(dú)立完成簡(jiǎn)單頁(yè)面開發(fā)）
3. 加分項(xiàng)
- 有政務(wù)大數(shù)據(jù)項(xiàng)目經(jīng)驗(yàn)，熟悉政務(wù)數(shù)據(jù)標(biāo)準(zhǔn)
- 熟悉數(shù)據(jù)治理工具（如Atlas、DataHub）
- 了解微服務(wù)架構(gòu)和容器化技術(shù)（Docker/K8s）
- 有數(shù)據(jù)可視化開發(fā)經(jīng)驗(yàn)（Echarts等）
4. 軟技能
- 良好的編碼規(guī)范和文檔習(xí)慣
- 較強(qiáng)的邏輯思維和問題解決能力
- 能承受一定工作壓力，具備團(tuán)隊(duì)協(xié)作精神
1. 必備技能
- 3年以上大數(shù)據(jù)平臺(tái)開發(fā)或數(shù)據(jù)治理相關(guān)經(jīng)驗(yàn)
- 精通Java開發(fā)，熟練掌握SpringBoot/SpringCloud等主流框架
- 熟練使用ETL工具進(jìn)行數(shù)據(jù)清洗與集成
- 熟悉數(shù)據(jù)倉(cāng)庫(kù)理論（維度建模、數(shù)據(jù)分層）
- 熟悉Kafka、RabbitMQ、Redis等消息中間件的開發(fā)應(yīng)用
- 具備Linux環(huán)境下的問題排查能力
2. 技術(shù)棧要求
- 后端：Java8+、SpringBoot、MyBatis、SpringCloud
- 大數(shù)據(jù)：Hadoop、Hive、Spark、Flink（至少熟悉一種）
- 數(shù)據(jù)庫(kù)：MySQL、Oracle、PostgreSQL
- 前端：jQuery、HTML5、CSS3（能獨(dú)立完成簡(jiǎn)單頁(yè)面開發(fā)）
3. 加分項(xiàng)
- 有政務(wù)大數(shù)據(jù)項(xiàng)目經(jīng)驗(yàn)，熟悉政務(wù)數(shù)據(jù)標(biāo)準(zhǔn)
- 熟悉數(shù)據(jù)治理工具（如Atlas、DataHub）
- 了解微服務(wù)架構(gòu)和容器化技術(shù)（Docker/K8s）
- 有數(shù)據(jù)可視化開發(fā)經(jīng)驗(yàn)（Echarts等）
4. 軟技能
- 良好的編碼規(guī)范和文檔習(xí)慣
- 較強(qiáng)的邏輯思維和問題解決能力
- 能承受一定工作壓力，具備團(tuán)隊(duì)協(xié)作精神
備注：本崗位要求同時(shí)具備大數(shù)據(jù)治理能力和Java全棧開發(fā)能力，特別歡迎有政務(wù)行業(yè)經(jīng)驗(yàn)或大型數(shù)據(jù)平臺(tái)開發(fā)經(jīng)驗(yàn)的候選人！
工作地點(diǎn)
大連市沙河口區(qū)中山路740號(hào)
相似職位
- 高級(jí)數(shù)據(jù)工程師 ? 大連? IT2.5-3.5萬(wàn)
大連 - 甘井子
曼迪匹艾(大連)科技服務(wù)有限公司 - 對(duì)日數(shù)據(jù)開發(fā)(Datastage/Powercenter/BI)1.3-2.5萬(wàn)
大連 - 沙河口
杭州優(yōu)燦科技有限公司 - 高級(jí)數(shù)據(jù)開發(fā)工程師（大連）1.1-1.6萬(wàn)
大連 - 中山
京北方 - 數(shù)據(jù)工程師1-1.6萬(wàn)
大連 - 甘井子
新源動(dòng)力 - 大數(shù)據(jù)開發(fā)工程師1.2-2萬(wàn)
大連 - 甘井子
上海欽誠(chéng)信息科技有限公司 - 數(shù)據(jù)開發(fā)工程師3000-6000元
大連
大連久鵬電子系統(tǒng)工程有限公司
熱門公司推薦
- 霸王茶姬招聘
- 肯德基招聘
- 順豐招聘
- 美團(tuán)招聘
- 京東招聘
- 餓了么招聘
- 比亞迪招聘
- 中國(guó)一汽招聘
- 北京汽車招聘
- 蔚來招聘
- 東風(fēng)汽車招聘
- 長(zhǎng)城汽車招聘
- 奇瑞汽車招聘
- 理想汽車招聘
- 長(zhǎng)鑫存儲(chǔ)招聘
- 天江藥業(yè)招聘
- 藍(lán)月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 聯(lián)想招聘
- 海康威視招聘
- 寧德時(shí)代招聘
- 中興招聘
- 新松招聘
- 京東方招聘
- 申通招聘
- 圓通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麥當(dāng)勞招聘
- 星巴克招聘
- 海底撈招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 騰訊招聘
- 百度招聘
- 快手招聘
- 字節(jié)跳動(dòng)招聘
- 新華網(wǎng)招聘
- 小米招聘
- 招商銀行招聘
- 中信銀行招聘
- 北京銀行招聘
- 興業(yè)銀行招聘
- 交通銀行招聘
- 建發(fā)集團(tuán)招聘
- 中國(guó)移動(dòng)招聘
- 中國(guó)聯(lián)通招聘
- 中國(guó)電信招聘
- 中糧集團(tuán)招聘
- 國(guó)藥控股招聘
- 中廣核招聘
- 中國(guó)船舶招聘
- 強(qiáng)生中國(guó)招聘
- 匯豐中國(guó)招聘
- 宜家招聘
- 立邦中國(guó)招聘
- 伊利招聘
- 青島啤酒招聘
- 京港地鐵招聘
- 寶馬招聘
- 小鵬汽車招聘
- 華為招聘
- 特斯拉招聘
- 吉利招聘
- 奔馳招聘
- 海爾招聘
- 美的招聘
- 京東方招聘
- 施耐德電氣招聘
- 德邦物流招聘
職位發(fā)布者
王女士/財(cái)務(wù)總監(jiān)
當(dāng)前在線立即溝通
大連九州通建實(shí)業(yè)有限公司大連九州通建實(shí)業(yè)有限公司成立于2009年，注冊(cè)資金1000萬(wàn)元。公司主營(yíng)業(yè)包括：電子與智能化工程、IT運(yùn)維、數(shù)據(jù)中心建設(shè)和運(yùn)營(yíng)服務(wù)、醫(yī)療領(lǐng)域軟件開發(fā)人機(jī)交互自助服務(wù)，以及醫(yī)療云自助服務(wù)平臺(tái)、公安自助服務(wù)平臺(tái)和政務(wù)自助服務(wù)平臺(tái)等。公司承擔(dān)過沈陽(yáng)電信百科數(shù)據(jù)中心、大連電信數(shù)據(jù)中心、大連聯(lián)通黑石礁數(shù)據(jù)中心建設(shè)、運(yùn)營(yíng)、運(yùn)維。公司軟件開發(fā)業(yè)務(wù)涉及金融、供應(yīng)鏈、租賃、電商等領(lǐng)域。同時(shí)在醫(yī)療領(lǐng)域，社保數(shù)據(jù)社會(huì)化應(yīng)用、醫(yī)保監(jiān)管、醫(yī)院的相關(guān)軟件也有相關(guān)產(chǎn)品。公司有11年的豐富的IT服務(wù)經(jīng)驗(yàn)，參與并承擔(dān)政府及國(guó)內(nèi)知名企業(yè)的IT運(yùn)維及服務(wù)。九州通建致力于成為一家提供專業(yè)、高效計(jì)算機(jī)技術(shù)服務(wù)的企業(yè)。九州通建的企業(yè)文化：致力于大數(shù)據(jù)與云計(jì)算、產(chǎn)業(yè)規(guī)劃與技術(shù)創(chuàng)新研究；不斷學(xué)習(xí)總結(jié)與共享。讓客戶滿意，是我們的最終目的。
公司主頁(yè)