国产中文无码av每日更新在线观看, 亚洲天堂中文字幕一区二区三区免费, 国产口爆吞精在线观视频-黄色国产, 92福利-国内精品久久久久久99,亚洲成AV人A片不卡无码,浪潮AV无码专区,老熟女败火白浆,中文字幕日产av,色情日本免费看大片

更新于 7月24日

大數(shù)據(jù)工程師

8000-15000元
  • 蕪湖鳩江區(qū)
  • 3-5年
  • 本科
  • 全職
  • 招5人

職位描述

HadoopSparkFlinkJavaPythonScala
1.大數(shù)據(jù) ETL 開發(fā)與維護(hù)
(1)負(fù)責(zé)數(shù)據(jù)中臺的 ETL 流程設(shè)計(jì)、開發(fā)、調(diào)度與優(yōu)化,包括數(shù)據(jù)抽?。◤臉I(yè)務(wù)庫、日志、第三方接口等數(shù)據(jù)源獲取數(shù)據(jù))、清洗(處理臟數(shù)據(jù)、缺失值、重復(fù)值)、轉(zhuǎn)換(格式轉(zhuǎn)換、關(guān)聯(lián)計(jì)算、聚合等)、加載(寫入數(shù)據(jù)倉庫、數(shù)據(jù)湖等目標(biāo)存儲)。
(2)設(shè)計(jì) ETL 調(diào)度策略,監(jiān)控任務(wù)運(yùn)行狀態(tài),解決數(shù)據(jù)延遲、任務(wù)失敗等問題,保障數(shù)據(jù)鏈路的穩(wěn)定性與高效性。
2.數(shù)據(jù)倉庫(數(shù)倉)建設(shè)與管理
(1)基于業(yè)務(wù)需求和數(shù)據(jù)中臺架構(gòu),設(shè)計(jì)數(shù)倉分層模型(如 ODS、DWD、DWS、ADS 層),定義數(shù)據(jù)實(shí)體、維度、指標(biāo)及關(guān)系,確保數(shù)據(jù)模型的規(guī)范性、可擴(kuò)展性。
(2)負(fù)責(zé)數(shù)倉表結(jié)構(gòu)設(shè)計(jì)、索引優(yōu)化、存儲策略制定,提升數(shù)據(jù)查詢與計(jì)算效率,支撐業(yè)務(wù)分析和數(shù)據(jù)應(yīng)用。
3.數(shù)據(jù)治理實(shí)施
(1)參與數(shù)據(jù)中臺的數(shù)據(jù)治理體系建設(shè),包括數(shù)據(jù)標(biāo)準(zhǔn)(定義核心數(shù)據(jù)資產(chǎn)的命名、格式、含義)、數(shù)據(jù)質(zhì)量(設(shè)計(jì)質(zhì)量規(guī)則,監(jiān)控?cái)?shù)據(jù)完整性、準(zhǔn)確性、一致性,推動問題整改)、數(shù)據(jù)安全(敏感數(shù)據(jù)脫敏、訪問權(quán)限控制)、元數(shù)據(jù)管理(梳理數(shù)據(jù)血緣、資產(chǎn)目錄,提升數(shù)據(jù)可理解性)。
(2)制定數(shù)據(jù)治理流程規(guī)范,協(xié)調(diào)業(yè)務(wù)與技術(shù)團(tuán)隊(duì)落地執(zhí)行,持續(xù)優(yōu)化數(shù)據(jù)資產(chǎn)質(zhì)量。
4.數(shù)據(jù)標(biāo)簽體系與用戶畫像構(gòu)建
(1)基于業(yè)務(wù)場景(如用戶運(yùn)營、精準(zhǔn)營銷)設(shè)計(jì)數(shù)據(jù)標(biāo)簽體系,包括標(biāo)簽層級(基礎(chǔ)標(biāo)簽、衍生標(biāo)簽、預(yù)測標(biāo)簽)、計(jì)算邏輯(如用戶活躍度、消費(fèi)能力標(biāo)簽),并開發(fā)標(biāo)簽計(jì)算腳本。
(2)維護(hù)標(biāo)簽數(shù)據(jù)的更新機(jī)制,確保標(biāo)簽時(shí)效性,支撐用戶畫像、分群分析等數(shù)據(jù)應(yīng)用。
5.數(shù)據(jù)指標(biāo)體系搭建與監(jiān)控
(1)參與業(yè)務(wù)指標(biāo)體系(如核心業(yè)務(wù) KPI、運(yùn)營指標(biāo)、監(jiān)控指標(biāo))的設(shè)計(jì)與定義,將指標(biāo)拆解為可計(jì)算的原子指標(biāo)、派生指標(biāo),形成標(biāo)準(zhǔn)化指標(biāo)庫。
(2)開發(fā)指標(biāo)計(jì)算模型,通過數(shù)據(jù)中臺工具實(shí)現(xiàn)指標(biāo)的自動化計(jì)算、實(shí)時(shí) / 離線更新,并對接數(shù)據(jù)看板,支撐業(yè)務(wù)監(jiān)控與決策。
任職要求:
1.本科及以上學(xué)歷,計(jì)算機(jī)、大數(shù)據(jù)、統(tǒng)計(jì)學(xué)等相關(guān)專業(yè)優(yōu)先;
2.熟練掌握 Hadoop、Spark、Flink 等大數(shù)據(jù)計(jì)算框架,Hive、HBase、ClickHouse、MySQL 等數(shù)據(jù)存儲技術(shù),能獨(dú)立開發(fā) ETL 任務(wù);
3.精通 SQL,熟悉 Python/Scala/Java 等編程語言,具備復(fù)雜數(shù)據(jù)處理邏輯的編碼能力;
4.了解數(shù)據(jù)倉庫建模理論(如星型模型、雪花模型)、維度建模方法,有實(shí)際數(shù)倉建設(shè)經(jīng)驗(yàn);
5.熟悉數(shù)據(jù)治理工具(如元數(shù)據(jù)管理平臺、數(shù)據(jù)質(zhì)量監(jiān)控工具)或相關(guān)方法論者優(yōu)先;
6.具備數(shù)據(jù)中臺或大型數(shù)據(jù)項(xiàng)目經(jīng)驗(yàn),能理解業(yè)務(wù)場景并將其轉(zhuǎn)化為數(shù)據(jù)模型、指標(biāo)或標(biāo)簽體系;
7.具備較強(qiáng)的問題分析與解決能力、跨團(tuán)隊(duì)溝通能力,有項(xiàng)目管理或復(fù)雜流程協(xié)調(diào)經(jīng)驗(yàn)者優(yōu)先。
加分項(xiàng):
有用戶標(biāo)簽體系、畫像系統(tǒng)、指標(biāo)平臺搭建經(jīng)驗(yàn).

工作地點(diǎn)

蕪湖鳩江區(qū)瑞祥路與清風(fēng)路交叉口東北200米

職位發(fā)布者

劉女士/人事經(jīng)理

昨日活躍
立即溝通
公司Logo安徽中充服物聯(lián)網(wǎng)科技有限公司
中充服致力于成為充電服務(wù)整體解決方案提供商,在智能充電領(lǐng)域全面開拓。目前在智能物聯(lián)網(wǎng)管控平臺(中充服物聯(lián)網(wǎng)科技)開發(fā),智能自助設(shè)備研發(fā)、生產(chǎn),設(shè)備銷售、安裝、運(yùn)維(等方面擁有全面解決方案和資源。平臺通過開放API和系列化Agent可實(shí)現(xiàn)與上下游產(chǎn)品功能無縫連接,實(shí)現(xiàn)無人管理、遠(yuǎn)程控制、數(shù)據(jù)上傳、人機(jī)互動以及設(shè)備運(yùn)行狀況實(shí)時(shí)監(jiān)控等操作,為客戶提供一對一高價(jià)值行業(yè)內(nèi)容和服務(wù)。公司自建研發(fā)中心、研發(fā)團(tuán)隊(duì),具備物聯(lián)網(wǎng)平臺研發(fā)創(chuàng)新能力。與安徽工程大學(xué)、安徽信息工程學(xué)院合作,設(shè)立產(chǎn)學(xué)研基地。公司為中國電信、中國鐵塔、中國移動、中國廣電等央企和地方政府實(shí)業(yè)單位提供物聯(lián)網(wǎng)平臺服務(wù),同時(shí)滿足客戶個性化的研發(fā)定制需求。
公司主頁