一、崗位職責(zé):
1. 負(fù)責(zé)公司人、財(cái)、業(yè)等場景維度的指標(biāo)體系和數(shù)據(jù)模型的設(shè)計(jì)和規(guī)范化建設(shè),對全域數(shù)據(jù)資產(chǎn)進(jìn)行統(tǒng)一管控;
2. 負(fù)責(zé)數(shù)據(jù)平臺的數(shù)據(jù)任務(wù)開發(fā)(包括離線/實(shí)時),完成數(shù)據(jù)融合、數(shù)據(jù)建模、任務(wù)調(diào)度、數(shù)據(jù)權(quán)限管理等工作;
3. 搭建數(shù)據(jù)質(zhì)量和運(yùn)維監(jiān)控體系,實(shí)現(xiàn)全鏈路任務(wù)監(jiān)控、異常告警及自動化容錯機(jī)制, 建立數(shù)據(jù)質(zhì)量閉環(huán)機(jī)制;
4. 數(shù)據(jù)產(chǎn)品交付過程中的聯(lián)調(diào)和問題排查,提供問題診斷及解決方案,并跟進(jìn)問題的解決;
5. 與產(chǎn)研團(tuán)隊(duì)、業(yè)務(wù)部門緊密配合,深入理解并高效支持業(yè)務(wù)需求,提供高質(zhì)量的數(shù)據(jù)服務(wù)。
6、主導(dǎo)公司現(xiàn)有業(yè)務(wù)平臺數(shù)據(jù)處理、分析和服務(wù)的研發(fā),統(tǒng)籌數(shù)據(jù)采集、清洗、存儲、分析全流程,構(gòu)建數(shù)據(jù)模型,挖掘數(shù)據(jù)價值,為業(yè)務(wù)決策提供有力支持。
7、深入理解業(yè)務(wù)需求,設(shè)計(jì)和實(shí)現(xiàn)高效的數(shù)據(jù)處理流程,解決海量數(shù)據(jù)存儲、計(jì)算和分析中的技術(shù)難題。
8、參與大數(shù)據(jù)技術(shù)體系選型、架構(gòu)設(shè)計(jì),根據(jù)業(yè)務(wù)場景提供最優(yōu)的解決方案
9、跟蹤大數(shù)據(jù)領(lǐng)域前沿技術(shù)發(fā)展趨勢,評估新技術(shù)并推動其在實(shí)際項(xiàng)目中的應(yīng)用,提升平臺技術(shù)競爭力。
10、指導(dǎo)團(tuán)隊(duì)成員解決技術(shù)難題,與跨部門團(tuán)隊(duì)緊密協(xié)作,推動平臺落地及演進(jìn),促進(jìn)技術(shù)與業(yè)務(wù)深度融合。
二、崗位要求:
1、計(jì)算機(jī)科學(xué)、軟件工程或相關(guān)專業(yè)本科及以上學(xué)歷,5年以上大數(shù)據(jù)開發(fā)經(jīng)驗(yàn),具備扎實(shí)的計(jì)算機(jī)基礎(chǔ)知識和良好的編程功底。
2、精通Java/Scala/Python等至少一種編程語言,熟悉Linux操作系統(tǒng)和常用命令,具備良好的代碼風(fēng)格和編程習(xí)慣
3、深入理解Hadoop生態(tài)圈,熟悉Spark、Flink等分布式計(jì)算框架的原理和應(yīng)用,具備豐富的調(diào)優(yōu)經(jīng)驗(yàn)
4、熟悉Kafka、HBase、Hive等大數(shù)據(jù)相關(guān)技術(shù)中間件,了解其架構(gòu)設(shè)計(jì)、核心原理和優(yōu)化策略,具備實(shí)際運(yùn)維經(jīng)驗(yàn)。
5、熟悉數(shù)據(jù)庫原理,熟練使用SQL語言,有較強(qiáng)的數(shù)據(jù)建模和數(shù)據(jù)ETL能力,有數(shù)倉開發(fā)經(jīng)驗(yàn)優(yōu)先。
6、具有較強(qiáng)的業(yè)務(wù)理解能力,擅長數(shù)據(jù)采集、清洗、分析等環(huán)節(jié),熟悉流處理和批處理的場景和模式;
7、具備大規(guī)模數(shù)據(jù)的處理和分析的經(jīng)驗(yàn),能夠發(fā)現(xiàn)系統(tǒng)的性能瓶頸、設(shè)計(jì)缺陷,并提出改進(jìn)方案和進(jìn)行實(shí)施;
8、具備良好的溝通能力和團(tuán)隊(duì)合作精神,有強(qiáng)烈的責(zé)任心和解決問題的能力,能夠獨(dú)立承擔(dān)項(xiàng)目并帶領(lǐng)團(tuán)隊(duì)完成任務(wù)。