崗位職責(zé)：
承擔(dān)智能數(shù)據(jù)平臺領(lǐng)域新技術(shù)、新架構(gòu)的預(yù)研與驗證工作，輸出可落地的技術(shù)方案，平衡技術(shù)前瞻性與當(dāng)前業(yè)務(wù)需求，應(yīng)對系統(tǒng)間數(shù)據(jù)標(biāo)準(zhǔn)不統(tǒng)一的問題，推動技術(shù)迭代升級。
? 主導(dǎo)AI業(yè)務(wù)場景下大數(shù)據(jù)技術(shù)架構(gòu)的設(shè)計、搭建與持續(xù)優(yōu)化，支撐AI模型訓(xùn)練、推理等數(shù)據(jù)需求。
? 建立數(shù)據(jù)標(biāo)準(zhǔn)、質(zhì)量監(jiān)控及元數(shù)據(jù)管理體系，確保數(shù)據(jù)的準(zhǔn)確、一致與可信；推動跨部門協(xié)作，將治理規(guī)范融入日常流程，并實現(xiàn)自動化監(jiān)控。
? 設(shè)計數(shù)據(jù)分級、權(quán)限控制、審計追蹤及容災(zāi)備份方案，滿足法規(guī)要求；動態(tài)跟進(jìn)日益嚴(yán)格的數(shù)據(jù)安全法規(guī)，在保障安全與促進(jìn)數(shù)據(jù)價值利用間取得平衡
? 負(fù)責(zé)智能數(shù)據(jù)平臺核心任務(wù)模塊的需求分析、方案設(shè)計、編碼開發(fā)與上線交付工作。
? 負(fù)責(zé)智能數(shù)據(jù)平臺核心大數(shù)據(jù)組件的性能監(jiān)控與優(yōu)化調(diào)優(yōu)工作，保障平臺穩(wěn)定高效運行
任職要求：
基本條件：
? 精通大數(shù)據(jù)開發(fā)領(lǐng)域主流存儲、計算引擎及相關(guān)技術(shù)棧，熟練掌握Hadoop、Spark、Flink、Doris、Hive、Kafka、DolphinScheduler其中四種以上組件的生產(chǎn)經(jīng)驗。
? 熟練掌握數(shù)據(jù)倉庫核心技術(shù)，深入理解維度建模理論體系，具備完整的維度建模落地實施經(jīng)驗（含需求分析、模型設(shè)計、開發(fā)上線等全流程）。
? 至少熟練掌握J(rèn)ava、Python、Scala、Shell、SQL五種語言中的兩種及以上，具備扎實的編碼能力；熟悉Linux操作系統(tǒng)，能熟練進(jìn)行系統(tǒng)環(huán)境配置、腳本編寫及問題排查。
? 具備豐富的數(shù)據(jù)倉庫建模實戰(zhàn)經(jīng)驗，熟悉基于開源數(shù)據(jù)平臺的全鏈路閉環(huán)運作流程，可獨立完成平臺搭建、數(shù)據(jù)開發(fā)、日常運維、性能調(diào)優(yōu)等全流程工作，能深度結(jié)合業(yè)務(wù)場景輸出技術(shù)解決方案。
? 擁有3年及以上大數(shù)據(jù)領(lǐng)域相關(guān)工作經(jīng)驗，有大型數(shù)據(jù)項目（數(shù)倉/數(shù)據(jù)平臺）全生命周期管理經(jīng)驗者優(yōu)先。
優(yōu)先條件：
? 具備數(shù)據(jù)湖架構(gòu)設(shè)計與落地實戰(zhàn)經(jīng)驗，熟悉數(shù)據(jù)湖分層管理、數(shù)據(jù)治理及數(shù)據(jù)安全相關(guān)方案。
? 了解或熟悉AI大模型相關(guān)技術(shù)及應(yīng)用場景，對AI領(lǐng)域有濃厚興趣，有大數(shù)據(jù)與AI結(jié)合項目經(jīng)驗者優(yōu)先。
? 擁有豐富的數(shù)據(jù)倉庫、數(shù)據(jù)湖一體化建設(shè)經(jīng)驗。
? 深入理解湖倉一體、流批一體技術(shù)架構(gòu)理念，具備相關(guān)架構(gòu)設(shè)計、開發(fā)及調(diào)優(yōu)經(jīng)驗者優(yōu)先。