工作職責(zé):
1、數(shù)據(jù)倉庫規(guī)劃與實施:參與公司數(shù)據(jù)倉庫的規(guī)劃與實施,確保數(shù)據(jù)準(zhǔn)確、及時地支持業(yè)務(wù)決策;
2、全量 & 增量數(shù)據(jù)接入:負(fù)責(zé)集團(tuán)全鏈路系統(tǒng)數(shù)據(jù)的全量/增量接入,具備保障日均 1000+ 任務(wù)成功率 ≥ 99% 的實戰(zhàn)經(jīng)驗;
3、平臺穩(wěn)定性與性能治理:數(shù)據(jù)平臺性能與作業(yè)監(jiān)控,具備把單表 千萬行 T+1 離線同步時長優(yōu)化的實戰(zhàn)經(jīng)驗;
4、自動化腳本:通過腳本或工具把重復(fù)動作(建表、映射、調(diào)度、校驗、血緣)變成一鍵完成;
5、數(shù)據(jù)質(zhì)量前置技術(shù)調(diào)研與實施:持續(xù)關(guān)注大數(shù)據(jù)領(lǐng)域的前沿技術(shù),與團(tuán)隊共同調(diào)研并實踐如數(shù)據(jù)湖、Flinkcdc、實時數(shù)倉等熱門技術(shù),保持公司的技術(shù)領(lǐng)先地位;
任職要求:
1、技術(shù)能力:精通Linux操作系統(tǒng),熟練掌握至少一種主流編程語言(如Shell + Python/Java);
2、項目經(jīng)驗:具有5年以上數(shù)據(jù)倉庫、ETL、大數(shù)據(jù)開發(fā)等相關(guān)項目經(jīng)驗,主導(dǎo)過 5 個以上業(yè)務(wù)系統(tǒng)對接;
3、技術(shù)棧:深入了解大數(shù)據(jù)處理技術(shù)棧,如Hadoop、Spark、Hive等,并能熟練掌握DataX、DolphinScheduler、Flink、Doris、Clickhouse等工具;
4、數(shù)據(jù)建模能力:具備扎實的數(shù)據(jù)建?;A(chǔ),能夠?qū)?fù)雜業(yè)務(wù)需求拆解為可執(zhí)行的數(shù)據(jù)建模任務(wù),并根據(jù)業(yè)務(wù)邏輯進(jìn)行數(shù)據(jù)分層設(shè)計;
5、行業(yè)經(jīng)驗:對零售、供應(yīng)鏈、財務(wù)等業(yè)務(wù)場景有理解,能把業(yè)務(wù)問題翻譯成數(shù)據(jù)語言。
6、本科學(xué)歷及以上。