崗位招聘要求
本科及以上學歷，軟件工程、數(shù)據(jù)科學、計算科學、信息管理等相關專業(yè)；6年以上軟件開發(fā)經驗，3年及以上大數(shù)據(jù)項目實戰(zhàn)開發(fā)經驗，需具備大型數(shù)據(jù)平臺從0到1搭建的完整項目經驗。
熟練掌握基于Hadoop/Spark/Flink等生態(tài)的企業(yè)級大數(shù)據(jù)平臺架構設計與開發(fā)，能獨立負責數(shù)據(jù)全鏈路（采集、存儲、處理、分析）的方案設計與落地實施。
精通企業(yè)級離線與實時數(shù)據(jù)倉庫的設計規(guī)范、分層建模（如星型/雪花模型）及研發(fā)全流程，能主導數(shù)據(jù)倉庫的搭建、優(yōu)化與迭代工作。
熟練使用SQL（含HiveQL/Spark SQL等大數(shù)據(jù)場景SQL）及主流NoSQL數(shù)據(jù)庫（如HBase、MongoDB）；具備扎實的數(shù)據(jù)建模能力；掌握容器化部署（Docker/Kubernetes）或BI可視化工具（Tableau、Quick BI等）的使用。

崗位工作內容

1.主導或核心參與企業(yè)級大數(shù)據(jù)平臺、數(shù)據(jù)倉庫及數(shù)據(jù)湖的架構設計與開發(fā)工作，負責Hadoop、Spark、Flink等核心組件的選型、部署配置與技術落地。
2. 設計并搭建高可用的數(shù)據(jù)采集鏈路，基于Kafka、Flume等組件實現(xiàn)多源異構數(shù)據(jù)（日志、業(yè)務數(shù)據(jù)庫、第三方接口等）的高效采集；開發(fā)、維護核心ETL任務，完成數(shù)據(jù)清洗、轉換、加載全流程；構建穩(wěn)定的實時/離線數(shù)據(jù)處理流水線，支撐業(yè)務報表生成、AI建模訓練等核心業(yè)務場景，保障數(shù)據(jù)鏈路的穩(wěn)定與高效。
3. 主導數(shù)據(jù)倉庫分層架構（ODS/DWD/DWS/ADS）及數(shù)據(jù)模型的設計與優(yōu)化；推動企業(yè)數(shù)據(jù)治理體系建設，覆蓋元數(shù)據(jù)管理、數(shù)據(jù)血緣追蹤、數(shù)據(jù)質量監(jiān)控與告警等核心模塊，確保數(shù)據(jù)的準確性、一致性、完整性與可追溯性。
4.持續(xù)監(jiān)控大數(shù)據(jù)平臺性能及數(shù)據(jù)處理任務運行狀態(tài)，針對SQL查詢、Spark/Flink作業(yè)進行性能調優(yōu)。