崗位職責:
1、負責車聯(lián)網(wǎng)、研發(fā)過程、項目管理、智能運營等領域大數(shù)據(jù)開發(fā)過程;
2、負責核心業(yè)務系統(tǒng)的大數(shù)據(jù)ETL開發(fā)工作,使用Hive和Spark SQL完成數(shù)據(jù)抽取、轉換與加載,優(yōu)化ETL流程;
3、負責大數(shù)據(jù)平臺的搭建與維護,基于 Hadoop、Spark 等技術棧構建穩(wěn)定高效的數(shù)據(jù)處理架構,保障車輛實時數(shù)據(jù)的接入、存儲與計算能力,解決平臺運行中的技術瓶頸,提升數(shù)據(jù)處理吞吐量與響應速度;
4、參與核心數(shù)據(jù)模型的設計與優(yōu)化,結合實際業(yè)務場景,構建標準化的數(shù)據(jù)維度與指標體系。
素質要求:
1、本科及以上學歷,計算機或相關專業(yè);
2、5年以上大數(shù)據(jù)開發(fā)經(jīng)驗;具有汽車行業(yè)相關經(jīng)驗或大廠工作經(jīng)驗者優(yōu)先;
3、精通Java,有架構設計經(jīng)驗,熟悉微服務架構,對springboot/spring cloud體系有深入研究;
4、熟悉hadoop、hbase、hive、flink、spark、doris、trino等大數(shù)據(jù)平臺組件;
5、深入理解數(shù)據(jù)倉庫架構,能夠高效完成數(shù)據(jù)建模、ETL設計與優(yōu)化;
6、有olap調優(yōu)經(jīng)驗優(yōu)先、大數(shù)據(jù)查詢性能優(yōu)化經(jīng)驗、數(shù)據(jù)湖架構及技術實踐優(yōu)先;
7、有責任心, 學習能力強, 工作積極主動, 思路清晰,擅長溝通、有團隊合作精神。