本崗位駐場安徽蕪湖奇瑞汽車,為外包崗!??!
崗位職責:
1、負責大數(shù)據(jù)平臺的整體架構(gòu)設(shè)計,確保系統(tǒng)的高性能、高可用性和可擴展性。
2、制定技術(shù)路線圖,規(guī)劃云端數(shù)據(jù)中臺的技術(shù)演進方向。
3、評估和選擇適合的大數(shù)據(jù)技術(shù)棧(如Hadoop、Spark、Flink、Kafka等)。
4、設(shè)計和實現(xiàn)數(shù)據(jù)采集、存儲、處理和分析的解決方案。
5、設(shè)計數(shù)據(jù)治理策略,確保數(shù)據(jù)質(zhì)量、安全性和合規(guī)性。
6、優(yōu)化數(shù)據(jù)存儲和計算性能,解決高并發(fā)、高負載場景下的技術(shù)問題。
任職要求:
1、8年以上大數(shù)據(jù)領(lǐng)域工作經(jīng)驗,3年以上大數(shù)據(jù)架構(gòu)設(shè)計經(jīng)驗。
2、精通大數(shù)據(jù)技術(shù)棧(如Hadoop、Spark、Flink、Kafka等)。
3、精通數(shù)據(jù)倉庫和數(shù)據(jù)湖架構(gòu)設(shè)計,了解相關(guān)技術(shù)(如Hive、HBase、Iceberg等)。
4、精通主流數(shù)據(jù)庫(如MySQL、PostgreSQL、Oracle等),具備SQL優(yōu)化經(jīng)驗。
5、精通消息隊列(如Kafka、RabbitMQ等)和緩存技術(shù)(如Redis、Memcached等)。
6、熟悉容器化技術(shù)(如Docker、Kubernetes)。