崗位職責:
1、負責CDP平臺的日常維護,和周邊系統(tǒng)的對接,方案的確認和評審;
2、持續(xù)對CDP平臺的功能和性能進行優(yōu)化,提升用戶體驗;
3、負責系統(tǒng)日常工作流的管理及問題排查;
4、負責和周邊系統(tǒng)的技術(shù)接口對接,并做好日常維護;
5、cdp和周邊系統(tǒng)的上下游的接口交互技術(shù)方案的確認和技術(shù)管理。
任職要求:
1、計算機或相關(guān)專業(yè)本科及以上學(xué)歷,5年及以上大數(shù)據(jù)或數(shù)據(jù)相關(guān)領(lǐng)域的工作經(jīng)驗;
2、熟練使用大數(shù)據(jù)基礎(chǔ)hadoop,了解hdfs、yarn、mapreduce的工作原理;
3、熟練使用Hive等數(shù)據(jù)處理工具,以及Kafka、Flink等中間件的開發(fā)使用和調(diào)優(yōu);
4、熟悉kudu、hbase,資源管理、工作流調(diào)度等常用組件的日常維護;
5、熟悉常用的數(shù)據(jù)庫tdsql,mysql,clickhouse等及性能優(yōu)化,并可以做到日常維護
5、具備團隊合作精神,能夠積極參與團隊項目和工作;
6、具備創(chuàng)新思維和解決問題的能力,能夠提出新的數(shù)據(jù)應(yīng)用方案和優(yōu)化建議;
7、有CDP客戶數(shù)據(jù)平臺等相關(guān)平臺開發(fā)經(jīng)驗;有參與過大型數(shù)據(jù)項目或數(shù)據(jù)分析項目的經(jīng)驗優(yōu)先;
8、具有保險行業(yè)數(shù)據(jù)平臺開發(fā)經(jīng)驗優(yōu)先。