崗位職責:
1.負責大數(shù)據(jù)相關項目的數(shù)據(jù)流設計與開發(fā)、業(yè)務需求分析和數(shù)據(jù)挖掘建模等,構(gòu)建業(yè)務數(shù)據(jù)分析體系,協(xié)助業(yè)務確定各項業(yè)務數(shù)據(jù)指標;
2.運用Hadoop、Spark等工具完成海量數(shù)據(jù)清洗、分析與深度挖掘,揭示業(yè)務規(guī)律與發(fā)展趨勢;
3.參與公司大數(shù)據(jù)平臺數(shù)據(jù)倉庫建設,任務調(diào)度,監(jiān)控預警,持續(xù)完善大數(shù)據(jù)平臺,保證穩(wěn)定性與安全性;
4.參與公司數(shù)據(jù)中臺規(guī)劃,制定并完善開發(fā)規(guī)范、標準和流程;
5.深入業(yè)務,理解業(yè)務運作邏輯,按照業(yè)務部門需求或者數(shù)據(jù)分析需要,開發(fā)各類主題報表,并進行可視化展示;
6.應用先進的統(tǒng)計建模、數(shù)據(jù)挖掘、機器學習等方法建立數(shù)據(jù)模型進行場景預測、分析;
7.持續(xù)探索前沿數(shù)據(jù)分析工具與技術,優(yōu)化數(shù)據(jù)平臺功能與分析方法,提升團隊技術效能;
8.建立跨部門協(xié)作機制,精準傳遞數(shù)據(jù)洞察結(jié)果與策略建議,賦能業(yè)務增長與創(chuàng)新。
崗位任職要求:
1.本科及以上學歷。具備7年以上大型數(shù)據(jù)倉庫/大數(shù)據(jù)/BI/數(shù)據(jù)分析的整體實施經(jīng)驗,實際參與過大型數(shù)據(jù)分析類項目的需求、開發(fā)、維護等各項工作;
2.精通 Java/Scala/Python 等編程語言,熟悉 Linux 操作系統(tǒng);
3.熟練掌握SQL編程和優(yōu)化經(jīng)驗,熟悉關系型數(shù)據(jù)庫如Oracle, Mysql等;
4.熟悉至少一種實時計算引擎如SparkStreaming, Flink, Storm等;
5.深入理解HDFS、YARN、MapReduce、Hive、Spark、HBase、Trino 等組件的原理和應用;
6.了解基本的數(shù)據(jù)加工、計算、分析、數(shù)據(jù)管理方法與流程;
7.熟悉ETL、報表、調(diào)度等多種產(chǎn)品機制,對BI報表開發(fā)和可視化展現(xiàn)有充分的理解。有BI分析工具使用經(jīng)驗者優(yōu)先;
8.有財務領域大數(shù)據(jù)平臺咨詢經(jīng)驗,熟悉財務風險管理、信用評估等模型,熟悉財務數(shù)據(jù)分析工具者優(yōu)先;
9.有航運業(yè)相關背景或財務相關項目背景者優(yōu)先。