崗位職責(zé):
1. 參與公司數(shù)據(jù)中臺、大數(shù)據(jù)平臺及數(shù)據(jù)倉庫的整體規(guī)劃,架構(gòu)設(shè)計和研發(fā);
2. 參與建設(shè)統(tǒng)一的數(shù)據(jù)體系,制定并推動數(shù)據(jù)治理體系的落地;
3. 對數(shù)據(jù)采集、數(shù)據(jù)融合、數(shù)據(jù)質(zhì)量、數(shù)據(jù)應(yīng)用鏈路有深入理解,并能協(xié)助業(yè)務(wù)數(shù)據(jù)集市建設(shè),搭建業(yè)務(wù)領(lǐng)域模型。
任職資格:
1. 計算機(jī)相關(guān)專業(yè)碩士學(xué)歷,3年及以上相關(guān)工作經(jīng)歷;
2. 精通大數(shù)據(jù)技術(shù)生態(tài)相關(guān)技術(shù)(例如:Hadoop、MapReduce、Hive、Hbase等),并具備豐富的數(shù)據(jù)倉庫、數(shù)據(jù)中臺架構(gòu)設(shè)計和實(shí)施經(jīng)驗(yàn),有落地的項(xiàng)目;
3. 從事大數(shù)據(jù)領(lǐng)域至少2年以上,熟悉數(shù)據(jù)倉庫模型設(shè)計與ETL開發(fā)經(jīng)驗(yàn) ,掌握Kimbal的維度建模設(shè)計方法,具備海量數(shù)據(jù)加工處理(ETL)相關(guān)經(jīng)驗(yàn);
4. 有實(shí)時ETL研發(fā)經(jīng)驗(yàn),對分布式實(shí)時大數(shù)據(jù)處理系統(tǒng)有深入理解,包括但不限于Spark streaming、Flink;
5. 熟悉數(shù)據(jù)治理、數(shù)據(jù)質(zhì)量管理等相關(guān)理念和方法;
6. 熟悉Kubernetes/Docker開發(fā)及原理,熟悉Kubernetes各組件的工作流程,對Kubernetes有豐富的部署調(diào)優(yōu)實(shí)踐經(jīng)驗(yàn)。