任職要求:
1、熟悉并可理解運用通過大數(shù)據(jù)平臺、數(shù)倉建模方法,具備概念模型、邏輯模型設(shè)計能力,熟悉Hadoop技術(shù)棧,具備湖倉數(shù)物理模型創(chuàng)建能力;
2、熟悉大數(shù)據(jù)組件的高可用方案,性能監(jiān)控指標(biāo),精于容量規(guī)劃、架構(gòu)設(shè)計、性能優(yōu)化,深入了解、分布式算法和分布式系統(tǒng)的技術(shù)原理、實時Flink/離線計算Spark技術(shù)體系;
3、具備一定開發(fā)能力,精通一門以上的腳本語言(shell/perl/python);
4、熟練掌握數(shù)據(jù)倉庫相關(guān)理論,對數(shù)據(jù)倉庫架構(gòu),數(shù)據(jù)建模,元數(shù)據(jù)管理有深入理解;
5、熟悉掌握Flink、hive、Hadoop、Kafka、Spark、flink等開源框架原理,并且有實踐經(jīng)驗;
6、具有華為MRS大數(shù)據(jù)平臺的使用經(jīng)驗優(yōu)先;
7、本科及以上學(xué)歷,5年及以上大數(shù)據(jù)模型設(shè)計、開發(fā)經(jīng)驗。
崗位職責(zé):
1、負(fù)責(zé)大數(shù)據(jù)模型架構(gòu)設(shè)計、概念模型、邏輯模型設(shè)計、負(fù)責(zé)大數(shù)據(jù)標(biāo)準(zhǔn)化模型開發(fā)及成果推廣應(yīng)用;
2、負(fù)責(zé)在遵從大數(shù)據(jù)模型架構(gòu)等基礎(chǔ)上的業(yè)務(wù)應(yīng)用建模指導(dǎo);
3、調(diào)研相關(guān)技術(shù),優(yōu)化大數(shù)據(jù)開發(fā)流程,規(guī)劃大數(shù)據(jù)平臺應(yīng)用,完善平臺架構(gòu),保障數(shù)據(jù)平臺架構(gòu)穩(wěn)定;
4、參與制定大數(shù)據(jù)模型設(shè)計、開發(fā)、運維等技術(shù)規(guī)范;
5、完成領(lǐng)導(dǎo)交辦的其他工作事項。