崗位職責(zé):
1.根據(jù)數(shù)字化應(yīng)用需求,制定ETL相關(guān)設(shè)計方案和開發(fā)計劃,并進行后續(xù)的設(shè)計、實施、維護;
2.負責(zé)數(shù)據(jù)湖數(shù)據(jù)模型的管理工作(建模,設(shè)計,實施);
3.負責(zé)數(shù)據(jù)源調(diào)研、入庫、開發(fā)的全流程工作,并保證數(shù)據(jù)質(zhì)量;
4.負責(zé)數(shù)據(jù)倉庫的模型的標準制定,實施,監(jiān)督工作;
5.負責(zé)數(shù)據(jù)抽取、清洗、轉(zhuǎn)化等數(shù)據(jù)處理程序開發(fā)。
任職要求:
1.3年以上大數(shù)據(jù)開發(fā)經(jīng)驗,計算機科學(xué)、軟件工程、數(shù)學(xué)、統(tǒng)計學(xué)等相關(guān)專業(yè);
2.具備扎實的編程基礎(chǔ),熟練掌握 Java、Python、Scala 等至少一種編程語言;
3.熟悉大數(shù)據(jù)技術(shù)棧,包括 Hadoop、Spark、Hive、HBase、Kafka 等,有實際項目開發(fā)經(jīng)驗者優(yōu)先;
4.掌握數(shù)據(jù)倉庫設(shè)計和開發(fā)方法,熟悉 SQL 語言,有數(shù)據(jù)倉庫建設(shè)經(jīng)驗者優(yōu)先。