西安搜索數(shù)據(jù)開發(fā)工程師
崗位職責(zé):
1、負(fù)責(zé)搜索業(yè)務(wù)相關(guān)的數(shù)據(jù)統(tǒng)計(jì)工作,構(gòu)建多維度的數(shù)據(jù)指標(biāo)體系,支持?jǐn)?shù)據(jù)看板以及常態(tài)的數(shù)據(jù)統(tǒng)計(jì);
2、搭建搜索業(yè)務(wù)數(shù)據(jù)倉庫,設(shè)計(jì)合理的表結(jié)構(gòu)和數(shù)據(jù)分層模型(如ODS/DWD/DWS),提升數(shù)據(jù)查詢效率與可維護(hù)性;
3、支持內(nèi)部數(shù)據(jù)技術(shù)基建開發(fā),如數(shù)據(jù)管理平臺(tái),數(shù)據(jù)質(zhì)量檢測等。
任職要求:
1、熟練使用Hadoop(HDFS/YARN)、Spark(Spark SQL/Streaming)進(jìn)行大規(guī)模數(shù)據(jù)計(jì)算與分布式任務(wù)開發(fā);
2、具備數(shù)據(jù)倉庫建模經(jīng)驗(yàn),了解維度建模與數(shù)據(jù)治理方法;
3、熟練使用Python/Scala/Java至少一門語言,具備良好的代碼規(guī)范與性能優(yōu)化意識(shí)。
加分項(xiàng):
1、有數(shù)據(jù)相關(guān)平臺(tái)的開發(fā)經(jīng)驗(yàn);
2、熟悉數(shù)據(jù)血緣、元數(shù)據(jù)管理等數(shù)據(jù)治理工具。