計(jì)算機(jī)、數(shù)學(xué)、統(tǒng)計(jì)學(xué)等相關(guān)理工科專業(yè) 本科及以上學(xué)歷
【工作經(jīng)驗(yàn)】
1.具有國(guó)網(wǎng)信息化項(xiàng)目建設(shè)經(jīng)驗(yàn)優(yōu)先;
2.具有華為云(FusionInsight、DataArts)、阿里云(MaxCompute、DataWorks)等云原生組件實(shí)施經(jīng)驗(yàn)者優(yōu)先;
3.三年以上數(shù)據(jù)開(kāi)發(fā)\運(yùn)維工作經(jīng)驗(yàn)。
【工作內(nèi)容】
1.負(fù)責(zé)公司數(shù)據(jù)開(kāi)發(fā)、腳本優(yōu)化、數(shù)據(jù)鏈路維護(hù);
2.負(fù)責(zé)業(yè)務(wù)需求做相應(yīng)的腳本改造工作;
3.完成領(lǐng)導(dǎo)交辦的其他工作。
【技術(shù)能力要求】
1、大數(shù)據(jù)技術(shù)棧:
·熟悉大數(shù)據(jù)生態(tài)體系,掌握Oracle/PostgreSQL/Hive等主流數(shù)據(jù)庫(kù);
·熟練使用Linux操作系統(tǒng),具備Shel1腳本開(kāi)發(fā)能力;
·熟悉Spark、Hive 計(jì)算框架、具備Python開(kāi)發(fā)經(jīng)驗(yàn);熟悉離線數(shù)倉(cāng)建模理論;
2、核心技能:
·精通Hive-SQL開(kāi)發(fā)及存儲(chǔ)過(guò)程、存儲(chǔ)函數(shù)編寫(xiě);
·精通數(shù)據(jù)倉(cāng)庫(kù)建模與ETL開(kāi)發(fā),至少掌握Informatica/DataStage/Kettle 等一種ETL工具;
·具備完整的數(shù)據(jù)處理鏈路開(kāi)發(fā)經(jīng)驗(yàn),包括數(shù)據(jù)抽取、清洗、轉(zhuǎn)換及加載;
3、綜合素質(zhì):
·具備高度責(zé)任心與自驅(qū)力,對(duì)數(shù)據(jù)開(kāi)發(fā)工作充滿熱情擁有出色的溝通協(xié)調(diào)能力,能高效對(duì)接業(yè)務(wù)與技術(shù)團(tuán)隊(duì);
·具備持續(xù)學(xué)習(xí)能力,能快速適應(yīng)新技術(shù)與業(yè)務(wù)場(chǎng)景。