崗位職責(zé):
1.在現(xiàn)有數(shù)據(jù)鏈路的基礎(chǔ)上,負(fù)責(zé)設(shè)計(jì)并實(shí)施離線計(jì)算數(shù)據(jù)基礎(chǔ)架構(gòu)的建設(shè),確保數(shù)據(jù)的高效存儲與處理;
2.運(yùn)用Java、Golang或Python等編程語言,對數(shù)據(jù)進(jìn)行深度清洗與整合,提升數(shù)據(jù)質(zhì)量,為后續(xù)分析提供可靠基礎(chǔ);
3.基于已構(gòu)建的離線數(shù)據(jù)集,進(jìn)行深入的數(shù)據(jù)分析,挖掘數(shù)據(jù)價(jià)值,為業(yè)務(wù)決策提供數(shù)據(jù)支持;
4.確保所建設(shè)的離線數(shù)據(jù)處理系統(tǒng)穩(wěn)定運(yùn)行,及時(shí)排查并解決系統(tǒng)故障,保障數(shù)據(jù)處理的連續(xù)性和準(zhǔn)確性。
任職要求:
1.電子電力、電氣自動(dòng)化、計(jì)算機(jī)科學(xué)或相關(guān)專業(yè)本科及以上學(xué)歷,一本、211畢業(yè)生優(yōu)先考慮,具備扎實(shí)的專業(yè)理論基礎(chǔ);
2.擁有三年以上相關(guān)工作經(jīng)驗(yàn),具備在復(fù)雜數(shù)據(jù)環(huán)境中進(jìn)行數(shù)據(jù)處理與分析的實(shí)際操作經(jīng)驗(yàn);
3.深入理解計(jì)算機(jī)基本原理和常用算法,能夠靈活運(yùn)用解決實(shí)際問題;
4.精通Hadoop、Spark等大數(shù)據(jù)處理框架,熟悉Hadoop生態(tài)系統(tǒng)中的HDFS、Hive、MapReduce等組件;
5.具備大數(shù)據(jù)平臺開發(fā)、運(yùn)維經(jīng)驗(yàn),能夠獨(dú)立完成數(shù)據(jù)倉庫的設(shè)計(jì)與建設(shè);
6.具備良好的邏輯思維能力和問題解決能力,能夠獨(dú)立分析問題并提出解決方案。
7.熟練使用Java、Golang或Python等至少一種編程語言進(jìn)行數(shù)據(jù)處理與分析;
8.具有能源行業(yè)數(shù)據(jù)處理與分析經(jīng)驗(yàn)者優(yōu)先,熟悉能源行業(yè)數(shù)據(jù)特點(diǎn)與業(yè)務(wù)流程者更佳。