任職要求:
1、本科以上學(xué)歷,計算機(jī)專業(yè)優(yōu)先,學(xué)信網(wǎng)驗證學(xué)歷;
2、熟練掌握Sql語言,熟悉開發(fā)框架、代碼編程規(guī)范,具備ETL程序設(shè)計開發(fā)能力,熟悉Python經(jīng)驗者優(yōu)先;
3、熟練掌握常見數(shù)據(jù)庫(例如:greenplum、Hbase、高斯、Mysql等數(shù)據(jù)庫)開發(fā)技術(shù),具備數(shù)據(jù)加工處理(ETL)相關(guān)經(jīng)驗;
4、對分布式系統(tǒng)的基本原理和架構(gòu)有充分了解,熟悉Hbase等大數(shù)據(jù)平臺數(shù)據(jù)庫的使用,對ETL等數(shù)據(jù)處理過程有深刻認(rèn)識和實戰(zhàn)經(jīng)驗;
5、熟悉sql語句的編寫以及運行調(diào)優(yōu),熟悉Linux常用命令,能夠編寫shell腳本;
6、工作責(zé)任心強(qiáng),具備良好的問題解決能力和邏輯思維能力,具有一定的業(yè)務(wù)理解能力,有銀行、保險、信創(chuàng)相關(guān)業(yè)務(wù)經(jīng)驗者優(yōu)先。
崗位職責(zé):
1、負(fù)責(zé)進(jìn)行數(shù)據(jù)開發(fā)、ETL運維工作,滿足業(yè)務(wù)對數(shù)據(jù)存儲、處理和分析的需求。
2、開發(fā)并維護(hù)ETL流程,從提取數(shù)據(jù),進(jìn)行清洗、轉(zhuǎn)換和加載到目標(biāo)存儲中。利用shell腳本、SQL等構(gòu)建數(shù)據(jù)處理流程。
3、對數(shù)據(jù)處理流程進(jìn)行性能調(diào)優(yōu),提高數(shù)據(jù)處理的效率和吞吐量。優(yōu)化數(shù)據(jù)存儲結(jié)構(gòu),減少查詢延遲,提升數(shù)據(jù)訪問速度。
4、與內(nèi)部開發(fā)團(tuán)隊、測試團(tuán)隊、生產(chǎn)運維團(tuán)隊緊密合作,確保數(shù)據(jù)系統(tǒng)需求實現(xiàn)。
5、編寫清晰、詳細(xì)的技術(shù)文檔,記錄數(shù)據(jù)系統(tǒng)的架構(gòu)設(shè)計、數(shù)據(jù)處理流程和技術(shù)實現(xiàn)細(xì)節(jié)。向團(tuán)隊成員共享數(shù)據(jù)處理和數(shù)據(jù)分析的知識和技能。