工作職責(zé):
1、負責(zé)內(nèi)部數(shù)據(jù)生產(chǎn)工作,編寫大數(shù)據(jù)作業(yè)腳本,高質(zhì)量完成數(shù)據(jù)需求。
2、迭代及維護數(shù)據(jù)采集、清洗、轉(zhuǎn)換和加載流程,提高數(shù)據(jù)生產(chǎn)效率。
3、參與湖倉建設(shè),監(jiān)控系統(tǒng)性能,進行系統(tǒng)優(yōu)化。
崗位要求:
1、計算機相關(guān)專業(yè)本科及以上學(xué)歷,2年以上Python開發(fā)經(jīng)驗及湖倉工作經(jīng)驗。
2、熟練掌握Python語言,了解Python的常用框架和庫;熟悉shell語言。
3、了解大數(shù)據(jù)生態(tài),如mapreduce、spark等。
4、具備良好的數(shù)據(jù)結(jié)構(gòu)和算法基礎(chǔ),能夠編寫高效、可維護的代碼。
5、熟練使用Git等版本控制工具,具備良好的代碼管理習(xí)慣。
6、有iceberg及doris經(jīng)驗者優(yōu)先。
1、可以接受23屆本科;
2、可以放寬專業(yè)前提是大學(xué)必須上過計算機課程:
3、業(yè)務(wù)更看重人選的Python編程能力,尤其簡歷項目需要體現(xiàn)Python的描述