1、負(fù)責(zé)項(xiàng)目軟件的設(shè)計(jì)和開發(fā),負(fù)責(zé)Hadoop的開發(fā)工作。
2、參與智能風(fēng)控建模工作,負(fù)責(zé)數(shù)據(jù)分析與處理、數(shù)據(jù)統(tǒng)計(jì)、數(shù)據(jù)挖掘。
3、能夠完成項(xiàng)目相關(guān)模塊的分析、編碼及開發(fā)代碼的單元測(cè)試。
4、負(fù)責(zé)系統(tǒng)性能優(yōu)化,監(jiān)控和調(diào)整集群資源利用率,識(shí)別和解決數(shù)據(jù)處理過程中的性能瓶頸。
職位要求:
1.掌握Spark、Hive、Hadoop等技術(shù)并具有相關(guān)開發(fā)經(jīng)驗(yàn)。
2.熟悉PostgreSQL、MySQL等關(guān)系型數(shù)據(jù)庫,有較強(qiáng)的SQL能力。
3.熟悉主流分布式數(shù)據(jù)庫、緩存、文件系統(tǒng)、消息系統(tǒng)等技術(shù),有l(wèi)inux經(jīng)驗(yàn)。