大數(shù)據(jù)組件cdh,spark,oozie等熟練要熟練 大數(shù)據(jù)簡歷重點是spark開發(fā)和CDH搭建相關(guān)經(jīng)驗簡歷體現(xiàn)大數(shù)據(jù)平臺的搭建經(jīng)驗
1. 日常模塊開發(fā)工作,理解業(yè)務(wù)需求,并參與模塊的設(shè)計及開發(fā);
2. 根據(jù)需求完成基于關(guān)系型數(shù)據(jù)庫或數(shù)據(jù)倉庫的數(shù)據(jù)挖掘與分析工作,編寫流計算腳本進行數(shù)據(jù)統(tǒng)計分析;
3. 負責(zé)大數(shù)據(jù)環(huán)境的組件管理,指導(dǎo)運維人員進行大數(shù)據(jù)環(huán)境部署和維護;
4. 緊跟前沿技術(shù)并定期交流培訓(xùn),積極嘗試新技術(shù)在應(yīng)用上的探索;
任職要求:
1. 具備扎實的計算機理論基礎(chǔ),對數(shù)據(jù)結(jié)構(gòu)及算法有較強的功底;
2. 熟悉Java,熟悉JVM,具備優(yōu)秀的系統(tǒng)問題追查和性能調(diào)節(jié)優(yōu)化能力,熟悉常見的面向?qū)ο笤O(shè)計模式,熟悉springcloud架構(gòu)體系應(yīng)用的開發(fā),熟悉mysql數(shù)據(jù)庫的設(shè)計和使用,熟悉redis、mq等常用中間件的使用;
3. 熟悉Hadoop,hive,HBase,Kafka,Spark,ES,F(xiàn)link 等開發(fā)技術(shù),熟練掌握ES、hive/HBase、Spark的數(shù)據(jù)開發(fā)應(yīng)用;
4. 熟練掌握LINUX常規(guī)命令與工具,熟悉CDH(Cloudera Distribution Hadoop)平臺的搭建和使用者優(yōu)先;
職位福利:五險一金、餐補、帶薪年假