崗位職責：
1. 移動云數(shù)據(jù)遷移，基礎任務提速50%。
2. 新平臺數(shù)據(jù)融合，優(yōu)化基礎數(shù)據(jù)計算。
3. 日常常規(guī)報表支撐，需求提速及優(yōu)化，提升數(shù)據(jù)支撐速度。
基本條件
1、對工作有很強的責任感和很高的熱情，適應在壓力下的工作
2、具備較強的學習能力，能夠主動學習
3、性格穩(wěn)定，有良好的和客戶以及團隊的溝通能力
具備技能：
1.使用Java、Scala、C語言開發(fā)項目，熟悉jvm、gc工作原理
2.熟悉Linux及大數(shù)據(jù)生態(tài)圈相關組件，使用Ambari搭建高可用集群環(huán)境
3.使用Hadoop、Hbase、flink、Spark、Kafka、Zookeeper、MySQL組件進行公司項目開發(fā)
4.熟悉Hadoop中的MapReduce、HDFS、Yarn工作原理，掌握HBase的內(nèi)部原理及優(yōu)化
5.熟練使用Redis、MySQL、pg、達夢數(shù)據(jù)庫，了解Hive倉庫，使用SQL、HQL語句進行統(tǒng)計分析
6.熟悉Spark工作原理及常用的算子，使用Spark-streaming、Spark-Sql、mlib及echarts的使用
7.熟悉Zookeeper及Kafka消息中間件工作原理，并使用Kafka和Spark集成開發(fā)
8.使用ElasticSearch搜索服務器，并參與es的部署與優(yōu)化
9.熟悉datax、flinkx、sqoop數(shù)據(jù)遷移工具
10.熟悉web開發(fā)相關的Spring、SpringMVC、MyBatis、Quartz等框架，掌握springBoot微服務項目框架
11.了解Flume工作原理、使用場景、集群搭建及預處理開發(fā)