崗位職責:
1、負責大數(shù)據平臺設計、開發(fā)及優(yōu)化,包括但不限于Hadoop、Spark、Flink、Kafka、elasticsearch、flume、zookeeper等組件的搭建與調優(yōu);
2、負責數(shù)據采集、清洗、存儲(HDFS/HBase/Hive等)、計算(離線/實時)及全流程開發(fā);
3、設計高性能ETL流程,處理TB/PB級數(shù)據,優(yōu)化數(shù)據計算效率與資源利用率;
4、參與公司核心業(yè)務系統(tǒng)的Java后端開發(fā),使用Spring Boot/Spring Cloud等框架構建高并發(fā)、分布式服務。
崗位要求:
1、2年以上大數(shù)據實際開發(fā)經驗,同時具備Java后端開發(fā)經驗;
2、熟練使用Hadoop生態(tài)組件(HDFS/YARN/MapReduce),具備Spark/Flink實時計算開發(fā)經驗;
3、熟悉至少一種關系型數(shù)據庫(MySQL/Oracle)及NoSQL(HBase/Redis),掌握SQL優(yōu)化技巧;
4、扎實的Java基礎,深入理解JVM原理、多線程并發(fā)、內存管理。
加分項:
具備云平臺(華為云/AWS/Azure/阿里云)大數(shù)據服務實戰(zhàn)經驗者優(yōu)先
職位福利:五險一金、定期體檢、節(jié)日福利、餐補、帶薪年假、績效獎金、周末雙休