崗位職責：
1.大數(shù)據(jù)平臺構(gòu)建與優(yōu)化：
負責公司大數(shù)據(jù)平臺的搭建、維護及性能優(yōu)化(包括Hadoop/Spark等生態(tài)組件)；
設計高效的數(shù)據(jù)存儲、計算方案，支撐業(yè)務數(shù)據(jù)加工和分析解決海量數(shù)據(jù)處理中的性能瓶頸問題，保障系統(tǒng)穩(wěn)定性
2.數(shù)據(jù)開發(fā)與ETL：
開發(fā)數(shù)據(jù)清洗、轉(zhuǎn)換和加載(ETL)流程，確保數(shù)據(jù)質(zhì)量和時效性；構(gòu)建數(shù)據(jù)倉庫/數(shù)據(jù)湖模型，支持多維度數(shù)據(jù)分析需求
3.應用開發(fā)與組件運維：
配合研發(fā)團隊完成數(shù)據(jù)服務API開發(fā)，支撐前端/業(yè)務系統(tǒng)數(shù)據(jù)需求，制定和執(zhí)行數(shù)據(jù)編碼、測試和部署策略
4.跨團隊協(xié)作
與產(chǎn)品、業(yè)務部門溝通需求，將數(shù)據(jù)能力轉(zhuǎn)化為實際解決方案
能力要求：
1.本科及以上學歷，3年以上大數(shù)據(jù)開發(fā)經(jīng)驗
2.熟悉至少一種編程語言（如Python\Java），熟悉Linux開發(fā)環(huán)境
3.精通hadoop生態(tài)系統(tǒng)中的工具與技術(shù)。熟練掌握Spark/Hive/Flink等大數(shù)據(jù)框架，有性能調(diào)優(yōu)經(jīng)驗熟悉SQL/NoSQL數(shù)據(jù)庫(MySQL/MongoDB/
ElasticSearch等)
4.熟悉云計算平臺和容器化技術(shù)，并具備相關(guān)調(diào)試和管理經(jīng)驗
5.具備極強的團隊協(xié)作能力和解決問題能力