崗位職責(zé):
1、負(fù)責(zé)大數(shù)據(jù)平臺(tái)設(shè)計(jì)和搭建;
2、負(fù)責(zé)從海量日志提取數(shù)據(jù)和數(shù)據(jù)分析,支持市場以及營銷活動(dòng)的數(shù)據(jù)需求;
3、負(fù)責(zé)用戶畫像分析;
4、負(fù)責(zé)設(shè)備畫像分析;
5、根據(jù)業(yè)務(wù)目標(biāo)進(jìn)行數(shù)據(jù)建模、數(shù)據(jù)挖掘,學(xué)習(xí)、研究Hadoop及相關(guān)技術(shù)內(nèi)核,并將其運(yùn)用與實(shí)踐;
任職要求:
1、計(jì)算機(jī)相關(guān)專業(yè)碩士及以上學(xué)歷,3年以上大數(shù)據(jù)開發(fā)經(jīng)驗(yàn);
2、熟悉常用設(shè)計(jì)模式,掌握分布式服務(wù)、高擴(kuò)展,高可用,高性能系統(tǒng)的設(shè)計(jì)與編碼,大規(guī)模存儲(chǔ)系統(tǒng)、實(shí)時(shí)及離線計(jì)算、數(shù)據(jù)倉庫方面有經(jīng)驗(yàn)者優(yōu)先;
3、熟悉大數(shù)據(jù)生態(tài)包括不限于Hadoop/Spark/Hive/Hbase/Yarn/ClickHouse/ElasticSearch,并有相關(guān)項(xiàng)目開發(fā)經(jīng)驗(yàn);
4、熟悉流計(jì)算編程,熟練掌握Flink、Kafka、Flume等開源工具或框架;
5、熟悉數(shù)據(jù)ETL的流程和每個(gè)過程的關(guān)鍵數(shù)據(jù)處理方法和技巧,對(duì)OLAP報(bào)表及可視化有一定的了解;
6、熟練使用Java/Python/SQL等編程語言,具備良好軟件敏捷開發(fā)習(xí)慣;