高級數(shù)據(jù)開發(fā)
崗位職責(zé):
1、參與網(wǎng)紅畫像數(shù)據(jù)體系及數(shù)據(jù)質(zhì)量建設(shè),包括但不限于數(shù)據(jù)采集及處理、主題數(shù)倉建設(shè)、數(shù)據(jù)治理、及BI類工作。
2、精準(zhǔn)理解業(yè)務(wù)產(chǎn)運研數(shù)據(jù)需求,通過數(shù)據(jù)賦能,支持業(yè)務(wù)問題的提升和改善。
3、參與數(shù)據(jù)效能建設(shè),協(xié)同大數(shù)據(jù)基礎(chǔ)團隊,識別和解決業(yè)務(wù)數(shù)據(jù)開發(fā)的卡點問題,提升數(shù)據(jù)效能及質(zhì)量。
4、基于AWS EMR 大數(shù)據(jù)云平臺、存算分離湖倉一體架構(gòu)(基于S3)開展數(shù)據(jù)開發(fā)工作。
任職要求:
1、3-5年以上大數(shù)據(jù)開發(fā)工作經(jīng)驗,本科以上學(xué)歷,計算機、數(shù)學(xué)相關(guān)專業(yè);
2、精通Spark、FlinkSQL、HiveSQL等數(shù)據(jù)處理技術(shù), 有數(shù)據(jù)治理、數(shù)據(jù)建模相關(guān)經(jīng)驗者優(yōu)先;
3、扎實的編程基礎(chǔ),熟練掌握Java、scala語言,shell命令,具備扎實的數(shù)據(jù)結(jié)構(gòu)和大數(shù)據(jù)組件原理基礎(chǔ);
4、對hadoop集群yarn rm資源分配、datanode IO 資源壓力調(diào)優(yōu)場景有一定的認知或經(jīng)驗。
5、熟悉離線、實時數(shù)據(jù)處理框架如spark/flink;掌握presto、StarRocks、Doris、es、paimon 等存儲查詢引擎介質(zhì)。
6、有較強的數(shù)據(jù)分析思維,有良好的溝通能力和團隊合作精神,熟悉產(chǎn)品運營工作。
7、熟悉海外社媒業(yè)務(wù)數(shù)據(jù)分析(如tiktok、ins、youtube)常見指標(biāo)和用戶、粉絲畫像體系優(yōu)先。