主要工作職責(zé):
1.設(shè)計和構(gòu)建電商數(shù)據(jù)倉庫,整合多源業(yè)務(wù)數(shù)據(jù);
2.開發(fā)實時和批量數(shù)據(jù)管道,確保數(shù)據(jù)及時更新;
3.負(fù)責(zé)數(shù)據(jù)清洗、預(yù)處理和特征工程,實現(xiàn)文本向量化,構(gòu)建和維護(hù)向量數(shù)據(jù)庫;
4.保障數(shù)據(jù)質(zhì)量和數(shù)據(jù)安全,優(yōu)化數(shù)據(jù)處理性能,支持大規(guī)模數(shù)據(jù)計算;
5.完成領(lǐng)導(dǎo)交辦的其他工作。
任職要求:
1.大學(xué)本科及以上學(xué)歷;
2.計算機(jī)科學(xué)、軟件工程、數(shù)據(jù)科學(xué)、統(tǒng)計學(xué)、信息管理或相關(guān)專業(yè);
3.3年以上數(shù)據(jù)開發(fā)經(jīng)驗,主導(dǎo)或深度參與過數(shù)據(jù)倉庫/數(shù)據(jù)平臺的建設(shè),有電商行業(yè)數(shù)據(jù)中臺、數(shù)倉建設(shè)經(jīng)驗者優(yōu)先;
4.有處理多源、異構(gòu)數(shù)據(jù)的經(jīng)驗,并構(gòu)建過穩(wěn)定、可靠的批流一體數(shù)據(jù)管道;
5.擁有從零開始參與設(shè)計和搭建數(shù)據(jù)倉庫的實際經(jīng)驗,熟悉維度建模和數(shù)據(jù)分層;
6.具備成熟的SQL開發(fā)能力,熟悉至少一種消息隊列(如Kafka) 在數(shù)據(jù)管道中的應(yīng)用;
7.擁有通過API、日志、數(shù)據(jù)庫等多種方式抽取和集成數(shù)據(jù)的經(jīng)驗,且直接為AI/機(jī)器學(xué)習(xí)項目提供過數(shù)據(jù)支撐,具備文本數(shù)據(jù)處理和向量化經(jīng)驗;
8.有較強(qiáng)的數(shù)據(jù)敏感、邏輯嚴(yán)謹(jǐn)性、耐心與專注力;優(yōu)秀的問題解決和技術(shù)攻關(guān)能力;強(qiáng)大的邏輯推理與根因分析能力;有產(chǎn)品與業(yè)務(wù)意識,責(zé)任心和自驅(qū)力強(qiáng)和,擁有良好的溝通協(xié)作與團(tuán)隊精神;
9.精通辦公軟件,熟練使用SQL、Python、Java等語言。