崗位職責(zé)
1、負(fù)責(zé)智能硬件場(chǎng)景下相關(guān)數(shù)據(jù)的全生命周期管理,包括數(shù)據(jù)采集、清洗、存儲(chǔ)與預(yù)處理,確保數(shù)據(jù)質(zhì)量符合后續(xù)算法訓(xùn)練與業(yè)務(wù)應(yīng)用需求;
2、參與數(shù)據(jù)模型的設(shè)計(jì)與優(yōu)化,針對(duì)動(dòng)態(tài)場(chǎng)景數(shù)據(jù)特性(如實(shí)時(shí)性、多源性),構(gòu)建高效的數(shù)據(jù)處理流水線,提升數(shù)據(jù)流轉(zhuǎn)效率;
3、協(xié)同算法、硬件團(tuán)隊(duì)完成多模態(tài)運(yùn)動(dòng)數(shù)據(jù)(如傳感信號(hào)、時(shí)序動(dòng)作數(shù)據(jù))的融合處理,解決數(shù)據(jù)時(shí)空同步、噪聲過濾、異常值檢測(cè)等技術(shù)問題;
4、跟蹤數(shù)據(jù)領(lǐng)域前沿技術(shù)(如時(shí)序數(shù)據(jù)挖掘、邊緣端數(shù)據(jù)預(yù)處理),結(jié)合業(yè)務(wù)場(chǎng)景設(shè)計(jì)數(shù)據(jù)創(chuàng)新應(yīng)用方案,支撐產(chǎn)品核心功能落地;
5、撰寫數(shù)據(jù)相關(guān)技術(shù)文檔,沉淀數(shù)據(jù)處理規(guī)范與最佳實(shí)踐,協(xié)助團(tuán)隊(duì)提升數(shù)據(jù)管理與應(yīng)用效率。
技能要求
1、精通數(shù)據(jù)處理核心技術(shù),包括但不限于:
a) 數(shù)據(jù)采集與預(yù)處理:熟悉多源數(shù)據(jù)(傳感、時(shí)序、日志數(shù)據(jù))采集方法,掌握數(shù)據(jù)清洗(缺失值填充、異常值剔除)、特征工程(時(shí)序特征提取、數(shù)據(jù)標(biāo)準(zhǔn)化)等技術(shù);
b) 數(shù)據(jù)存儲(chǔ)與計(jì)算:熟悉時(shí)序數(shù)據(jù)庫(如 InfluxDB、TimescaleDB)、關(guān)系型數(shù)據(jù)庫(MySQL)及分布式計(jì)算框架(Spark、Flink),能根據(jù)數(shù)據(jù)量級(jí)選擇適配的存儲(chǔ)與計(jì)算方案;
c) 數(shù)據(jù)質(zhì)量管控:具備數(shù)據(jù)質(zhì)量評(píng)估體系搭建能力,能設(shè)計(jì)數(shù)據(jù)完整性、準(zhǔn)確性、實(shí)時(shí)性監(jiān)控指標(biāo),確保數(shù)據(jù)可用率≥98%;
2、掌握數(shù)據(jù)特性分析方法,能針對(duì)動(dòng)態(tài)場(chǎng)景數(shù)據(jù)(如動(dòng)作時(shí)序、實(shí)時(shí)傳感信號(hào))設(shè)計(jì)專屬預(yù)處理方案,降低數(shù)據(jù)噪聲對(duì)后續(xù)應(yīng)用的影響;
3、熟練使用 Python/R 等數(shù)據(jù)處理語言,熟悉 Pandas、NumPy、Scikit-learn 等工具庫,具備一定的數(shù)據(jù)分析與可視化基礎(chǔ)(能生成數(shù)據(jù)質(zhì)量報(bào)告、趨勢(shì)圖表);
4、了解智能硬件數(shù)據(jù)傳輸協(xié)議(如 MQTT、HTTP),能協(xié)同硬件團(tuán)隊(duì)優(yōu)化數(shù)據(jù)采集頻率與傳輸效率,平衡數(shù)據(jù)完整性與硬件能耗;
5、具備邊緣端數(shù)據(jù)處理經(jīng)驗(yàn)(如數(shù)據(jù)降采樣、本地特征提取),能適配資源受限設(shè)備(如邊緣服務(wù)器、嵌入式設(shè)備)者優(yōu)先。
經(jīng)驗(yàn)要求
1、本科及以上學(xué)歷,數(shù)據(jù)科學(xué)、計(jì)算機(jī)科學(xué)與技術(shù)、統(tǒng)計(jì)學(xué)、電子信息工程等相關(guān)專業(yè);
2、3年及以上數(shù)據(jù)、時(shí)序數(shù)據(jù)或智能硬件數(shù)據(jù)處理經(jīng)驗(yàn);
3、具備從 0 到 1 搭建數(shù)據(jù)處理體系的實(shí)際經(jīng)驗(yàn),能獨(dú)立完成數(shù)據(jù)需求拆解、方案設(shè)計(jì)到落地優(yōu)化的全流程者優(yōu)先。