崗位職責(zé)：
1、設(shè)計(jì)并搭建公司數(shù)據(jù)倉(cāng)庫(kù)、數(shù)據(jù)湖、實(shí)時(shí)數(shù)據(jù)處理系統(tǒng)等架構(gòu)。依據(jù)業(yè)務(wù)與數(shù)據(jù)特點(diǎn)，選合適存儲(chǔ)方案與技術(shù)，確保數(shù)據(jù)高效存儲(chǔ)、管理與訪問(wèn)，并持續(xù)優(yōu)化架構(gòu)，應(yīng)對(duì)數(shù)據(jù)量增長(zhǎng)與業(yè)務(wù)變化，保障系統(tǒng)穩(wěn)定、可擴(kuò)展。
2、制定數(shù)據(jù)采集策略，從數(shù)據(jù)庫(kù)、文件系統(tǒng)等多源收集數(shù)據(jù)。用 ETL 工具清洗、轉(zhuǎn)換、集成數(shù)據(jù)，構(gòu)建自動(dòng)化處理流水線，定時(shí)更新數(shù)據(jù)，為分析、挖掘和應(yīng)用提供高質(zhì)量數(shù)據(jù)。
3、依業(yè)務(wù)與分析目標(biāo)，設(shè)計(jì)數(shù)據(jù)倉(cāng)庫(kù)（如星型、雪花模型）及機(jī)器學(xué)習(xí)、數(shù)據(jù)挖掘的特征模型。用 SQL、Java等實(shí)現(xiàn)數(shù)據(jù)查詢、統(tǒng)計(jì)分析及算法邏輯，支持?jǐn)?shù)據(jù)探索、報(bào)表生成、模型訓(xùn)練。
4、建立數(shù)據(jù)質(zhì)量監(jiān)控體系，設(shè)指標(biāo)與評(píng)估標(biāo)準(zhǔn)。通過(guò)工具實(shí)時(shí)監(jiān)測(cè)，及時(shí)處理數(shù)據(jù)缺失、重復(fù)等問(wèn)題。與數(shù)據(jù)產(chǎn)生部門及業(yè)務(wù)團(tuán)隊(duì)合作，優(yōu)化采集流程與業(yè)務(wù)規(guī)范，提升數(shù)據(jù)質(zhì)量。
5、制定并執(zhí)行數(shù)據(jù)訪問(wèn)權(quán)限策略，遵循法規(guī)標(biāo)準(zhǔn)，保障數(shù)據(jù)合法使用與合規(guī)存儲(chǔ)。對(duì)敏感數(shù)據(jù)加密、脫敏，防范泄露風(fēng)險(xiǎn)。
任職要求：
1、計(jì)算機(jī)、軟件工程、數(shù)學(xué)、統(tǒng)計(jì)學(xué)、數(shù)據(jù)科學(xué)等相關(guān)專業(yè)，本科及以上學(xué)歷。
2、熟練掌握一種 ETL 工具（如 Informatica、Talend、Kettle），能獨(dú)立完成數(shù)據(jù)抽取、轉(zhuǎn)換、加載。精通 SQL，具備復(fù)雜查詢編寫(xiě)與數(shù)據(jù)庫(kù)性能優(yōu)化能力，熟悉主流關(guān)系型數(shù)據(jù)庫(kù)（如 Oracle、MySQL、SQL Server）。掌握 Java 等數(shù)據(jù)處理語(yǔ)言，可進(jìn)行數(shù)據(jù)清洗、分析與算法實(shí)現(xiàn)。
3、了解數(shù)據(jù)倉(cāng)庫(kù)、數(shù)據(jù)湖架構(gòu)原理，熟悉數(shù)據(jù)建模方法，能設(shè)計(jì)合理數(shù)據(jù)模型。掌握分布式存儲(chǔ)技術(shù)（如 Hadoop、Spark、Hive、HBase），可搭建維護(hù)分布式數(shù)據(jù)存儲(chǔ)與處理環(huán)境，具備數(shù)據(jù)架構(gòu)設(shè)計(jì)與優(yōu)化能力。
4、熟悉數(shù)據(jù)質(zhì)量監(jiān)控管理方法，能診斷解決數(shù)據(jù)質(zhì)量問(wèn)題。了解數(shù)據(jù)安全與合規(guī)知識(shí)，掌握數(shù)據(jù)加密、脫敏、訪問(wèn)控制技術(shù)，保障數(shù)據(jù)安全合規(guī)。
5、具備 Linux 操作能力，可在 Linux 環(huán)境下進(jìn)行數(shù)據(jù)處理與系統(tǒng)運(yùn)維。熟悉常用數(shù)據(jù)分析與可視化工具。
6、學(xué)習(xí)與創(chuàng)新能力強(qiáng)，能快速掌握新技術(shù)、工具。具備良好問(wèn)題解決與邏輯思維能力，可獨(dú)立解決復(fù)雜數(shù)據(jù)處理問(wèn)題。有優(yōu)秀團(tuán)隊(duì)協(xié)作與溝通能力，能與不同部門高效協(xié)作。
7、有 3年以上數(shù)據(jù)開(kāi)發(fā)經(jīng)驗(yàn)，有完整數(shù)據(jù)倉(cāng)庫(kù)或大數(shù)據(jù)項(xiàng)目經(jīng)驗(yàn)優(yōu)先，有大規(guī)模、實(shí)時(shí)數(shù)據(jù)處理經(jīng)驗(yàn)更佳。