外派聯(lián)想,五險一金全額繳納
崗位職責:
1. 數(shù)據(jù)開發(fā)與分析
基于 Databricks 平臺,開發(fā)數(shù)據(jù)ETL流程,對接業(yè)務系統(tǒng)數(shù)據(jù)
使用 PySpark/SQL 進行數(shù)據(jù)清洗、轉(zhuǎn)換和聚合
構(gòu)建數(shù)據(jù)模型,優(yōu)化查詢性能
2. AI相關(guān)開發(fā)
結(jié)合機器學習模型,開發(fā)智能數(shù)據(jù)分析功能
使用Databricks MLflow管理AI模型生命周期
3. 數(shù)據(jù)質(zhì)量與優(yōu)化
確保數(shù)據(jù)準確性,建立數(shù)據(jù)校驗規(guī)則
持續(xù)優(yōu)化數(shù)據(jù)處理流程,提升計算效率
技術(shù)能力(必需)
2年以上大數(shù)據(jù)開發(fā)經(jīng)驗,熟練使用Databricks
精通PySpark/SQL
有數(shù)據(jù)倉庫建模經(jīng)驗
熟悉BI工具(Power BI/Tableau等)
加分項
熟悉Delta Lake/Data Lake架構(gòu)
了解云平臺(AWS/Azure/GCP)
有Python數(shù)據(jù)分析經(jīng)驗
具備機器學習基礎,熟悉常見算法
有MLflow或其他MLOps工具使用經(jīng)驗