崗位職責(zé)：
1. 數(shù)據(jù)開發(fā)與分析
基于 Databricks 平臺，開發(fā)數(shù)據(jù)ETL流程，對接業(yè)務(wù)系統(tǒng)數(shù)據(jù)
使用 PySpark/SQL 進(jìn)行數(shù)據(jù)清洗、轉(zhuǎn)換和聚合
構(gòu)建數(shù)據(jù)模型，優(yōu)化查詢性能
2. AI相關(guān)開發(fā)
結(jié)合機(jī)器學(xué)習(xí)模型，開發(fā)智能數(shù)據(jù)分析功能
使用Databricks MLflow管理AI模型生命周期
3. 數(shù)據(jù)質(zhì)量與優(yōu)化
確保數(shù)據(jù)準(zhǔn)確性，建立數(shù)據(jù)校驗規(guī)則
持續(xù)優(yōu)化數(shù)據(jù)處理流程，提升計算效率
技術(shù)能力（必需）
2年以上大數(shù)據(jù)開發(fā)經(jīng)驗，熟練使用Databricks
精通PySpark/SQL
有數(shù)據(jù)倉庫建模經(jīng)驗
熟悉BI工具（Power BI/Tableau等）
加分項
熟悉Delta Lake/Data Lake架構(gòu)
了解云平臺（AWS/Azure/GCP）
有Python數(shù)據(jù)分析經(jīng)驗
具備機(jī)器學(xué)習(xí)基礎(chǔ)，熟悉常見算法
有MLflow或其他MLOps工具使用經(jīng)驗