崗位職責：
1. **數據倉庫構建與優化**
- 設計數據模型（維度建模、分層架構），搭建離線數倉，支持數據分析與決策。
- 需深入理解業務場景，能將業務需求轉化為技術方案。
2. **ETL開發與維護**
- 編寫高效、穩定的ETL流程，處理復雜數據清洗和轉換邏輯。
- 熟悉數據調度工具（如Airflow）和任務監控。
3. **性能調優與治理**
- 解決數據傾斜、查詢效率問題，具備大規模數據（TB/PB級）優化經驗。
- 數據治理能力（質量監控、元數據管理、血緣分析）是關鍵加分項。
4. **跨團隊協作**
- 與數據分析、算法、產品等多部門配合，需溝通能力強，能推動項目落地。
崗位要求：
1. **硬技能**
- **理論**：Kimball維度建模、數倉分層（ODS/DWD/DWS/ADS）、數據湖技術（Delta Lake/Iceberg）。
- **編程語言**：SQL（復雜查詢、性能優化）、Java/Scala/Python（至少精通一種）。
- **大數據組件**：Hive（優化技巧）、Spark（Core/SQL/Streaming）、HBase、Flink（流批一體）。
- **工具鏈**：OLAP引擎（ClickHouse/Doris）、調度系統（Airflow/DolphinScheduler）、元數據管理（Atlas）。
2. **軟技能**
- 邏輯思維、問題定位能力（需熟悉Linux調試命令、日志分析）。
- 數據敏感度，能從數據異常中發現業務或技術問題。