崗位職責:
根據現有及規劃中的數據運營業務,設計數據運營管理平臺,主要是鑒權、授權管理、計數管理、接口管理,日常對外的對接調試管理等內容。負責數據運營平臺的設計,并推動開發落地。
崗位要求:
1、掌握mysql、oracle、postgresql等一種或多種數據庫,會編寫函數、存儲過程,能進行數據庫查詢性能調優和常見問題處理;
2、熟悉常用etl工具,如datastage、kettle、datax,能使用工具進行數據的處理;
3、熟悉大數據相關技術,對hadoop(hdfs/mapreduce/hive/hbase)生態有所了解,了解常用數據接入組件datax、sqoop、flumen等一種或多種;
4、掌握一種或多種計算框架和消息隊列:spark、flink、kafka等;
5、掌握greenplum、doris等一種或多種olap數據庫,進行相關模型的設計和數據管理;掌握python、java、scala等一種或多種編程語言;熟悉數據需求分析、數據探查、數據模型設計、元數據管理、數據標準管理、數據質量管理等理論方法,會使用工具(powerdesigne、pdmaner)進行數據模型設計和關系圖梳理;
6、具有多個數據倉庫開發項目經驗,熟悉數據分析展示工具,具有實際數據可視化開發項目經驗;
7、具備團隊協作和溝通能力,能夠與其他成員溝通協作,共同推進數據工程項目;