大數據開發工程師-西安
1.2-2萬元/月崗位職責:
1、主導ToB客戶數據治理(元數據、數據目錄、數據標準、數據質量、數據安全等)功能的整體架構設計,制定數據治理流程與制度建設方案;
2、結合業務場景與實際需求,提供技術與業務融合的解決方案并推動落地,包括:
(1)評估平臺數據治理(元數據、數據目錄、數據政策、數據質量等)相關功能的技術演進方向;
(2)開發實時計算(如Flink)和離線計算(如Hive)任務;
3、提供專業咨詢支持,協助建立數據標準體系,構建數據安全與隱私保護規范,推動數據資產梳理,提升業務系統中數據的應用質量和使用效能,并持續跟蹤數據治理在業務端的實施成效;
4、統籌數據治理類項目的全流程執行與管理,涵蓋需求分析、項目計劃、過程管控、上線驗收及交付運營等環節。
任職要求:
1、計算機或相關專業本科及以上學歷,具備5年以上相關領域工作經驗,有數據咨詢服務背景者優先;
2、擁有處理超PB級數據的實際經驗,曾主導數據中臺、OLAP分析平臺或高并發系統的架構設計與項目落地者優先;
3、熟練掌握大數據生態組件(Hadoop/Spark/Flink)及數據庫技術(MPP架構、NoSQL),具有大數據平臺、數據倉庫或BI系統成功落地的經驗;
4、精通數據建模與ETL開發設計,對數據倉庫、數據平臺及數據分析體系有深入理解,具備大規模數據處理與性能優化的豐富實踐;
5、在多個數據治理核心領域(如元數據管理、數據目錄管理、數據標準管理、數據質量管理、數據安全管理)具備扎實的專業知識與實戰項目經驗;
6、熟練運用Java/Python/Scala中的一種或多種語言,具備海量數據處理與高并發系統開發經驗,有億級用戶數據處理經歷者優先;
7、具備優秀的解決方案撰寫與文檔表達能力;
8、責任心強,具備良好的溝通協作能力,工作態度嚴謹、細致、務實,富有主動性與團隊精神;
9、學習能力突出,關注技術發展趨勢,具備創新思維與復雜問題攻關能力;能緊跟大數據行業動態與市場變化,持續優化方法論與解決方案,實現突破性創新。