數據開發

精通Hadoop、Spark、Hive、HBase、Kafka、Flink等至少兩種組件的安裝、配置與開發。
熟悉Linux系統操作及Shell腳本編寫，具備良好的環境部署和問題排查能力。
熟練掌握Python編程語言，熟悉SQL及NoSQL數據庫。
了解分布式計算、存儲原理及數據倉庫設計。
負責大數據平臺的部署、安裝、配置、優化及日常運維。
參與大數據集群的架構設計與性能調優，保障系統高可用性、可擴展性及穩定性。
開發和維護ETL流程，完成數據清洗、轉換及存儲，支持業務數據分析和挖掘需求。
協助解決大數據相關組件的技術問題，包括但不限于資源調度、任務監控、故障排查等。
跟蹤大數據領域前沿技術，推動技術落地與團隊能力提升。