大數(shù)據(jù)開發(fā)工程師

崗位職責(zé)：
技術(shù)棧：掌握Hadoop/Spark/Flink相關(guān)生態(tài)，熟練運用SQL/Python/Scala/Java進行開發(fā)
業(yè)務(wù)理解：構(gòu)建機器學(xué)習(xí)與深度學(xué)習(xí)模型，涵蓋推薦系統(tǒng)、風(fēng)控模型等場景
從大規(guī)模數(shù)據(jù)中挖掘隱含規(guī)律或商業(yè)機會，例如用戶分群、異常行為識別
工具應(yīng)用：精通Airflow、Doris、ClickHouse及數(shù)據(jù)湖技術(shù)（如DeltaLake）等數(shù)據(jù)平臺工具

任職要求：
1.熟悉Hadoop/Spark/Flink生態(tài)系統(tǒng)，具備SQL/Python/Scala/Java實際開發(fā)能力
2.熟練使用starrocks/tidb/mysql等數(shù)據(jù)庫系統(tǒng)
3.掌握Kafka等中間件技術(shù)
業(yè)務(wù)理解：能夠參與機器學(xué)習(xí)、深度學(xué)習(xí)模型的開發(fā)，包括推薦系統(tǒng)、風(fēng)控模型等方向
具備從海量數(shù)據(jù)中提取關(guān)鍵洞察的能力，如用戶分群、異常檢測等
工具使用：熟練操作Airflow、Doris、ClickHouse、數(shù)據(jù)湖（DeltaLake）等相關(guān)工具