崗位職責：
1、負責企業(yè)級數(shù)據(jù)湖平臺核心模塊開發(fā)及持續(xù)優(yōu)化，構建高可靠、高性能、可擴展的數(shù)據(jù)存儲與計算體系；
2、負責大數(shù)據(jù)組件的定制和調(diào)優(yōu)（如Spark、Flink、HDFS、Hive、Presto/Trino等），解決分布式環(huán)境下的性能瓶頸與穩(wěn)定性問；
3、對線上復雜問題（如數(shù)據(jù)一致性、資源競爭、作業(yè)傾斜、OOM等）進行深度分析、定位和根治，輸出系統(tǒng)性解決方案；
4、持續(xù)監(jiān)控和優(yōu)化平臺性能（如查詢延遲、吞吐量、資源利用率），追求極致的穩(wěn)定性和效率。
任職要求：
1、本科及以上學歷，計算機相關專業(yè)，4年以上工作經(jīng)驗，具備復雜系統(tǒng)的設計和編碼能力；
2、具備強烈的工程質(zhì)量意識，熟悉CI/CD、監(jiān)控告警、SLA保障等工程化實踐；
2、熟悉Linux/Unix開發(fā)環(huán)境，熟練掌握Java、Python開發(fā)，熟悉Spring boot的框架、熟悉基于K8S的應用開發(fā)和部署;
3、熟悉calcite解析框架，對Presto/Hive/Drill/Spark/Flink等任意一個SQL引擎有開發(fā)經(jīng)驗;
4、有大數(shù)據(jù)平臺研發(fā)經(jīng)驗，掌握Hadoop、Hive、Hbase、Spark、Flink、Hudi等開源大數(shù)據(jù)組件原理及優(yōu)化技術;
5、思維敏捷，有較強的鉆研學習能力，較好的溝通能力、團隊合作。