崗位職責：
深入理解業(yè)務需求，并據(jù)此進行數(shù)據(jù)建模和ETL（Extract, Transform, Load）流程設(shè)計；
負責數(shù)據(jù)的清洗、整合和質(zhì)量控制，確保數(shù)據(jù)質(zhì)量符合業(yè)務分析要求；
編寫高質(zhì)量、可維護的代碼和文檔，包括數(shù)據(jù)處理邏輯、數(shù)據(jù)質(zhì)量管理等；
監(jiān)控和評估數(shù)據(jù)基礎(chǔ)設(shè)施的性能，發(fā)現(xiàn)并解決潛在問題，持續(xù)優(yōu)化數(shù)據(jù)處理效率；
負責數(shù)據(jù)遷移和數(shù)據(jù)質(zhì)量管理方案涉及和分析;
與其他團隊成員緊密合作，支持數(shù)據(jù)遷移，數(shù)據(jù)分析、數(shù)據(jù)挖掘和機器學習項目。
任職要求：
計算機科學相關(guān)專業(yè)本科及以上學歷，5年以上Python數(shù)據(jù)開發(fā)或相關(guān)領(lǐng)域工作經(jīng)驗；
精通Python編程語言及常用庫(Pandas, NumPy, PySpark等)；
熟悉常用數(shù)據(jù)庫技術(shù)(MySQL, PostgreSQL, Sqlserver, Clickhouse,Redis等);
熟悉大數(shù)據(jù)處理框架(Hadoop, Spark, Flink等)；
熟悉Linux操作系統(tǒng)和Shell腳本編程；
熟悉消息隊列系統(tǒng)(Kafka, RabbitMQ等);
了解分布式系統(tǒng)原理和設(shè)計模式；
了解機器學習基礎(chǔ)知識和常用框架;