崗位職責
負責公司數(shù)據(jù)閉環(huán)平臺的數(shù)據(jù)采集、解析、清洗、預處理和組織,確保數(shù)據(jù)完整性和高質(zhì)量
設計和優(yōu)化數(shù)據(jù)處理流程,開發(fā)高效、可擴展的數(shù)據(jù)處理工具和腳本,提升數(shù)據(jù)處理效率
參與數(shù)據(jù)版本管理、數(shù)據(jù)格式轉(zhuǎn)換和時間同步等工作,保證數(shù)據(jù)可追溯性和一致性
與算法團隊和內(nèi)部同學緊密協(xié)作,理解業(yè)務需求,優(yōu)化數(shù)據(jù)流和處理流程
對數(shù)據(jù)質(zhì)量問題進行分析和改進,推動數(shù)據(jù)處理標準化和流程優(yōu)化
使用 workflow 等調(diào)度平臺管理數(shù)據(jù)處理任務,實現(xiàn)數(shù)據(jù)處理流程自動化
輔助管理常用數(shù)據(jù)庫和中間件(mysql、redis 等),保證數(shù)據(jù)服務穩(wěn)定
職位要求
本科及以上學歷,計算機科學、數(shù)據(jù)工程、軟件工程、人工智能等相關(guān)專業(yè)
精通 python,熟練使用常用數(shù)據(jù)處理庫(如 pandas、numpy 等)
有數(shù)據(jù)清洗、數(shù)據(jù)預處理、數(shù)據(jù)解析或數(shù)據(jù)組織經(jīng)驗,熟悉完整數(shù)據(jù)處理流程
熟悉調(diào)度和任務管理平臺(如 airflow、workflow 等),能夠設計和維護數(shù)據(jù)處理任務
熟悉基本數(shù)據(jù)庫操作(mysql、postgresql、redis 等),保證數(shù)據(jù)處理穩(wěn)定
注重數(shù)據(jù)質(zhì)量,有良好的邏輯分析能力,思路清晰,團隊協(xié)作能力強
薪酬參考:30K 以內(nèi)定薪，合同簽科銳
其他福利：五險一金，法定年假、過節(jié)禮品、深圳有公司餐廳