工作職責(zé)
1、維護(hù)網(wǎng)絡(luò)采集系統(tǒng)，從各種網(wǎng)站和API中提取數(shù)據(jù)。
2、對(duì)數(shù)據(jù)進(jìn)行清洗和預(yù)處理，確保數(shù)據(jù)質(zhì)量和一致性。
3、參與采集系統(tǒng)的性能優(yōu)化，提高數(shù)據(jù)采集分析效率和穩(wěn)定性。
4、與團(tuán)隊(duì)成員合作，參與項(xiàng)目的需求分析和設(shè)計(jì)討論。
任職資格
1、熟悉Python基本語法， 掌握Python常用框架和三方庫(kù)，如flask、fastapi、pandas，Requests, BeautifulSoup, xpath等。
2、熟悉MySQL、redis、git等常用中間件使用
3、熟悉 Android、Web 的逆向工程技術(shù)，了解逆向工程流程。
4、了解HTML、CSS和JavaScript，能夠解析網(wǎng)頁(yè)結(jié)構(gòu)。
5、具備良好的問題解決能力和學(xué)習(xí)能力，能夠獨(dú)立完成任務(wù)。
6、良好的溝通能力和團(tuán)隊(duì)合作精神，愿意接受新挑戰(zhàn)。
加分項(xiàng)：
1、有網(wǎng)絡(luò)采集開發(fā)經(jīng)驗(yàn)者優(yōu)先。
2、了解異步機(jī)制。
薪資范圍：
5000元-8000元
崗位亮點(diǎn)：
1、大平臺(tái)，大視野：作為*的科技企業(yè)，我們擁有海量真實(shí)業(yè)務(wù)場(chǎng)景和高并發(fā)數(shù)據(jù)挑戰(zhàn)，讓你在實(shí)戰(zhàn)中快速成長(zhǎng)為資深開發(fā)工程師。
2、技術(shù)前沿，深度實(shí)踐：深度參與公司核心數(shù)據(jù)采集系統(tǒng)建設(shè)，接觸分布式爬蟲、反爬對(duì)抗、異步高并發(fā)架構(gòu)等前沿技術(shù)，持續(xù)提升工程能力。
3、技術(shù)驅(qū)動(dòng)文化：鼓勵(lì)技術(shù)創(chuàng)新與分享，定期組織技術(shù)沙龍、內(nèi)部培訓(xùn)，支持參加外部技術(shù)大會(huì)，助力個(gè)人成長(zhǎng)。
4、團(tuán)隊(duì)協(xié)作，快速成長(zhǎng)：與數(shù)據(jù)科學(xué)、后端開發(fā)、算法團(tuán)隊(duì)緊密協(xié)作，全程參與需求分析、系統(tǒng)設(shè)計(jì)到上線運(yùn)維，全面提升綜合能力。