【產(chǎn)品介紹】
產(chǎn)品名稱：柚柚兔云素材管理大師（自研發(fā)??！自研發(fā)?。。?br /> 產(chǎn)品簡(jiǎn)介：一款內(nèi)容電商 素材管理 與 創(chuàng)作協(xié)同 軟件，致力成為優(yōu)質(zhì)內(nèi)容生產(chǎn)服務(wù)商?；贜as服務(wù)器基礎(chǔ)上的 saas軟件服務(wù)，對(duì)海量素材進(jìn)行精細(xì)化標(biāo)簽管理，完美融入內(nèi)容營(yíng)銷創(chuàng)作SOP流程，搭配強(qiáng)大的豆包AI大模型。為內(nèi)容團(tuán)隊(duì)效率注入全新引擎。目前已接通抖音千川、全域、TikTok fbusiness、快手磁力金牛等廣告平臺(tái)API接口數(shù)據(jù)。
了解我們：官網(wǎng)產(chǎn)品詳情介紹查看https://www.douyoyo.com/

【你要做什么】
1、負(fù)責(zé)公司數(shù)據(jù)平臺(tái)的數(shù)據(jù)采集、運(yùn)維優(yōu)化；
2、開發(fā)高性能網(wǎng)絡(luò)框架和中間件；
3、開發(fā)、部署、維護(hù)簡(jiǎn)易、直觀的metrics采集系統(tǒng)(基于Grafana),包含性能監(jiān)控、日志聚合和告警、數(shù)據(jù)圖像化展示等；
4、承接上級(jí)需求設(shè)計(jì)數(shù)據(jù)模型，將運(yùn)營(yíng)場(chǎng)景轉(zhuǎn)化為算法方案，為業(yè)務(wù)增長(zhǎng)提供核心驅(qū)動(dòng)；
5、運(yùn)用專業(yè)爬蟲技術(shù)，每日定時(shí)爬取抖音、小紅書等主流社交平臺(tái)(APP/WEB)的海量數(shù)據(jù)，覆蓋用戶信息、內(nèi)容發(fā)布、互動(dòng)評(píng)論等核心板塊。
6、對(duì)原始數(shù)據(jù)進(jìn)行深度清洗，通過(guò)算法與工具剔除重復(fù)、錯(cuò)誤、不完整數(shù)據(jù)，按預(yù)設(shè)模型完成結(jié)構(gòu)化處理，輸出 JSON、CSV 等易存儲(chǔ)分析的格式。
7、負(fù)責(zé)處理后數(shù)據(jù)穩(wěn)定入庫(kù)(MySQL、MongoDB 等)，保障數(shù)據(jù)存儲(chǔ)安全與完整搭建定期備份機(jī)制，防范數(shù)據(jù)丟失風(fēng)險(xiǎn)。
8、維護(hù)爬蟲系統(tǒng) 7x24 小時(shí)穩(wěn)定運(yùn)行，實(shí)時(shí)監(jiān)測(cè)、快速排查并解決系統(tǒng)故障與異常問(wèn)題。
9、協(xié)同產(chǎn)品、運(yùn)營(yíng)及研發(fā)團(tuán)隊(duì)明確技術(shù)需求，推進(jìn)項(xiàng)目落地，結(jié)合業(yè)務(wù)反饋與效果數(shù)據(jù)，持續(xù)迭代優(yōu)化模型與策略。
10、研究數(shù)據(jù)采集策略和防屏蔽規(guī)則，提升數(shù)據(jù)采集系統(tǒng)的穩(wěn)定性、可擴(kuò)展性，提高抓取的效率和質(zhì)量；

【要具備什么】
1、211/985 本科及以上學(xué)歷，計(jì)算機(jī)科學(xué)與技術(shù)、人工智能、數(shù)據(jù)科學(xué)、軟件工程等相關(guān)專業(yè)背景；3-5年經(jīng)驗(yàn)。
2、熟練掌握 Python 語(yǔ)言，具備扎實(shí)的代碼實(shí)施能力與業(yè)務(wù)理解能力，技術(shù)知識(shí)面廣闊，有AI 項(xiàng)目經(jīng)驗(yàn)者優(yōu)先；熟悉分布式多線程編程，熟悉網(wǎng)絡(luò)協(xié)議及數(shù)據(jù)交換標(biāo)準(zhǔn)；有傳統(tǒng)后端項(xiàng)目經(jīng)驗(yàn)是加分項(xiàng)。
3、技術(shù)視野前沿，對(duì) AI 領(lǐng)域有強(qiáng)烈興趣與獨(dú)立認(rèn)知，掌握機(jī)器學(xué)習(xí)、深度學(xué)習(xí)、圖形圖像識(shí)別等基礎(chǔ)理論，了解相關(guān)領(lǐng)域核心算法。
4、熟悉scrapy、nutch等常用爬蟲框架及原理，熟悉app抓取技術(shù)，熟悉常規(guī)反爬蟲策略和規(guī)避方法，能夠獨(dú)立承擔(dān)爬蟲運(yùn)維工作。
5、溝通表達(dá)清晰高效，學(xué)習(xí)能力突出，能快速適配業(yè)務(wù)需求與技術(shù)迭代。
6、頭腦聰明，思維活躍，邏輯清晰，擅長(zhǎng)解決問(wèn)題，善于發(fā)掘優(yōu)秀的開源項(xiàng)目；分析問(wèn)題邏輯清晰，有高度的責(zé)任心，有良好的團(tuán)隊(duì)協(xié)作意識(shí)和溝通能力，善于學(xué)習(xí)和鉆研技術(shù)。
7、良好的英文閱讀能力，能無(wú)障礙閱讀英文文獻(xiàn)。
8、不專門做算法，但需要了解各類主流深度學(xué)習(xí)算法，動(dòng)手能力強(qiáng)，對(duì)常用的深度學(xué)習(xí)框架如Tensorflow，keras，pytorch等有實(shí)踐經(jīng)驗(yàn)，掌握基本的調(diào)參策略，掌握基本的模型訓(xùn)練方法論。
9、加分項(xiàng)：爬取數(shù)據(jù)日均超100w次，深度參與至少一個(gè)大規(guī)模分布式爬蟲系統(tǒng)的架構(gòu)設(shè)計(jì)。

工作時(shí)間：工作時(shí)間：9：30-18：30，12：00-13：30，大小周
工作地址：廣州市白云區(qū)嘉禾望崗地鐵站附近