崗位職責(zé)
1、Agent系統(tǒng)開發(fā)：
-設(shè)計(jì)并實(shí)現(xiàn)基于大模型的 Agent架構(gòu)。
-開發(fā)支持復(fù)雜工作流的Agent系統(tǒng)（如AutoGen/GPT Engineer架構(gòu)），實(shí)現(xiàn)自動(dòng)化任務(wù)處理與決策閉環(huán)。
2、RAG與數(shù)據(jù)層構(gòu)建：
-構(gòu)建多源異構(gòu)數(shù)據(jù)采集管道（含網(wǎng)頁/API/文檔），通過爬蟲技術(shù)動(dòng)態(tài)更新知識(shí)庫，支撐RAG系統(tǒng)的時(shí)效性需求。
-優(yōu)化上下文檢索質(zhì)量，結(jié)合向量數(shù)據(jù)庫（Pinecone/Milvus）與圖數(shù)據(jù)庫構(gòu)建混合檢索策略。
3、云服務(wù)與工程化：
-集成云平臺(tái)AI服務(wù)（AWS Bedrock/Azure OpenAI/火山引擎），實(shí)現(xiàn)Agent服務(wù)的高可用部署（負(fù)載均衡/自動(dòng)擴(kuò)縮容）。
-設(shè)計(jì)異步任務(wù)調(diào)度框架（Celery/RabbitMQ），支持Agent的長(zhǎng)周期任務(wù)執(zhí)行與狀態(tài)持久化。
4、數(shù)據(jù)采集專項(xiàng)（新增）：
-開發(fā)高并發(fā)分布式爬蟲系統(tǒng)，突破反爬機(jī)制（驗(yàn)證碼/頻率限制/IP封禁），保障數(shù)據(jù)獲取的穩(wěn)定性與合法性。
-構(gòu)建自動(dòng)化數(shù)據(jù)清洗管道，處理非結(jié)構(gòu)化文本/表格/富媒體內(nèi)容，輸出Agent可用的高質(zhì)量知識(shí)源。

任職要求
必需技能：
1、Agent系統(tǒng)開發(fā)經(jīng)驗(yàn)：
- 深入理解Agent架構(gòu)（ReAct/Plan-and-Execute），有LangChain/LlamaIndex/AutoGen等框架實(shí)戰(zhàn)經(jīng)驗(yàn)
-掌握工具調(diào)用（Function Calling）開發(fā)模式，能設(shè)計(jì)API/工具擴(kuò)展Agent能力邊界。
2、Python工程與云服務(wù)：
-精通Python異步生態(tài)（Asyncio/FastAPI/WebSockets），熟悉gRPC服務(wù)優(yōu)化及內(nèi)存管理。
-熟練使用至少一種云平臺(tái)（AWS/Azure/GCP/阿里云）的Serverless/容器服務(wù)（Lambda/ECS/K8s）。
3、高并發(fā)與數(shù)據(jù)工程：
-具備分布式爬蟲開發(fā)經(jīng)驗(yàn)（Scrapy/Selenium/Playwright），熟悉反爬策略與代理池/指紋瀏覽器方案。
-掌握數(shù)據(jù)管道構(gòu)建（Apache Airflow/Luigi），實(shí)現(xiàn)數(shù)據(jù)采集→清洗→入庫的自動(dòng)化。

加分項(xiàng)：
-開發(fā)過多Agent協(xié)作系統(tǒng)（如Agent模擬社會(huì)/ChatDev）或自定義Agent推理引擎。
-掌握網(wǎng)頁逆向工程（JS加密解析/App協(xié)議破解）或大規(guī)模數(shù)據(jù)去重技術(shù)（MinHash/SimHash）。
-有LLM微調(diào)經(jīng)驗(yàn)（LoRA/QLoRA）或模型輕量化部署（vLLM/OpenLLM）。 技術(shù)博客/GitHub項(xiàng)目證明工程能力（附鏈接優(yōu)先）。