崗位職責(zé)
1.負(fù)責(zé)網(wǎng)頁端及客戶端應(yīng)用的數(shù)據(jù)采集任務(wù),包括動態(tài)內(nèi)容抓取、非結(jié)構(gòu)化數(shù)據(jù)解析及自動化操作;
2.設(shè)計(jì)并實(shí)現(xiàn)數(shù)據(jù)定位與交互邏輯,能夠精準(zhǔn)識別目標(biāo)數(shù)據(jù)并模擬點(diǎn)擊、填寫表單等操作;
3.開發(fā)穩(wěn)定高效的爬蟲腳本,支持多平臺(Web/PC客戶端/移動端)的數(shù)據(jù)采集需求;
4.優(yōu)化數(shù)據(jù)采集流程,解決反爬機(jī)制(如驗(yàn)證碼、IP封禁、請求限制等)帶來的技術(shù)挑戰(zhàn);
5.配合業(yè)務(wù)部門完成數(shù)據(jù)清洗、格式標(biāo)準(zhǔn)化及存儲方案設(shè)計(jì),確保數(shù)據(jù)可用性;
6.維護(hù)和迭代現(xiàn)有爬蟲系統(tǒng),監(jiān)控運(yùn)行狀態(tài)并提升采集效率與穩(wěn)定性。
任職要求
1.計(jì)算機(jī)、軟件工程或相關(guān)專業(yè),統(tǒng)招本科及以上學(xué)歷,1年以上數(shù)據(jù)采集相關(guān)經(jīng)驗(yàn);
2.熟悉網(wǎng)頁端(HTML/CSS/JavaScript)和客戶端(Windows/macOS/Android/iOS)的數(shù)據(jù)交互原理;
3.具備自動化操作能力,能通過技術(shù)手段實(shí)現(xiàn)數(shù)據(jù)定位、元素識別及模擬點(diǎn)擊操作;
4.有實(shí)際項(xiàng)目經(jīng)驗(yàn),能夠獨(dú)立完成從需求分析到采集部署的全流程工作;
5.邏輯思維清晰,能快速理解業(yè)務(wù)場景中的數(shù)據(jù)結(jié)構(gòu)和交互邏輯;
6.溝通能力強(qiáng),能與業(yè)務(wù)方高效對接需求,推動數(shù)據(jù)采集方案落地。