職位描述
PythonScrapy
崗位職責(zé)：
1、根據(jù)業(yè)務(wù)數(shù)據(jù)需求，完成網(wǎng)站和APP應(yīng)用的網(wǎng)絡(luò)爬蟲任務(wù)的調(diào)度、數(shù)據(jù)爬取、解析處理、入庫、常見文檔內(nèi)容解析等日常工作；
2、對(duì)爬蟲獲取到的內(nèi)容進(jìn)行初步數(shù)據(jù)處理分析等；
3、設(shè)計(jì)爬蟲策略和防屏蔽規(guī)則，提升網(wǎng)頁和APP的抓取效率和質(zhì)量；
4. 對(duì)接公司內(nèi)部的數(shù)據(jù)獲取需求并合理安排，保證交付內(nèi)容符合需求；
任職資格;
1、本科及學(xué)歷，計(jì)算機(jī)相關(guān)專業(yè)，至少2年以上數(shù)據(jù)采集工作經(jīng)驗(yàn)；
2、熟練使用主流采集技術(shù)及框架工具，如Frida、Puppeteer、Scrapy等，實(shí)現(xiàn)大規(guī)模文本和音視頻抓取、從事網(wǎng)絡(luò)爬蟲、網(wǎng)頁去重、信息抽取，解析入庫等工作，熟悉反爬蟲、驗(yàn)證碼識(shí)別技術(shù)；
3、掌握常見的終端逆向分析方法，包括但不限于JavaScript逆向、反混淆、反調(diào)試，APP反編譯、脫殼、分析、調(diào)試等，熟練使用jadx、apktool、IDA、Frida、xposed等工具；
4、至少精通Java、Python中的一門編程語言，熟練PDF、Word、Excel等文檔內(nèi)容的解析工作；
5、善于溝通，工作責(zé)任心強(qiáng)，強(qiáng)烈的上進(jìn)心和求知欲，具備一定的抗壓能力和快速的學(xué)習(xí)能力。
1、根據(jù)業(yè)務(wù)數(shù)據(jù)需求，完成網(wǎng)站和APP應(yīng)用的網(wǎng)絡(luò)爬蟲任務(wù)的調(diào)度、數(shù)據(jù)爬取、解析處理、入庫、常見文檔內(nèi)容解析等日常工作；
2、對(duì)爬蟲獲取到的內(nèi)容進(jìn)行初步數(shù)據(jù)處理分析等；
3、設(shè)計(jì)爬蟲策略和防屏蔽規(guī)則，提升網(wǎng)頁和APP的抓取效率和質(zhì)量；
4. 對(duì)接公司內(nèi)部的數(shù)據(jù)獲取需求并合理安排，保證交付內(nèi)容符合需求；
任職資格;
1、本科及學(xué)歷，計(jì)算機(jī)相關(guān)專業(yè)，至少2年以上數(shù)據(jù)采集工作經(jīng)驗(yàn)；
2、熟練使用主流采集技術(shù)及框架工具，如Frida、Puppeteer、Scrapy等，實(shí)現(xiàn)大規(guī)模文本和音視頻抓取、從事網(wǎng)絡(luò)爬蟲、網(wǎng)頁去重、信息抽取，解析入庫等工作，熟悉反爬蟲、驗(yàn)證碼識(shí)別技術(shù)；
3、掌握常見的終端逆向分析方法，包括但不限于JavaScript逆向、反混淆、反調(diào)試，APP反編譯、脫殼、分析、調(diào)試等，熟練使用jadx、apktool、IDA、Frida、xposed等工具；
4、至少精通Java、Python中的一門編程語言，熟練PDF、Word、Excel等文檔內(nèi)容的解析工作；
5、善于溝通，工作責(zé)任心強(qiáng)，強(qiáng)烈的上進(jìn)心和求知欲，具備一定的抗壓能力和快速的學(xué)習(xí)能力。
工作地點(diǎn)
北京朝陽區(qū)榮聯(lián)科技大廈6
相似職位
北京 - 昌平
國家電投集團(tuán)數(shù)字科技有限公司- 數(shù)據(jù)采集工程師1.5-3萬
北京 - 朝陽
萬聯(lián)易達(dá)物流科技有限公司 - python爬蟲工程師8000-14000元
北京 - 海淀
北京信達(dá)華方科技有限公司 - python爬蟲工程師8000-16000元
北京 - 大興
西安易行慧通旅游發(fā)展有限公司 - 爬蟲工程師6000-12000元
北京 - 門頭溝
北京邁迪培爾信息技術(shù)有限公司 - 爬蟲工程師1.5-2.2萬
北京 - 朝陽
金風(fēng)科技股份有限公司
熱門公司推薦
- 霸王茶姬招聘
- 肯德基招聘
- 順豐招聘
- 美團(tuán)招聘
- 京東招聘
- 餓了么招聘
- 比亞迪招聘
- 中國一汽招聘
- 北京汽車招聘
- 蔚來招聘
- 東風(fēng)汽車招聘
- 長城汽車招聘
- 奇瑞汽車招聘
- 理想汽車招聘
- 長鑫存儲(chǔ)招聘
- 天江藥業(yè)招聘
- 藍(lán)月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 聯(lián)想招聘
- ?？低曊衅?/a>
- 寧德時(shí)代招聘
- 中興招聘
- 新松招聘
- 京東方招聘
- 申通招聘
- 圓通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麥當(dāng)勞招聘
- 星巴克招聘
- 海底撈招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 騰訊招聘
- 百度招聘
- 快手招聘
- 字節(jié)跳動(dòng)招聘
- 新華網(wǎng)招聘
- 小米招聘
- 招商銀行招聘
- 中信銀行招聘
- 北京銀行招聘
- 興業(yè)銀行招聘
- 交通銀行招聘
- 建發(fā)集團(tuán)招聘
- 中國移動(dòng)招聘
- 中國聯(lián)通招聘
- 中國電信招聘
- 中糧集團(tuán)招聘
- 國藥控股招聘
- 中廣核招聘
- 中國船舶招聘
- 強(qiáng)生中國招聘
- 匯豐中國招聘
- 宜家招聘
- 立邦中國招聘
- 伊利招聘
- 青島啤酒招聘
- 京港地鐵招聘
- 寶馬招聘
- 小鵬汽車招聘
- 華為招聘
- 特斯拉招聘
- 吉利招聘
- 奔馳招聘
- 海爾招聘
- 美的招聘
- 京東方招聘
- 施耐德電氣招聘
- 德邦物流招聘
職位發(fā)布者
劉女士/HR
立即溝通
萬聯(lián)易達(dá)物流科技有限公司萬聯(lián)易達(dá)集團(tuán)深入融入社會(huì)產(chǎn)業(yè)鏈各業(yè)務(wù)場景，基于AI和通用技術(shù)，構(gòu)建以人工智能研究應(yīng)用平臺(tái)、大宗商品交易平臺(tái)、整車物流服務(wù)平臺(tái)、數(shù)智金融平臺(tái)為核心的智能化產(chǎn)業(yè)生態(tài)系統(tǒng)，為各類產(chǎn)業(yè)生態(tài)伙伴提供智能、高效、安全的數(shù)智化解決方案，讓產(chǎn)業(yè)生態(tài)更智能，推動(dòng)社會(huì)產(chǎn)業(yè)運(yùn)行效率提升。人工智能研究應(yīng)用平臺(tái)萬聯(lián)易達(dá)人工智能研究應(yīng)用平臺(tái)連接各業(yè)務(wù)平臺(tái)和產(chǎn)業(yè)生態(tài)合作伙伴，通過具體的業(yè)務(wù)場景驅(qū)動(dòng)，研究開發(fā)上千個(gè)人工智能垂類大模型智能體，賦能各業(yè)務(wù)場景，支撐產(chǎn)業(yè)生態(tài)智能、高效、安全運(yùn)行。商品交易平臺(tái)聚合黑色金屬、有色金屬、能源化工品和農(nóng)副產(chǎn)品的上游、中游及部分下游產(chǎn)品的展銷和招采，以人工智能技術(shù)輔助買賣雙方形成最優(yōu)購銷方案，大幅降低交易成本。整車物流服務(wù)平臺(tái)5A級(jí)網(wǎng)絡(luò)貨運(yùn)平臺(tái)。以“智慧場站”為紐帶，利用人工智能和大數(shù)據(jù)技術(shù)，形成端到端全鏈路、線上線下共融合的數(shù)智化整車貨運(yùn)解決方案，同時(shí)提供整車貨運(yùn)交易撮合服務(wù)和承運(yùn)交付服務(wù)?！爸腔蹐稣尽被贏IoT、大數(shù)據(jù)等先進(jìn)技術(shù)和各類資源，串聯(lián)包括訂單管理、場區(qū)內(nèi)裝卸貨、在途運(yùn)輸在內(nèi)的物流管理智能化平臺(tái)，有效實(shí)現(xiàn)人、車、貨、場之間的智聯(lián)互通，為監(jiān)管部門、企業(yè)構(gòu)建智能化管理和調(diào)度體系攻克服務(wù)最后障礙，打通最后一環(huán)。數(shù)智金融平臺(tái)連通大宗商品交易和整車物流服務(wù)業(yè)務(wù)場景，提供信貸融資、保險(xiǎn)、車輛融資租賃、期貨風(fēng)險(xiǎn)管理和投資服務(wù)，利用人工智能技術(shù)極大提高業(yè)務(wù)效率和識(shí)別風(fēng)控能力。
公司主頁