中国僵尸片,亚洲欧美国产另类视频,亚洲精品无码人妻无码,亚洲有码转帖,亚洲欧美精品伊人久久,97精品依人久久久

更新于 今天

爬蟲工程師(python)

1.2-1.8萬
  • 上海徐匯區(qū)
  • 1-3年
  • 本科
  • 全職
  • 招3人

雇員點評標簽

  • 工作環(huán)境好
  • 同事很nice
  • 人際關(guān)系好
  • 團隊執(zhí)行強
  • 氛圍活躍
  • 免費班車
  • 管理人性化
  • 準時發(fā)工資

職位描述

Python反爬蟲分布式爬蟲爬蟲開發(fā)FlaskDjango反爬人工智能互聯(lián)網(wǎng)
教育背景與工作經(jīng)驗
o 本科及以上學(xué)歷,計算機相關(guān)專業(yè)
o 1 年以上數(shù)據(jù)采集工作經(jīng)驗
? 核心技能
o 精通 JavaScript 逆向工程
o 有主流站點 Web 端大規(guī)模數(shù)據(jù)采集經(jīng)驗
o 具備多類型驗證碼處理能力:包括滑塊、點選、Google reCAPTCHA、
旋轉(zhuǎn)驗證碼等
o 熟悉 APP 脫殼、逆向、反編譯及自動化相關(guān)技術(shù)
o 具備 AST 反混淆 JavaScript 代碼及 JSVMP 算法還原能力
? 附加技能(優(yōu)先考慮):具有風(fēng)控應(yīng)對經(jīng)驗(如 Akamai 并發(fā)、Cloudflare 等
反爬蟲策略處理經(jīng)驗)
3 崗位描述
3.1 負責(zé)大模型相關(guān)數(shù)據(jù)采集,包括不限于海內(nèi)外文本,圖片,音視頻數(shù)據(jù);
3.2 負責(zé)對目標網(wǎng)站或 APP 進行反爬突破、協(xié)議破解和提取關(guān)鍵數(shù)據(jù);
3.3 負責(zé)反爬蟲策略研究,代理、驗證碼識別等采集支撐服務(wù)建設(shè);
3.4 參與大規(guī)模數(shù)據(jù)處理流程的設(shè)計與開發(fā),包括但不限于數(shù)據(jù)采集、清洗、轉(zhuǎn)
換、存儲等過程。
4 服務(wù)范圍與內(nèi)容
4.1 服務(wù)目標
協(xié)助開展各類數(shù)據(jù)采集業(yè)務(wù)(包括但不限于預(yù)訓(xùn)練數(shù)據(jù)采集、全站數(shù)據(jù)采
集、文件文檔下載等),針對多樣化的需求種類,特別是定向采集、高定數(shù)
據(jù)字段以及目標站點反爬嚴重等情況,提供定制化解決方案。具體包含但不
限于以下內(nèi)容:
1. 大模型相關(guān)數(shù)據(jù)采集
o 海內(nèi)外文本、圖片、音視頻等數(shù)據(jù)采集
o 保證數(shù)據(jù)多樣性及高質(zhì)量
2. 反爬蟲策略研究與實施
o 深度分析目標網(wǎng)站或 APP
o 突破反爬措施(協(xié)議破解、代理使用、驗證碼識別等)
o 提供反爬支撐服務(wù)建設(shè)
3. 大規(guī)模數(shù)據(jù)處理流程設(shè)計與開發(fā)
o 數(shù)據(jù)采集、清洗、轉(zhuǎn)換、存儲的全流程實現(xiàn)
o 確保數(shù)據(jù)準確性與可用

工作地點

上海徐匯區(qū)模速空間(SMC)1

職位發(fā)布者

胡雨分/高級招聘顧問

剛剛活躍
立即溝通
公司Logo軟通動力信息技術(shù)(集團)股份有限公司公司標簽
軟通動力信息技術(shù)(集團)股份有限公司(以下簡稱“軟通動力”)是中國數(shù)字技術(shù)產(chǎn)品和服務(wù)創(chuàng)新領(lǐng)導(dǎo)企業(yè),致力于成為一家具有全球影響力的科技企業(yè),企業(yè)數(shù)字化轉(zhuǎn)型可信賴合作伙伴。公司2005年成立于北京,多年來始終堅持科技創(chuàng)新,具有軟硬全棧的智能技術(shù)產(chǎn)品和服務(wù)能力,提供軟件與數(shù)字技術(shù)服務(wù)、計算產(chǎn)品與數(shù)字基礎(chǔ)設(shè)施、數(shù)字能源與智算服務(wù)以及國際化服務(wù)。目前,公司在10余個重要行業(yè)服務(wù)超過1100家國內(nèi)外客戶,其中超過230家客戶為世界500強或中國500強企業(yè),員工近90000人。軟通動力擁有軟通咨詢、軟通金科、軟通工業(yè)互聯(lián)、機械革命、軟通華方等業(yè)務(wù)子品牌,并在全球40余個城市布局業(yè)務(wù),構(gòu)建北美、日本、東南亞、中東四大國際交付中心,在北京城市副中心、江蘇無錫建設(shè)兩大智能制造基地。同時,公司前瞻布局智能制造、ICT軟硬基礎(chǔ)能力和生產(chǎn)力智能化產(chǎn)品,打造產(chǎn)業(yè)鏈閉環(huán)。軟通動力設(shè)立30個能力中心,擁有1個國家級工程實驗室,6個省市政府認定的工程、技術(shù)實驗室及研發(fā)中心,1個博士后科研工作站,50+技術(shù)合作伙伴的生態(tài)合作體系,不斷探索前沿技術(shù)的巨大商業(yè)應(yīng)用潛力。公司旗下教育品牌軟通教育,擁有一家全日制本科學(xué)院——鄭州西亞斯學(xué)院數(shù)字技術(shù)產(chǎn)業(yè)學(xué)院;同時在全國合作院校600多所,設(shè)有70多個校企聯(lián)合人才培養(yǎng)基地,通過校企合作、協(xié)同育人,為社會培養(yǎng)高素質(zhì)應(yīng)用型人才。軟通動力先后獲得“2023年中國IT服務(wù)市場排名TOP 1”、“2024年Q4 PC出貨量國內(nèi)市場份額排名TOP 2”、“2024年中國軟件和信息技術(shù)服務(wù)競爭力百強企業(yè)”、“2023年中國信創(chuàng)企業(yè)100強”、“2024萬得ESG評級(Wind ESG Rating)AA級及信息技術(shù)服務(wù)行業(yè)ESG綜合得分排名第一”等榮譽及市場認可,并擁有全球軟件工程領(lǐng)域最高級別CMMI V2.0成熟度5級評估認證、國家研發(fā)運營一體化(DevOps)三級能力成熟度模型認證、信息技術(shù)服務(wù)標準(ITSS)運維能力成熟度一級認證等專業(yè)資質(zhì),支撐公司更優(yōu)質(zhì)的服務(wù)體系。
公司主頁