中国僵尸片,亚洲欧美国产另类视频,亚洲精品无码人妻无码,亚洲有码转帖,亚洲欧美精品伊人久久,97精品依人久久久

更新于 今天

爬蟲工程師

1.2-2萬
  • 廣州越秀區(qū)
  • 建設(shè)
  • 3-5年
  • 本科
  • 全職
  • 招2人

職位描述

PythonScrapyrequestsHadoopSparkSQL
備注:基于業(yè)務(wù)發(fā)展需要,公司現(xiàn)行工作時間為:上午8:30--下午18:00,中午休息兩小時,單休狀態(tài)(國家法定假日正常休息),介意勿投,謝謝理解
崗位職責(zé)
1、電商平臺數(shù)據(jù)爬取
(1)負責(zé)設(shè)計分布式爬蟲系統(tǒng),采集抖、快、拼等電商平臺的商品信息(訂單信息、店鋪信息、評論等);
(2)應(yīng)對反爬機制(IP封鎖、驗證碼、動態(tài)加載),使用代理IP、Selenium模擬瀏覽器等技術(shù)突破限制;
(3)優(yōu)化爬蟲性能,包括并行化爬取、數(shù)據(jù)去重、異步IO等技術(shù)提升效率
數(shù)據(jù)清洗與存儲:通過正則表達式/XPath解析數(shù)據(jù),存MySQL/MongoDB等數(shù)據(jù)庫;
2、參與自動化系統(tǒng)(如訂貨單生成、報表統(tǒng)計),結(jié)合爬蟲與業(yè)務(wù)需求提升效率;
3、維護爬蟲服務(wù)器,監(jiān)控任務(wù)調(diào)度與報警反饋,確保系統(tǒng)穩(wěn)定性
4、有AI智能體開發(fā),新媒體推廣智能體與辦公智能體的開發(fā)實施經(jīng)驗優(yōu)先考慮;
5.具備數(shù)據(jù)挖掘經(jīng)驗,能構(gòu)建用戶行為分析或個性化推薦系統(tǒng)優(yōu)先考慮
任職要求
1、技術(shù)能力
(1)精通Python開發(fā),熟悉Scrapy、Requests、Selenium等爬蟲框架;
(2)掌握HTML/CSS/JS解析技術(shù)(XPath、正則表達式、Beautiful Soup);
(3)熟悉數(shù)據(jù)庫優(yōu)化(MySQL、MongoDB)及分布式存儲原理;
(4)了解HTTP協(xié)議、抓包工具(Fiddler、Charles)及逆向工程(APP反編譯、JS解密);
2、經(jīng)驗要求
(1)3年以上數(shù)據(jù)爬取實戰(zhàn)經(jīng)驗
(2)有AI智能體開發(fā)經(jīng)驗、機器學(xué)習(xí)或大數(shù)據(jù)處理(Hadoop/Spark)經(jīng)驗者優(yōu)先
3.、軟性要求
(1)計算機相關(guān)專業(yè)本科及以上學(xué)歷
(2)良好的編碼規(guī)范,能獨立解決問題并優(yōu)化系統(tǒng)性能
(3)適應(yīng)高強度工作,具備團隊協(xié)作與跨部門溝通能力

工作地點

廣州市越秀區(qū)中山三路33號B座4505

職位發(fā)布者

莊錦程/人事經(jīng)理

剛剛活躍
立即溝通
公司Logo廣州匯旭信息科技有限公司
廣州匯旭科技有限公司是一家基于大數(shù)據(jù)、AI智能的Saas線上撮合平臺,通過運用AI、大數(shù)據(jù)和區(qū)塊鏈等數(shù)字科技高效迅捷革除小微與銀行間的信息差。目前總部位于廣東廣州,分公司位于北京,后期將在武漢開設(shè)分公司。公司處于成立初期,行業(yè)前景較好。
公司主頁