崗位職責:
1、 主導ETL數(shù)據(jù)處理流程的設(shè)計與開發(fā),負責對接電商平臺(淘寶、京東、拼多多、抖音)以及公司內(nèi)部ERP、BI等多數(shù)據(jù)源系統(tǒng)
2、構(gòu)建高性能、可擴展的數(shù)據(jù)同步機制,實現(xiàn)銷售、發(fā)貨、庫存、采購等關(guān)鍵鏈路數(shù)據(jù)的集成與打通
3、在部分第三方平臺API能力有限的場景下,使用RPA工具輔助完成網(wǎng)頁數(shù)據(jù)抓取與結(jié)構(gòu)化處理
4、持續(xù)優(yōu)化ETL流程性能與數(shù)據(jù)處理效率,保障數(shù)據(jù)平臺運行的穩(wěn)定性和可擴展性
5、 編寫數(shù)據(jù)處理流程文檔,支持數(shù)據(jù)資產(chǎn)管理與內(nèi)部數(shù)據(jù)服務(wù)能力建設(shè)
6、為業(yè)務(wù)系統(tǒng)的開發(fā)團隊提供數(shù)據(jù)支持,協(xié)助他們在產(chǎn)品開發(fā)過程中進行數(shù)據(jù)集成、查詢優(yōu)化等,確保業(yè)務(wù)系統(tǒng)的高效運行
崗位要求:
1、 本科及以上學歷,數(shù)據(jù)科學與大數(shù)據(jù)技術(shù)等相關(guān)專業(yè)
2、 2-3年大數(shù)據(jù)ETL開發(fā)經(jīng)驗,至少1年以上電商平臺數(shù)據(jù)處理經(jīng)驗,熟悉淘寶、京東、拼多多、抖音等平臺的數(shù)據(jù)結(jié)構(gòu)與業(yè)務(wù)邏輯
3、熟悉ERP系統(tǒng)(如金蝶、旺店通等),理解采購、發(fā)貨、庫存等業(yè)務(wù)流程及其數(shù)據(jù)模型
4、熟練掌握主流ETL開發(fā)框架(如Spark、Flink、Hive、Hadoop等),有中大型數(shù)據(jù)處理任務(wù)經(jīng)驗
5、精通常用數(shù)據(jù)庫,如Oracle、SQL Server、Postgresql、MY SQL等
6、熟練使用 Python 編程語言,能夠開發(fā) ETL 腳本;具備基本的 RPA 腳本開發(fā)能力
7、 熟悉數(shù)據(jù)倉庫、數(shù)據(jù)湖架構(gòu)與數(shù)據(jù)建模,可根據(jù)業(yè)務(wù)需求設(shè)計高可用的數(shù)據(jù)結(jié)構(gòu)
8、 具備一定的大數(shù)據(jù)AI分析能力,了解常用的AI學習/AI算法,并能夠結(jié)合業(yè)務(wù)場景應(yīng)用
9、良好的團隊合作和溝通能力,能夠與跨部門團隊協(xié)作解決技術(shù)難題