中国僵尸片,亚洲欧美国产另类视频,亚洲精品无码人妻无码,亚洲有码转帖,亚洲欧美精品伊人久久,97精品依人久久久

該職位已失效,看看其他機會吧

數(shù)據(jù)工程師

1.5-2.5萬
  • 常州鐘樓區(qū)
  • 5-10年
  • 本科
  • 全職
  • 招1人

職位描述

數(shù)據(jù)治理數(shù)據(jù)挖掘報表開發(fā)PythonETL工具BI工具
工作內(nèi)容:
短期內(nèi)需要
1、負責(zé)企業(yè)內(nèi)部數(shù)據(jù)提取、轉(zhuǎn)換、導(dǎo)出流程的開發(fā)與優(yōu)化。
2、負責(zé)數(shù)據(jù)對接實施,包括從外部系統(tǒng)到企業(yè)內(nèi)部數(shù)據(jù)存儲的集成工作。
3、設(shè)計并優(yōu)化數(shù)據(jù)同步與反饋機制,確保數(shù)據(jù)準確性與可追溯性。
未來需要
1、構(gòu)建標準化的數(shù)據(jù)集成與導(dǎo)出框架,提高數(shù)據(jù)對接的可復(fù)用性和穩(wěn)定性。
2、優(yōu)化數(shù)據(jù)管道,提高數(shù)據(jù)處理的實時性與效率。
3、參與數(shù)據(jù)平臺的架構(gòu)設(shè)計,提高系統(tǒng)的可擴展性和可靠性。
任職要求:
1、基礎(chǔ)技能
- 精通 Python 及相關(guān)數(shù)據(jù)處理庫(Pandas、SQLAlchemy 等),能夠高效進行數(shù)據(jù)提取、轉(zhuǎn)換和加載(ETL)。*
- 熟悉 SQL,具備數(shù)據(jù)庫設(shè)計與優(yōu)化能力,能夠高效處理大規(guī)模數(shù)據(jù)查詢。
- 了解分布式計算框架(如 Spark、Flink),能夠處理大數(shù)據(jù)計算任務(wù)。
- 熟悉 Linux 環(huán)境,具備 Shell 腳本編寫能力,能夠進行基本的系統(tǒng)運維與自動化任務(wù)管理。
2、數(shù)據(jù)導(dǎo)出與實施相關(guān)技能
- 熟悉常見的數(shù)據(jù)接口協(xié)議(如 REST API、GraphQL、gRPC、WebSocket),能夠高效完成數(shù)據(jù)對接任務(wù)。
- 熟悉主流數(shù)據(jù)庫(MySQL、PostgreSQL、MongoDB)及數(shù)據(jù)倉庫(Snowflake、ClickHouse),具備數(shù)據(jù)同步與優(yōu)化經(jīng)驗。
- 具備日志跟蹤和數(shù)據(jù)質(zhì)量監(jiān)控能力,確保數(shù)據(jù)準確性和完整性。
- 熟悉常見數(shù)據(jù)交換格式(JSON、CSV、Parquet),能夠高效進行數(shù)據(jù)轉(zhuǎn)換和傳輸。
- 了解數(shù)據(jù)權(quán)限管理和合規(guī)要求,確保數(shù)據(jù)安全與合規(guī)性。
3、項目經(jīng)驗
- 具備多個數(shù)據(jù)落地項目經(jīng)驗,至少有 1 個完整的數(shù)據(jù)對接、清洗和導(dǎo)出項目經(jīng)驗。*
- 具備企業(yè)級數(shù)據(jù)集成經(jīng)驗,能夠完成從外部系統(tǒng)到企業(yè)內(nèi)部系統(tǒng)的數(shù)據(jù)導(dǎo)入、同步和反饋流程優(yōu)化。*
- 熟悉 ETL 及數(shù)據(jù)管道構(gòu)建流程,能夠獨立完成數(shù)據(jù)流設(shè)計與實現(xiàn)。
- 具備分布式系統(tǒng)經(jīng)驗,能夠處理高并發(fā)數(shù)據(jù)導(dǎo)出任務(wù)。
- 了解 CI/CD 流程,能夠?qū)崿F(xiàn)數(shù)據(jù)處理任務(wù)的自動化部署。
4、加分項
- 具備 Airflow、Dagster 等數(shù)據(jù)調(diào)度工具使用經(jīng)驗,能夠優(yōu)化任務(wù)調(diào)度與管理。
- 具備 Kafka、RabbitMQ 等消息隊列經(jīng)驗,能夠優(yōu)化數(shù)據(jù)傳輸與解耦。
- 了解數(shù)據(jù)湖(Data Lake)架構(gòu)及其應(yīng)用,能夠進行數(shù)據(jù)存儲優(yōu)化。
- 具備云平臺(AWS、GCP、Aliyun)數(shù)據(jù)服務(wù)經(jīng)驗,能夠?qū)崿F(xiàn)云上數(shù)據(jù)集成。
- 具備一定的 DevOps 能力,能夠維護和優(yōu)化數(shù)據(jù)處理環(huán)境。
- 具備良好的溝通與協(xié)作能力,能夠高效對接業(yè)務(wù)團隊,推動數(shù)據(jù)項目落地
查看全部

工作地點

鐘樓區(qū)常州新型工業(yè)數(shù)字化創(chuàng)新中心

職位發(fā)布者

劉昌奇/人事經(jīng)理

三日內(nèi)活躍
立即溝通
公司Logo外企德科數(shù)字技術(shù)有限公司
外企德科數(shù)字技術(shù)有限公司是一家2023年新成立的中外合資企業(yè)。成立于2023年11月24日,公司定位:專注于為信息技術(shù)企業(yè)提供人才及數(shù)字技術(shù)外包解決方案的中外合資企業(yè)。它是由中國人力資源服務(wù)行業(yè)的FESCO(北京國際人力資本集團)與全球人力資源服務(wù)領(lǐng)導(dǎo)者The Adecco Group(德科集團)合資成立的。公司主要提供網(wǎng)絡(luò)技術(shù)服務(wù)、軟件外包服務(wù)、計算機系統(tǒng)服務(wù)、技術(shù)進出口、軟件開發(fā)等信息技術(shù)相關(guān)服務(wù)。專注于為信息技術(shù)企業(yè)提供信息技術(shù)類人才及數(shù)字技術(shù)外包解決方案。
公司主頁