中国僵尸片,亚洲欧美国产另类视频,亚洲精品无码人妻无码,亚洲有码转帖,亚洲欧美精品伊人久久,97精品依人久久久

400-885-9898
更新于 今天
智聯(lián)APPAPP
舉報

大數(shù)據開發(fā)工程師（天津辦公 英語流利）

2.4-2.8萬
  • 大連中山區(qū)
  • 5-10年
  • 本科
  • 全職
  • 招1人

職位描述

ETLSqlJavaHadoopSparkKafka
**職位：高級數(shù)據工程師 - **
**經驗要求：6-9年**
**職位概述**
我們正在尋找高級數(shù)據工程師資源，負責將應用程序從傳統(tǒng)的Cloudera環(huán)境遷移到新的基于Kubernetes的數(shù)據平臺。該職位要求具備扎實的數(shù)據工程開發(fā)技能，并能夠在內部負責人的指導下交付高質量的數(shù)據管道。
**主要職責**
? 使用 Spark 3.5 和 Python/Scala 開發(fā)并優(yōu)化數(shù)據管道。
? 將現(xiàn)有的 Hive、Spark 和 Control-M 作業(yè)遷移至基于 Airflow 和 DBT 的工作流。
? 將數(shù)據管道與消息系統(tǒng)（Kafka, Solace）和對象存儲（S3, MinIO）集成。
? 對在 Kubernetes 環(huán)境中運行的分布式作業(yè)進行故障排查和性能優(yōu)化。
? 與內部負責人和架構師緊密合作，實施最佳實踐。
? 設計并實施遷移/加速框架，以自動化端到端的遷移過程。
? 持續(xù)改進框架，確保其穩(wěn)定性、可擴展性以及對多種用例和場景的支持。
? 與各類數(shù)據應用程序協(xié)作，以啟用并支持遷移過程。
? 在商定的時間范圍內完成分配的遷移任務。
**必備技能**
? 6-9 年扎實的數(shù)據工程實戰(zhàn)經驗。
? 精通 Apache Spark（批處理 + 流處理）和 Hive。
? 熟練掌握 Python、Scala 或 Java。
? 了解編排工具（Airflow / Control-M）和 SQL 轉換框架（優(yōu)先考慮 DBT）。
? 具有使用 Kafka、Solace 和對象存儲（S3, MinIO）的經驗。
? 接觸過 Docker/Kubernetes 部署。
? 具備數(shù)據湖倉一體格式（Iceberg, Delta Lake, Hudi）的實戰(zhàn)經驗。

工作地點

大連中山區(qū)港興路附近(天津辦公)

職位發(fā)布者

鄧智譯/人事經理

當前在線
立即溝通
公司Logo成都邁思信息技術有限公司
邁思信息技術有限公司（MaesInfo）是一家布局全球的專業(yè)軟件產品及軟件開發(fā)服務公司，在美國硅谷，匹茲堡，歐共體以及中國的多個城市都擁有自己的分公司，研發(fā)中心或外包業(yè)務中心。公司主要提供IT外包（ITO），商業(yè)流程外包（BPO），智能化解決方案，為客戶提供高效率，高質量及高可預期性的服務。作為外包服務主要提供商，我們擁有專業(yè)的市場分析員，系統(tǒng)架構師，技術顧問，界面設計師，軟件工程師，數(shù)據庫管理工程師及質量管理工程師。我們提供基于面向服務架構（SOA）的企業(yè)信息系統(tǒng)服務，及具有創(chuàng)造性的用戶界面設計，電子商務軟件開發(fā)和事務流程自動化等快速優(yōu)質的軟件外包和離岸開發(fā)服務。我們的客戶遍布于制造、金融服務、醫(yī)療、零售等行業(yè)，其中包括有世界排名前500強的高科技企業(yè)。并且在北美、日本建立了廣泛的外包渠道，在業(yè)界有著突出的成績。在中國，我們最大的外包研發(fā)中心建立在西部外包業(yè)務的福地四川成都，這里孕育著大批優(yōu)秀的軟件專業(yè)人才。在江蘇常州，我們建立了面向華東地區(qū)的軟件研發(fā)及外包業(yè)務中心，其中常州的軟件研發(fā)項目入選當?shù)仡I軍型海歸人才項目，并獲得海歸領軍型人才項目專項資助。與此同時，常州的外包業(yè)務中心開始承接海外外包項目，特別是在美國的全球500強企業(yè)的離岸外包業(yè)務。在深圳及西安，我們正在建設地區(qū)性軟件研發(fā)及外包業(yè)務中心，面向地區(qū)市場，并承攬海外業(yè)務。此外，在美國硅谷，歐共體及卡爾加里我們都擁有自己的分公司，這使得我們的全球客戶服務具備地理位置上的絕對優(yōu)勢?！aesInfo is a leading provider of professional outsourcing service with a Global Development Center in Chengdu,China and as well as PM offices in the USA and Canada.MaesInfo engages in IT Outsourcing(ITO)and R&D while also developing its software products.MaesInfo's goal is to become China's IBM and we strive to be the leader of China's IT Outsourcing industry.Our Global Software Development Center is located in Chengdu,China and offers a hotbed for nurturing the talent to develop and deploy the world's highest-quality software.With branches in Beijing, Silicon Valley and Calgary,we're well positioned to serve our customers globally around the clock.We offer a disciplined approach to offshore outsourcing for companies all over the world.Our high-quality and low-cost operating model allow us to pass on more than 50% cost savings to our clients while continuing to improve our productivity and predictability.As a leading provider for Enterprise Information Systems based on Service Oriented Architecture(SOA),we stand out with an impressive track record across various industries all over the USA and Japan.Our top-notch team includes Business Analysts,Architects,Process Consultants,Interface Designers,Software Engineers,DBA and QA/QC Engineers etc.歡迎瀏覽公司網站：http://www.maesinfo.com; http://www.maesinfo.cn
公司主頁