崗位職責
1. 數(shù)據(jù)治理與開發(fā)
- 負責政務大數(shù)據(jù)平臺的數(shù)據(jù)接入、清洗、治理全流程開發(fā)工作
- 使用ETL工具(如DataX、Kettle、Informatica等)進行數(shù)據(jù)集成與轉(zhuǎn)換
- 基于數(shù)倉理論(ODS/DWD/DWS/ADS)進行數(shù)據(jù)分層建模與開發(fā)
- 設計和優(yōu)化數(shù)據(jù)質(zhì)量監(jiān)控體系,提升數(shù)據(jù)準確性
2. 系統(tǒng)開發(fā)與優(yōu)化
- 使用Java主流框架(SpringBoot/SpringCloud)開發(fā)數(shù)據(jù)服務API
- 負責大數(shù)據(jù)平臺核心功能模塊的設計與開發(fā)
- 優(yōu)化數(shù)據(jù)處理性能,解決高并發(fā)、大數(shù)據(jù)量場景下的技術難題
3. 系統(tǒng)運維與問題排查
- 負責大數(shù)據(jù)平臺的問題排查與修復,包括代碼層優(yōu)化
- 維護消息中間件(Kafka/RabbitMQ/Redis)的穩(wěn)定運行
- 配合運維團隊進行系統(tǒng)監(jiān)控、性能調(diào)優(yōu)
4. 前端開發(fā)支持
- 使用jQuery等前端技術配合完成管理后臺開發(fā)
- 開發(fā)數(shù)據(jù)可視化相關功能
任職要求
1. 必備技能
- 3年以上大數(shù)據(jù)平臺開發(fā)或數(shù)據(jù)治理相關經(jīng)驗
- 精通Java開發(fā),熟練掌握SpringBoot/SpringCloud等主流框架
- 熟練使用ETL工具進行數(shù)據(jù)清洗與集成
- 熟悉數(shù)據(jù)倉庫理論(維度建模、數(shù)據(jù)分層)
- 熟悉Kafka、RabbitMQ、Redis等消息中間件的開發(fā)應用
- 具備Linux環(huán)境下的問題排查能力
2. 技術棧要求
- 后端:Java8+、SpringBoot、MyBatis、SpringCloud
- 大數(shù)據(jù):Hadoop、Hive、Spark、Flink(至少熟悉一種)
- 數(shù)據(jù)庫:MySQL、Oracle、PostgreSQL
- 前端:jQuery、HTML5、CSS3(能獨立完成簡單頁面開發(fā))
3. 加分項
- 有政務大數(shù)據(jù)項目經(jīng)驗,熟悉政務數(shù)據(jù)標準
- 熟悉數(shù)據(jù)治理工具(如Atlas、DataHub)
- 了解微服務架構和容器化技術(Docker/K8s)
- 有數(shù)據(jù)可視化開發(fā)經(jīng)驗(Echarts等)
4. 軟技能
- 良好的編碼規(guī)范和文檔習慣
- 較強的邏輯思維和問題解決能力
- 能承受一定工作壓力,具備團隊協(xié)作精神
備注:本崗位要求同時具備大數(shù)據(jù)治理能力和Java全棧開發(fā)能力,特別歡迎有政務行業(yè)經(jīng)驗或大型數(shù)據(jù)平臺開發(fā)經(jīng)驗的候選人!