崗位職責:
1.負責數(shù)據(jù)的采集、清洗、轉(zhuǎn)換和加載(ETL)等工作,確保數(shù)據(jù)的質(zhì)量和一致性。
2.負責維護和優(yōu)化數(shù)據(jù)平臺、數(shù)據(jù)倉庫等數(shù)據(jù)基礎設施,確保其穩(wěn)定運行和高效性能。
3.開發(fā)和維護數(shù)據(jù)服務接口,提供便捷的數(shù)據(jù)訪問方式。
4.解決數(shù)據(jù)處理中的技術難題,提供技術支持。
任職要求:
1.本科及以上學歷,計算機、大數(shù)據(jù)、軟件工程等相關專業(yè)。
2.具備3年以上智慧城市、數(shù)字政府類項目數(shù)據(jù)治理及開發(fā)、系統(tǒng)設計與研發(fā)等實施經(jīng)驗,能夠準確、全面地理解業(yè)務。
3.熟悉大數(shù)據(jù)背景下的數(shù)據(jù)治理體系架構(gòu),對數(shù)據(jù)標準管理、數(shù)據(jù)質(zhì)量管理、元數(shù)據(jù)管理、數(shù)據(jù)目錄管理方法有深入研究。
4.熟悉數(shù)據(jù)治理相關工具,扎實的數(shù)據(jù)分析與數(shù)據(jù)模型設計能力(SQL、統(tǒng)計分析、維度建模建設方法,有數(shù)據(jù)采集、數(shù)據(jù)集成、數(shù)據(jù)分析等腳本開發(fā)能力。
5.精通大數(shù)據(jù)相關技術,Hadoop(HDFS/MapReduce/Hive/HBase),Redis,Flink,Spark,Kafka等。
6.具備 Oracle、Mysql、Postgresql等一種以上數(shù)據(jù)庫設計開發(fā)經(jīng)驗,具備良好的SQL基礎和sql優(yōu)化能力,熟悉國產(chǎn)數(shù)據(jù)庫者優(yōu)先。