崗位職責:
1、掌握mysql、oracle、postgresql等一種或多種數(shù)據庫,會編寫函數(shù)、存儲過程,能進行數(shù)據庫查詢性能調優(yōu)和常見問題處理;
2、熟悉常用etl工具,如datastage、kettle、datax,能使用工具進行數(shù)據的處理;
3、熟悉大數(shù)據相關技術,對hadoop(hdfs/mapreduce/hive/hbase)生態(tài)有所了解,了解常用數(shù)據接入組件datax、sqoop、flumen等一種或多種;
4、掌握一種或多種計算框架和消息隊列:spark、flink、kafka等;
5、掌握greenplum、doris等一種或多種olap數(shù)據庫,進行相關模型的設計和數(shù)據管理;
6、掌握python、java、scala等一種或多種編程語言;
7、熟悉數(shù)據需求分析、數(shù)據探查、數(shù)據模型設計、元數(shù)據管理、數(shù)據標準管理、數(shù)據質量管理等理論方法,會使用工具(powerdesigne、pdmaner)進行數(shù)據模型設計和關系圖梳理;
8、具有多個數(shù)據倉庫開發(fā)項目經驗。熟悉數(shù)據分析展示工具,具有實際數(shù)據可視化開發(fā)項目經驗;
9、具備團隊協(xié)作和溝通能力,能夠與其他成員溝通協(xié)作,共同推進數(shù)據工程項目;
崗位要求:
1、專科及以上學歷,計算機等相關專業(yè)畢業(yè)。
2、具有5年(含)-8年相關實際工作經驗。