工作職責
1、負責相關數(shù)據(jù)平臺的開發(fā)工作(包括但不限于調(diào)研、標準設計、數(shù)據(jù)倉庫設計、數(shù)據(jù)集成和數(shù)據(jù)加工開發(fā)、數(shù)據(jù)質(zhì)量管理及優(yōu)化、數(shù)據(jù)報表及可視化開發(fā)、數(shù)據(jù)資產(chǎn)管理、數(shù)據(jù)平臺管理、相關文檔編寫,以及平臺和數(shù)據(jù)相關的技術咨詢等)。
2、對低級別工作人員的工作進行指導,并對工作完成質(zhì)量進行監(jiān)督。
3、參與對接業(yè)務需求,負責日常需求開發(fā)
任職資格
1、熟悉基本的Linux使用和操作,具有腳本開發(fā)經(jīng)驗(shell、python、perl等)
2、熟練主流關系型數(shù)據(jù)庫(如mysql、postgresql、sql server、db2、oracle等)
3、熟悉數(shù)據(jù)倉庫分層設計及維度建模理論,3年以上數(shù)據(jù)類項目建設經(jīng)驗,有至少一個完整項目的實施經(jīng)驗
4、熟悉ETL及數(shù)據(jù)集成開發(fā),并至少有一種開發(fā)數(shù)據(jù)集成、開發(fā)工具(如Kettle、Talend、Datastage、Informatic、DataWorks、Dataphin等)的項目使用經(jīng)驗,如果是基于大數(shù)據(jù)的數(shù)據(jù)集成或開發(fā)工具(如DataWorks、Dataphin等)將優(yōu)先考慮
5、熟悉常見的大數(shù)據(jù)或NoSql存儲(如Greenplum、Teradata、TiDB、Hive、HBase、Clickhouse、Druid、ElasticSearch等),并至少有其中一種的項目使用經(jīng)驗
6、熟悉常見的大數(shù)據(jù)計算工具開發(fā)方式(如MR、Spark、Flink),并至少有其中一種的實際項目開發(fā)經(jīng)驗,較好的性能調(diào)優(yōu)
7、溝通順暢,具備較強的業(yè)務溝通、需求分析和文檔編寫能力,有團隊意識,有責任感;
8、具備較強的自我學習能力、有較強分析問題的能力。
9、會阿里云dataworks,hive,DB2遷移hive(卡遷移hive,遷移阿里云卡dataworks)