崗位職責(zé):
1. 參與公司數(shù)據(jù)中臺(tái)、大數(shù)據(jù)平臺(tái)及數(shù)據(jù)倉庫的整體規(guī)劃,架構(gòu)設(shè)計(jì)和研發(fā);
2. 參與建設(shè)統(tǒng)一的數(shù)據(jù)體系,制定并推動(dòng)數(shù)據(jù)治理體系的落地;
3. 對(duì)數(shù)據(jù)采集、數(shù)據(jù)融合、數(shù)據(jù)質(zhì)量、數(shù)據(jù)應(yīng)用鏈路有深入理解,并能協(xié)助業(yè)務(wù)數(shù)據(jù)集市建設(shè),搭建業(yè)務(wù)領(lǐng)域模型。
任職資格:
1. 計(jì)算機(jī)相關(guān)專業(yè)碩士學(xué)歷,3年及以上相關(guān)工作經(jīng)歷;
2. 精通大數(shù)據(jù)技術(shù)生態(tài)相關(guān)技術(shù)(例如:Hadoop、MapReduce、Hive、Hbase等),并具備豐富的數(shù)據(jù)倉庫、數(shù)據(jù)中臺(tái)架構(gòu)設(shè)計(jì)和實(shí)施經(jīng)驗(yàn),有落地的項(xiàng)目;
3. 從事大數(shù)據(jù)領(lǐng)域至少2年以上,熟悉數(shù)據(jù)倉庫模型設(shè)計(jì)與ETL開發(fā)經(jīng)驗(yàn) ,掌握Kimbal的維度建模設(shè)計(jì)方法,具備海量數(shù)據(jù)加工處理(ETL)相關(guān)經(jīng)驗(yàn);
4. 有實(shí)時(shí)ETL研發(fā)經(jīng)驗(yàn),對(duì)分布式實(shí)時(shí)大數(shù)據(jù)處理系統(tǒng)有深入理解,包括但不限于Spark streaming、Flink;
5. 熟悉數(shù)據(jù)治理、數(shù)據(jù)質(zhì)量管理等相關(guān)理念和方法;
6. 熟悉Kubernetes/Docker開發(fā)及原理,熟悉Kubernetes各組件的工作流程,對(duì)Kubernetes有豐富的部署調(diào)優(yōu)實(shí)踐經(jīng)驗(yàn)。