工作職責(zé):
1、參與全屋數(shù)據(jù)中心數(shù)據(jù)的采集、清洗轉(zhuǎn)換和聚合。
2、參與全屋數(shù)據(jù)中心數(shù)據(jù)建模,對接業(yè)務(wù)需求。
崗位要求:
1、熟練使用常用開源大數(shù)據(jù)產(chǎn)品和云廠商大數(shù)據(jù)產(chǎn)品。
2、熟練使用SQL及優(yōu)化,必須有Flink SQL、HiveSQL經(jīng)驗(yàn),熟悉常用NoSql數(shù)據(jù)庫。
3、有數(shù)據(jù)倉庫或者海量數(shù)據(jù)處理經(jīng)驗(yàn),能獨(dú)立進(jìn)行數(shù)據(jù)作業(yè)調(diào)度和SQL調(diào)優(yōu)。
4、有Java、Python編程能力,或者有熟練編寫Flink Stream作業(yè)能力者優(yōu)先。