崗位職責(zé):
1.根據(jù)數(shù)字化應(yīng)用需求,制定ETL相關(guān)設(shè)計(jì)方案和開(kāi)發(fā)計(jì)劃,并進(jìn)行后續(xù)的設(shè)計(jì)、實(shí)施、維護(hù);
2.負(fù)責(zé)數(shù)據(jù)湖數(shù)據(jù)模型的管理工作(建模,設(shè)計(jì),實(shí)施);
3.負(fù)責(zé)數(shù)據(jù)源調(diào)研、入庫(kù)、開(kāi)發(fā)的全流程工作,并保證數(shù)據(jù)質(zhì)量;
4.負(fù)責(zé)數(shù)據(jù)倉(cāng)庫(kù)的模型的標(biāo)準(zhǔn)制定,實(shí)施,監(jiān)督工作;
5.負(fù)責(zé)數(shù)據(jù)抽取、清洗、轉(zhuǎn)化等數(shù)據(jù)處理程序開(kāi)發(fā)。
任職要求:
1.3年以上大數(shù)據(jù)開(kāi)發(fā)經(jīng)驗(yàn),計(jì)算機(jī)科學(xué)、軟件工程、數(shù)學(xué)、統(tǒng)計(jì)學(xué)等相關(guān)專(zhuān)業(yè);
2.具備扎實(shí)的編程基礎(chǔ),熟練掌握 Java、Python、Scala 等至少一種編程語(yǔ)言;
3.熟悉大數(shù)據(jù)技術(shù)棧,包括 Hadoop、Spark、Hive、HBase、Kafka 等,有實(shí)際項(xiàng)目開(kāi)發(fā)經(jīng)驗(yàn)者優(yōu)先;
4.掌握數(shù)據(jù)倉(cāng)庫(kù)設(shè)計(jì)和開(kāi)發(fā)方法,熟悉 SQL 語(yǔ)言,有數(shù)據(jù)倉(cāng)庫(kù)建設(shè)經(jīng)驗(yàn)者優(yōu)先。