崗位職責:
1.數(shù)據(jù)采集實施:負責多種數(shù)據(jù)源的數(shù)據(jù)采集,包括結(jié)構(gòu)化、半結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù);執(zhí)行數(shù)據(jù)采集計劃;對采集到的數(shù)據(jù)進行清洗和預(yù)處理。
2.數(shù)據(jù)運維管理:負責數(shù)據(jù)的備份、恢復(fù)、歸檔等管理工作,制定數(shù)據(jù)存儲的規(guī)范和標準。
3.數(shù)據(jù)架構(gòu)設(shè)計與實施:建立數(shù)據(jù)倉庫指標體系和分層架構(gòu),開發(fā)數(shù)據(jù)處理腳本和程序,實現(xiàn)數(shù)據(jù)的批量處理和實時處理。
4.數(shù)據(jù)建模設(shè)計:負責設(shè)計和維護工業(yè)互聯(lián)網(wǎng)相關(guān)的數(shù)據(jù)模型,包括概念模型、邏輯模型和物理模型。
5.數(shù)據(jù)服務(wù)實施:負責與其他系統(tǒng)進行數(shù)據(jù)集成,開發(fā)數(shù)據(jù)接口,實現(xiàn)數(shù)據(jù)的共享和交換。
任職要求:
1.學歷及專業(yè)要求:本科及以上學歷,原則上“雙一流”高校計算機、軟件工程、數(shù)據(jù)科學與大數(shù)據(jù)技術(shù)、物聯(lián)網(wǎng)工程、自動化等相關(guān)專業(yè)。
2.崗位經(jīng)驗:3年以上相關(guān)工作經(jīng)驗。
3.專業(yè)技能:熟練掌握 ETL 工具或編程語言(Python/Java/Scala),具備數(shù)據(jù)抽取、轉(zhuǎn)換、加載的實戰(zhàn)經(jīng)驗;熟悉關(guān)系型數(shù)據(jù)庫(MySQL/Oracle)、NoSQL(HBase/MongoDB)、數(shù)據(jù)倉庫(Hive/Redshift)、分布式存儲架構(gòu)(HDFS/Ceph)等存儲技術(shù),了解數(shù)據(jù)庫設(shè)計、管理與優(yōu)化、數(shù)據(jù)庫備份與恢復(fù);熟悉SQL、HQL等數(shù)據(jù)庫編程語言、數(shù)據(jù)倉庫管理工具,具備熟練分析SQL語句性能,精通DB索引、分表等優(yōu)化措施設(shè)計和實施的能力;掌握接口開發(fā)框架(如 Spring Boot、Django),能編寫高效、穩(wěn)定的數(shù)據(jù)接口。
4.溝通協(xié)作及能力要求:能夠與開發(fā)團隊、產(chǎn)品經(jīng)理等有效溝通,準確理解需求并反饋問題;具備良好的團隊協(xié)作精神,能夠與團隊成員緊密合作,共同解決問題;具備較強的邏輯思維和問題解決能力,能夠快速定位和復(fù)現(xiàn)問題。