崗位職責:
系統(tǒng)開發(fā)
根據(jù)項目總體規(guī)劃,對公司大數(shù)據(jù)平臺進行總體設計,適應公司整體戰(zhàn)略的發(fā)展需求,并輸出相應的設計方案
功能開發(fā)
根據(jù)設計方案的要求進行大數(shù)據(jù)平臺的架構建設和功能開發(fā),包括分布式存儲系統(tǒng)、分布式計算系統(tǒng)、在線離線數(shù)據(jù)處理、數(shù)據(jù)ETL、數(shù)據(jù)挖掘、數(shù)據(jù)可視化等,并輸出相應的代碼和文檔
第三方系統(tǒng)對接
根據(jù)項目要求對公司內(nèi)部系統(tǒng)或外部第三方系統(tǒng)進行對接,對采集到的數(shù)據(jù)進行處理、存儲等工作
性能優(yōu)化
采用數(shù)據(jù)建模的方式對現(xiàn)有的算法進行優(yōu)化,提升大數(shù)據(jù)平臺的性能
技術研究
對業(yè)界前沿的數(shù)據(jù)計算架構進行規(guī)劃和研究,能夠針對業(yè)務場景給出可靠的技術選型
任職要求:
1、本科及以上學歷,計算機軟件/數(shù)學等相關專業(yè)。
2、3年以上大數(shù)據(jù)平臺開發(fā)經(jīng)驗;
3、有汽車或充電服務相關行業(yè)經(jīng)驗者優(yōu)先。
4、具備大數(shù)據(jù)環(huán)境構建、大數(shù)據(jù)開發(fā)經(jīng)驗;熟悉阿里云平臺大數(shù)據(jù)相關模塊的使用,對大數(shù)據(jù)安全相關技術了解;
5、具備數(shù)據(jù)分析、數(shù)據(jù)挖掘、數(shù)據(jù)可視化、在線數(shù)據(jù)相關產(chǎn)品的設計經(jīng)驗;
6、熟悉Jave /Python中的一種或幾種語言;
7、熟悉Oracle/Mysql等關系型數(shù)據(jù)庫;
8、熟悉Hadoop、Storm、HBase、Hive、Spark等框架者;