崗位職責(zé):
1. 負(fù)責(zé)大數(shù)據(jù)平臺(tái)的設(shè)計(jì)與開發(fā),使用Hadoop/spark等大數(shù)據(jù)處理工具進(jìn)行數(shù)據(jù)處理和分析。
2. 構(gòu)建和維護(hù)高效的大數(shù)據(jù)生態(tài)系統(tǒng),優(yōu)化數(shù)據(jù)存儲(chǔ)和計(jì)算過程。
3. 開發(fā)數(shù)據(jù)模型和算法,實(shí)現(xiàn)復(fù)雜數(shù)據(jù)分析任務(wù),為業(yè)務(wù)決策提供數(shù)據(jù)支持。
崗位要求:
1. 熟悉Hadoop/spark等大數(shù)據(jù)處理框架,有實(shí)際項(xiàng)目開發(fā)經(jīng)驗(yàn)。
2. 具備良好的編程基礎(chǔ),熟練掌握J(rèn)ava/Scala/Python中的一種或多種編程語言。
3. 對(duì)大數(shù)據(jù)技術(shù)體系有深入理解,包括但不限于HDFS、MapReduce、YARN、Spark SQL等。
4. 有良好的數(shù)據(jù)結(jié)構(gòu)和算法基礎(chǔ),能夠進(jìn)行復(fù)雜問題求解。