工作內(nèi)容:
1.熟悉hadoop開發(fā),性能優(yōu)化,容錯處理,調(diào)度優(yōu)化。
2.關(guān)聯(lián)系統(tǒng)對接,文件處理。
3.培養(yǎng)新人,任務(wù)分配,結(jié)果跟蹤。
4.總體設(shè)計,代碼走查。
能力要求:
1.本科及以上學(xué)歷,計算機或金融相關(guān)專業(yè),至少2年Hadoop平臺使用經(jīng)驗,有過hadoop集群搭建實際經(jīng)驗。
2.熟悉hadoop體系架構(gòu),熟悉 hbase、hive、zookeeper等工作原理。
3.精通Hive,有優(yōu)化經(jīng)驗,理解 Hbase 體系架構(gòu),并有相當(dāng)開發(fā)經(jīng)驗。
4.熟悉某種關(guān)系型數(shù)據(jù)庫(oracle、Mysql、Sqlserver、PostgreSQL),熟悉PostgreSQL優(yōu)先。
5.熟悉 linux/UNIX shell 、熟悉(Perl/python/shell)任意一種腳本語言。