崗位職責:
1、負責大數(shù)據(jù)平臺設(shè)計、開發(fā)及優(yōu)化,包括但不限于Hadoop、Spark、Flink、Kafka、elasticsearch、flume、zookeeper等組件的搭建與調(diào)優(yōu);
2、負責數(shù)據(jù)采集、清洗、存儲(HDFS/HBase/Hive等)、計算(離線/實時)及全流程開發(fā);
3、設(shè)計高性能ETL流程,處理TB/PB級數(shù)據(jù),優(yōu)化數(shù)據(jù)計算效率與資源利用率;
4、參與公司核心業(yè)務(wù)系統(tǒng)的Java后端開發(fā),使用Spring Boot/Spring Cloud等框架構(gòu)建高并發(fā)、分布式服務(wù)。
崗位要求:
1、2年以上大數(shù)據(jù)實際開發(fā)經(jīng)驗,同時具備Java后端開發(fā)經(jīng)驗;
2、熟練使用Hadoop生態(tài)組件(HDFS/YARN/MapReduce),具備Spark/Flink實時計算開發(fā)經(jīng)驗;
3、熟悉至少一種關(guān)系型數(shù)據(jù)庫(MySQL/Oracle)及NoSQL(HBase/Redis),掌握SQL優(yōu)化技巧;
4、扎實的Java基礎(chǔ),深入理解JVM原理、多線程并發(fā)、內(nèi)存管理。
加分項:
具備云平臺(華為云/AWS/Azure/阿里云)大數(shù)據(jù)服務(wù)實戰(zhàn)經(jīng)驗者優(yōu)先
職位福利:五險一金、定期體檢、節(jié)日福利、餐補、帶薪年假、績效獎金、周末雙休