崗位職責:
1、負責大數(shù)據應用產品的平臺搭建、架構優(yōu)化、技術迭代和開發(fā)維護,提供穩(wěn)定的大數(shù)據平臺服務;構建數(shù)據存儲、數(shù)據挖掘、數(shù)據計算及數(shù)據服務于一體的大型分布式數(shù)據平臺;
2、負責構建和維護算法平臺,對海量數(shù)據進行離線計算、實時計算等分析挖掘;協(xié)同數(shù)據分析師,根據業(yè)務場景設計并實現(xiàn)數(shù)據模型和服務模型,并跟進和評估模型效果,確保算法和模型的有效落地;
3、持續(xù)學習了解大數(shù)據領域的新技術,并結合實際需求落地;
任職要求
1、 學歷專業(yè):4-9年相關工作經驗;
2、 有扎實的編程功底,熟悉常用的數(shù)據結構和算法;
3、熟悉數(shù)據倉庫建模理論,有大數(shù)據整體系統(tǒng)架構設計、數(shù)據ETL、建?;驍?shù)據分析相關經驗;
4、熟悉常用的開源大數(shù)據技術,如Hadoop、HBase、Flink、Kafka、Doris等,了解各組件的實現(xiàn)原理;
5、 有較強的 HSQL/SQL性能調優(yōu)經驗,熟練使用相關開發(fā)語言(Python/Java/Scala/Shell等),熟練掌握Spark、flink任意一種計算框架,能閱讀源碼跟蹤問題;
6、 具備良好溝通能力和解決問題能力,善于從復雜的數(shù)據問題中找到關鍵路徑,對待工作認真、負責,有較強的自驅力。