定位:數(shù)據(jù)處理 + DevOps + 數(shù)據(jù)庫
工作地點: 深圳 / 杭州(可遠程友好)
---
核心職責(zé)
1. 數(shù)據(jù)處理
- 架構(gòu) Kafka / RocketMQ-> S3 / Parquet 埋點管道:秒級增量聚合并寫 Redis / Feature Store / ClickHouse / StarRocks;
- 設(shè)計與維護統(tǒng)一的監(jiān)控埋點規(guī)范及數(shù)據(jù)的處理;保證數(shù)據(jù)的可用性、完整性;將數(shù)據(jù)聚合、匿名化導(dǎo)出;
- 性能優(yōu)化:合理索引、分區(qū)、緩存(Redis);高效 ETL(Airflow / dbt / DuckDB)。
2. 云服務(wù) & DevOps
- 使用 GitHub Actions、Docker 實現(xiàn)CI/CD自動化部署;搭建和管理云資源,保障環(huán)境“一鍵復(fù)現(xiàn)”;
- 部署統(tǒng)一監(jiān)控與告警:可觀測平臺,監(jiān)控系統(tǒng),錯誤跟蹤,審計日志等確保系統(tǒng)的平穩(wěn)運作和故障及時響應(yīng)。
3. 數(shù)據(jù)庫與服務(wù)端開發(fā)
- 維護與迭代 PostgreSQL,MongoDB等數(shù)據(jù)庫索引、分區(qū)、分片與性能調(diào)優(yōu);
- 基于 Python 開發(fā)高質(zhì)量 API;接入與集成其它服務(wù)端端口,確保穩(wěn)定、高效的響應(yīng);
- 監(jiān)控,編寫并維護自動化單元測試(pytest)與 API 集成測試,保證代碼基礎(chǔ)質(zhì)量;
---
任職要求
- 教育 & 背景
- 計算機/軟件工程或相關(guān)專業(yè)本科及以上學(xué)歷;3–6 年數(shù)據(jù)平臺數(shù)據(jù)流處理經(jīng)驗。
- 項目經(jīng)驗
- 掌握Kafka,F(xiàn)link,S3 / Parquet,Redis / Feature Store / ClickHouse / StarRocks等流式數(shù)據(jù)的處理;
- 熟悉 DevOps / SRE、CI / CD、Docker、云監(jiān)控 / 告警構(gòu)架以及部署;
- 了解 PostgreSQL,MongoDB等數(shù)據(jù)庫高級特性,有數(shù)據(jù)庫調(diào)優(yōu)實戰(zhàn)經(jīng)歷優(yōu)先;
- 學(xué)習(xí)能力
- 自驅(qū)主動,結(jié)果導(dǎo)向;熱愛嘗試新工具、新技術(shù);樂于分享;
- 能主動吸收最新的數(shù)據(jù)處理和互聯(lián)網(wǎng)平臺技術(shù)實踐(如 Supabase Edge、向量搜索等)。
- 協(xié)作溝通及其它
- 能清晰闡述技術(shù)方案,積極推動跨職能溝通;能在有限資源下抗壓并提供務(wù)實、有效的方案。
- 扎實的互聯(lián)網(wǎng)行業(yè)技術(shù)的功底和理解;高質(zhì)量代碼以及復(fù)用;注重代碼與文檔質(zhì)量。
---
加分項
- 使用過 Flink SQL、ClickHouse/StarRocks、Feast、向量數(shù)據(jù)庫(Milvus / Qdrant / pgvector);
- 保障高可用、部署基礎(chǔ)監(jiān)控和告警 (Grafana Cloud, Sentry),確保出現(xiàn)故障及時響應(yīng);
- 能獨立做中等復(fù)雜度 UI;可支持輕量級前端開發(fā);用 AI 輔助開發(fā)生成腳手架、K8s Manifest、單測等;
- 了解Amplitude / Snowplow 埋點;熟悉 Supabase/Firebase 等 BaaS 平臺;
- 可用 AI 維護 Retool / Supabase Studio 搭建低代碼管理平臺,滿足運營基礎(chǔ)需求;
- 有大型流量服務(wù)的擴容、容災(zāi)經(jīng)驗;部署單節(jié)點 ClickHouse + Superset;逐步遷移 BI 報表。
---
- 成長路徑:數(shù)據(jù)架構(gòu)師 / 全棧工程師 / Tech Lead / 帶領(lǐng)隊伍橫向發(fā)展;公司支持參與相關(guān)技術(shù)大會、培訓(xùn)。