崗位職責(zé):
1.云側(cè)模型優(yōu)化
大規(guī)模模型訓(xùn)練與微調(diào):基于租用算力或本地算力資源,高效完成YOLO、ViT等CV模型的分布式訓(xùn)練與LoRA/P-Tuning微調(diào)。
設(shè)計(jì)視頻流專用推理服務(wù):將訓(xùn)練好的模型封裝為高吞吐、低延時(shí)的API服務(wù)(Flask/FastAPI + Docker)
2.云邊端協(xié)同部署
端側(cè)輕量化部署:針對(duì)攝像頭、算力盒子等邊緣設(shè)備,通過(guò)TensorRT/ONNX Runtime實(shí)現(xiàn)模型壓縮(量化/剪枝),確保資源受限環(huán)境穩(wěn)定運(yùn)行
3.AI技術(shù)攻堅(jiān)
研究AI大模型(LLM)在視頻流、語(yǔ)音分析中的應(yīng)用,例如用大模型理解視頻語(yǔ)義、大模型理解語(yǔ)音語(yǔ)義
重點(diǎn)儲(chǔ)備方向:后續(xù)基于LangChain等高代碼方式部署視頻流智能Agent系統(tǒng)(如自動(dòng)提取事件描述、跨模態(tài)檢索)
任職要求:
1.Python工程能力
精通Python,能用OpenCV/FFmpeg處理實(shí)時(shí)視頻流(如RTSP/WebRTC流解析、幀率優(yōu)化)
熟悉PyTorch/TensorFlow模型開(kāi)發(fā),有YOLO/DeepSORT等視頻分析模型實(shí)戰(zhàn)經(jīng)驗(yàn)(需提供GitHub代碼或項(xiàng)目證明)
2.Ubuntu系統(tǒng)深度應(yīng)用:熟練操作Ubuntu(20.04+),能獨(dú)立完成NVIDIA驅(qū)動(dòng)/CUDA環(huán)境配置
3.部署經(jīng)驗(yàn):有模型訓(xùn)練與應(yīng)用落地的實(shí)際經(jīng)驗(yàn)或在邊緣設(shè)備(Jetson/手機(jī)/IPC)成功部署過(guò)模型且熟悉模型格式轉(zhuǎn)換工具鏈
4.AI大模型基礎(chǔ)認(rèn)知:了解Transformer架構(gòu)及大模型微調(diào)技術(shù),對(duì)RAG、LangChain等框架有概念性理解