崗位職責(zé):
1.參與多模態(tài)模型、VLA等領(lǐng)域的創(chuàng)新研究,推動公司機器人在具身領(lǐng)域的落地應(yīng)用;
2.構(gòu)建UMI或主從臂等數(shù)采設(shè)備,初步搭建仿真環(huán)境下的合成數(shù)據(jù)收集環(huán)境,規(guī)劃與建設(shè)數(shù)據(jù)采集以及數(shù)據(jù)中臺;
3.在端側(cè)設(shè)備(主要是jetson)部署LLM、VLM等端側(cè)模型,通過container或tensorrt加速模型在端側(cè)設(shè)備的表現(xiàn)并對下游任務(wù)進(jìn)行一些lora微調(diào);
4.跟蹤與復(fù)現(xiàn)前沿具身工作,如act、openvla、pi0、GR00T N1等。
任職要求:
1.熟悉機器人基本理論,例如正逆運動學(xué)、基礎(chǔ)控制理論等;
2.熟悉transformer等經(jīng)典網(wǎng)絡(luò)框架,熟悉pytorch或tensorflow等機器學(xué)習(xí)框架;
3.對模仿學(xué)習(xí)(如act等)、VLA(如openvla)等有一定的理解和實踐經(jīng)驗,了解RLDS等開源機器人數(shù)據(jù)集;
4.具備英文讀寫能力,能夠閱讀前沿論文,并具備一定的論文或?qū)@珜懩芰?,善于團(tuán)隊溝通交流;
5.對具身智能在工業(yè)領(lǐng)域的應(yīng)用有強烈的興趣和探索欲望。