崗位職責(zé):
1.參與多模態(tài)模型、VLA等領(lǐng)域的創(chuàng)新研究,推動(dòng)公司機(jī)器人在具身領(lǐng)域的落地應(yīng)用;
2.構(gòu)建UMI或主從臂等數(shù)采設(shè)備,初步搭建仿真環(huán)境下的合成數(shù)據(jù)收集環(huán)境,規(guī)劃與建設(shè)數(shù)據(jù)采集以及數(shù)據(jù)中臺(tái);
3.在端側(cè)設(shè)備(主要是jetson)部署LLM、VLM等端側(cè)模型,通過(guò)container或tensorrt加速模型在端側(cè)設(shè)備的表現(xiàn),并對(duì)下游任務(wù)進(jìn)行一些lora微調(diào);
4.跟蹤與復(fù)現(xiàn)前沿具身工作,如act、openvla、pi0、GR00T N1等;
任職要求:
1.學(xué)術(shù)背景:碩士以上,計(jì)算機(jī)、人工智能、機(jī)器人、自動(dòng)化等相關(guān)專(zhuān)業(yè);
2.熟悉機(jī)器人基本理論,例如正逆運(yùn)動(dòng)學(xué)、基礎(chǔ)控制理論等;
3.熟悉transformer等經(jīng)典網(wǎng)絡(luò)框架,熟悉pytorch或tensorflow等機(jī)器學(xué)習(xí)框架;
4.對(duì)模仿學(xué)習(xí)(如act等)、VLA(如openvla)等有一定的理解和實(shí)踐經(jīng)驗(yàn),了解RLDS等開(kāi)源機(jī)器人數(shù)據(jù)集;
5.具備英文讀寫(xiě)能力,能夠閱讀前沿論文,并具備一定的論文或?qū)@珜?xiě)能力,善于團(tuán)隊(duì)溝通交流;
6.對(duì)具身智能在工業(yè)領(lǐng)域的應(yīng)用有一定的興趣和探索欲望。