抓取先分物理可行与任务合适:LAGR在真实机械臂上把交接任务成功率从58%提到92%
面向任务的抓取需要同时满足两点:抓得稳,且抓法符合任务,例如锤子敲击时握柄、递给人时握头。LAGR把这两件事拆开:先由与任务无关的生成器给出物理可行的候选抓取并打分,再由语言条件重排器在所有候选之间联合比较,选出适合当前指令的那一个。在自建的268万条带评分抓取标注、100911个图像—任务对上,LAGR的任务条件成功率85.9%,比最强基线GATER的76.6%高9.3个百分点;在Franka Research 3机械臂的100次真实抓取中成功93次,GATER为72次。