Gorden Sun推文
Generalist 发布机器人模型 GEN-1.5，看一眼演示即可学会新动作
Generalist 发布机器人模型 GEN-1.5，通过观看 3-12 秒的动作演示即可学会新任务，平均成功率约 59%，经 5 分钟快速适应后可达 83%。该模型支持动作串联、从人手或电脑动画学习，并能灵活使用替代工具，有望大幅降低机器人编程门槛。
译文
Generalist 发布了他们最新的机器人模型 GEN-1.5。简单来说，他们让机器人学会了一项新本领：你只要在它眼前把一个动作示范一遍，它看个几秒钟，就能当场照着做出来。堪称机器人版 Record & Replay。 以往要让机器人做一件新事情，工程师往往得花好几个月写代码、调试程序，或者喂给它海量的数据反复训练。这个新模型更像一个反应很快的学徒，你当着它的面做一次，它看明白了就直接上手，中途不需要停下来重新写代码或重新训练。 它还展现出了一些很有意思的实用能力： · 看一眼就能跟着做：给它看一段 3 到 12 秒的动作演示，比如拧开玻璃瓶盖、拉开笔袋拉链，它马上就能自己操作，平均成功率大概在 59% 左右。 · 自己把动作串起来：如果你分别教它“怎么拉开笔袋”和“怎么把钱拿出来”，它自己就能把这两段零碎的记忆拼在一起，顺畅地完成一整套连贯动作。 · 看人手或者电脑动画也能学会：你在电脑模拟画面里演示一次，或者直接用自己的双手在镜头前做一遍，它都能把动作转化成自己的机械臂动作。 · 手边有什么就用什么：原本教它用毛刷把积木扫进碗里，如果你拿走毛刷、塞给它一根香蕉，它会把香蕉当成刷子来扫；如果给它一个簸箕，它甚至会自己琢磨出用簸箕把积木铲起来倒进碗里。 · 稍微练习几分钟就很稳：只看一次示范它就能做个大概，要是再给它大约 5 分钟的演示数据让它快速适应几步，成功率就能直接提升到 83%。 这意味着以后普通人使用机器人可能会变得非常省事，想让它干什么活，只要当面演示给它看就行了。 官方介绍：https://generalistai.com/blog/gen-1.5
Generalist 发布了他们最新的机器人模型 GEN-1.5。简单来说，他们让机器人学会了一项新本领：你只要在它眼前把一个动作示范一遍，它看个几秒钟，就能当场照着做出来。堪称机器人版 Record & Replay。 以往要让机器人做一件新事情，工程师往往得花好几个月写代码、调试程序，或者喂给它海量的数据反复训练。这个新模型更像一个反应很快的学徒，你当着它的面做一次，它看明白了就直接上手，中途不需要停下来重新写代码或重新训练。 它还展现出了一些很有意思的实用能力： · 看一眼就能跟着做：给它看一段 3 到 12 秒的动作演示，比如拧开玻璃瓶盖、拉开笔袋拉链，它马上就能自己操作，平均成功率大概在 59% 左右。 · 自己把动作串起来：如果你分别教它“怎么拉开笔袋”和“怎么把钱拿出来”，它自己就能把这两段零碎的记忆拼在一起，顺畅地完成一整套连贯动作。 · 看人手或者电脑动画也能学会：你在电脑模拟画面里演示一次，或者直接用自己的双手在镜头前做一遍，它都能把动作转化成自己的机械臂动作。 · 手边有什么就用什么：原本教它用毛刷把积木扫进碗里，如果你拿走毛刷、塞给它一根香蕉，它会把香蕉当成刷子来扫；如果给它一个簸箕，它甚至会自己琢磨出用簸箕把积木铲起来倒进碗里。 · 稍微练习几分钟就很稳：只看一次示范它就能做个大概，要是再给它大约 5 分钟的演示数据让它快速适应几步，成功率就能直接提升到 83%。 这意味着以后普通人使用机器人可能会变得非常省事，想让它干什么活，只要当面演示给它看就行了。 官方介绍：https://generalistai.com/blog/gen-1.5