註冊並分享邀請連結,可獲得影片播放與邀請獎勵。

Powerpei
@PWenzhen76938
▫️ 独立开发者 ▫️ DeFi基础设施 & AI交易工具深度分析 ▫️自研Web3资产监控软件 ▫️美股港股实战洞见 ▫️ NFT & 艺术品收藏者 ▫️TG: ▫️
加入 May 2023
7.8K 正在關注    52.5K 粉絲
上次写Axis的时候留了个问题 采集端量上去了,训练端怎么办 这周看到它们跟几所高校出了篇TUCO,算是给了一个回答 机械臂操作成功率,16.7%到85.8% 同样一批仿真数据全量灌进去只有25.8% TUCO 挑了一半出来,翻了三倍多 堆量堆输了 ━━━━━ ◆ ━━━━━ 它干的事说白了就是给仿真数据做体检 每条轨迹用影响力函数打分,不看它在仿真里跑得好不好,只看它对真机任务帮了多少忙 拆成两个维度 > 效用:这条轨迹对目标有没有正向帮助 > 覆盖:它跟已选集合是互补的还是重复的 两个条件一起卡 选出来的子集既有用又不冗余 // 测试平台是Franka机械臂 三个接触密集型任务:Peg(插销)、StackCube(叠方块)、CupCake 每个任务只给 10 条真实演示做种子 ➤ TUCO 选 600 条 → 平均成功率 85.8% ➤ 全量 1200 条 → 大概 25.8% ➤ 随机子集 → 也是 25.8% 附近 全量灌进去反而比精选的差 里面大量冗余甚至有害的轨迹在拖后腿 我之前一直以为仿真数据是多多益善的,这组数字把这个直觉打掉了 ━━━━━ ✦ ━━━━━ 这篇让我想通了一件事 sim-to-real 里一直悬着的问题 仿真数据到底是不是越多越好 现在有答案了。 数据组成比规模重要 之前做机器人策略训练,大家基本就两条路 堆真实数据,贵得要死 堆仿真数据,便宜但迁移差 TUCO 走了第三条 用极少的真实反馈当信号,让它去指挥仿真数据的筛选 10条真实演示在这里是指南针 这个思路把数据稀缺从硬限制变成了优化问题。 ━━━━━ • ━━━━━ 拉回 Axis来看 我之前那篇写过,Axis 默认本体是 Franka Research 3 TUCO 实验也在 Franka 上跑 方法和采集管线在同一条身体上闭环了,这一步是实的 但我上次提的问题还在 跨身体迁移 同一种运动学上精选仿真可以大幅拉成功率,这证了 换到 ARX5 双臂或者 Feagine 柔性臂上呢? 影响力函数还能不能正确打分,种子演示够不够用,没看到公开数据 光照变化等分布外条件下的稳健性 也还需要更多验证 —— 方法扎实,数字够硬 85.8% 对 25.8%,选数据和堆数据之间的差距已经不是稍微好一点 如果跨本体也能复现这个倍数,Axis 的飞轮就从采集端上量走到了训练端挑质量 等跨身体的数字 以上内容纯属个人信息拆解 不作任何投资建议 DYOR @axisrobotics #PhysicalAI# #AxisRobotics# #SimToReal#
顯示更多
看完 @axisrobotics 最近的时间线 结论收成一句:它现在最该被审的不是社区,是身体 六百万条轨迹、Base 上的区域节点、今晚韩国 AMA 都在证明同一件事 手可以规模化 但真正没被证明的是另一件事 这些手按下的键,能不能绑死在一种运动学上 换到下一种身体时还不散 // 先说现在的身体 默认本体是 Franka Research 3 加平行夹爪 人在浏览器里只驱动任务空间,逆解留给 MuJoCo WASM 双臂按 C 换臂,键位不变 跨末端靠插值映射 1 个自由度的夹爪和十几关节的灵巧手,收成同一个标量 设计聪明。但边界也在这 键盘能规模化的是末端去哪,不是手怎么受力 身体其实换过两次了 9 月9号加了ARX5 双臂,轨迹里开始出现交接和容器约束 9 月 17 号跟Feagine合作更进一步 Axis Suite 按柔性臂改了任务和轨迹,给 Fi0 供数据 柔性体跟六轴七轴不一样,不是离散切换 结构参数和动态状态都要进条件 但公开帖没给柔性臂的成功率 管线被客户拿去用了 不是迁移已经被测过 // 闭环也还停在同一条身体上 后训练里策略先滚,人只在失败点接手,而且只给 8步 第二轮人类门控 DAgger 从 68/160 到平均 78.3/160,方向对 但同一条更新把缺口写死了 Python 里强的策略,切到浏览器WASM 会掉 单卡20 分钟训出 97% 的专家。仿真里技能可以很便宜 博客里真机从 22% 到52% 便宜的专家还不是本体策略 // 所以我不会把 Axis读成又一个链上数据叙事 它真正下的注是:先用一种身体把采集、修正、运行时对齐跑通 再按客户的运动学把管线重开 十月我想看到两件事 WASM 掉点修上,柔性臂轨迹在真机上重放一次 哪怕成功率不好看也行,有数就比没数强 能交出来,飞轮就不只是在原地上量了。 以上内容纯属信息拆解 不作任何投资建议 DYOR
顯示更多
0
129
94
0
轉發到社區