🔔科技频道[奇诺分享-ccino.org]⚡️
3 小时前
雷锋网
自变量发布跨模态具身动作分词器 X-Tokenizer,多模态对齐能力提升 13.5%,长程任务性能提升 8.25%
Telegraph
|
原文
Telegraph
自变量发布跨模态具身动作分词器 X-Tokenizer,多模态对齐能力提升 13.5%,长程任务性能提升 8.25% - 雷锋网
自变量机器人发布跨模态具身动作分词器 X-Tokenizer,将 VLA 中的动作离散化从单一的“压缩-重建”问题,重新定义为“多模态推理与动作之间的语义接口学习”问题。 动作分词器决定了拆分出的动作 Token 是否具有语义,是否能加速预训练模型的收敛,从而最终影响了 VLA 模型输出连续动作的性能。这是自变量机器人的最新发现。 具身智能的 VLA 模型(视觉-语言-动作模型)是将预训练的 VLM 模型(视觉语言模型)与动作专家(Action Expert)连接起来,前者接收图像和语言指令,输出隐藏状…
Home
Blog
Discuss
Gsearch
Powered by
BroadcastChannel
&
Sepia