跳到正文
热点事件持续更新

Jusuk Lee团队发布DynaFLIP多模态预训练框架

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

Jusuk Lee等人发布论文,提出动力学感知多模态预训练框架DynaFLIP,通过将运动理解前置至感知层,重构机器人感知范式。 该框架利用图像、语言、3D流三元组监督训练纯图像编码器,在共享超球面空间最小化三模态单纯形体积,并结合余弦正则化与对比目标优化表征。 实验表明,该表征在下游视觉-语言-动作(VLA)策略中表现优于基线;在多样仿真及真实场景中验证,分布外场景性能提升达22.5%。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月4日
  1. arXiv · ML
    DynaFLIP:基于三模态动力学引导表征重构机器人感知

    DynaFLIP 提出动力学感知多模态预训练框架,通过图像-语言-3D 流三元组监督训练纯图像编码器,将运动理解前置至感知层。 该方法在共享超球面空间最小化三模态单纯形体积,结合余弦正则化与对比目标,表征在下游 VLA 策略中表现优于基线。 在多样仿真与真实场景中验证,分布外(out-of-distribution)场景性能提升达 +22.5%。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。