跳到正文
11月2日周一
  1. arXiv · ML37

    DUGO:用于第一人称程序视频在线时间动作定位的双尺度高斯记忆

    DUGO框架通过双尺度时间编码器和高斯记忆库,在在线时间动作定位中实现最先进性能,显著提升多时间尺度动作捕捉与长程推理能力。 模型结合深度局部表征与全局自注意力机制,利用输入条件化高斯原型增强时序记忆,并在编码器及锚点查询阶段应用门控交叉注意力。 实验在EGTEA和EPIC-Kitchens-100等数据集上验证效果,同时为非第一人称基准Muses带来显著改进。

  2. arXiv · AI27

    Sparkle 提出解耦引导实现指令驱动视频背景替换

    针对视频背景替换任务因缺乏高质量训练数据而发展受限的问题,Sparkle 设计了一种解耦引导的数据生成流水线。 该流水线通过严格质量过滤生成前景和背景引导,构建了包含约 140K 视频对的 Sparkle 数据集及最大规模评测基准 Sparkle-Bench。 基于该数据集训练的模型在 OpenVE-Bench 和 Sparkle-Bench 上表现优于现有基线,且代码与数据已全部开源。

  3. arXiv · AI31

    Geo-FSRL:面向少步流强化学习的随机策略几何优化方法

    该研究提出 Geo-FSRL 方法,通过最小化条件 KL 散度诱导的几何因子来选择最优随机策略。 在等向高斯转移族中推导出唯一闭式优化器,结合梯度尺度匹配推导闭环策略梯度权重。Geo-FSRL 在 4 步设置下于图像与视频生成任务中取得优于 Flow-GRPO 和 Flow-CPS 的最终奖励分数,代码已开源。

  4. arXiv · AI36

    LIT框架:通过共同进化机制提升视频导演代理的交互与执导能力

    LIT框架通过模拟用户和元工程师的共同进化,解决了视频导演代理在交互与执导间的相互强化难题。 该框架中元代理主动学习外部知识以优化执导策略,在测试集上将制作和交互分数分别提升19.1%和32.0%。 共同进化机制促进执导技能与交互模式的探索,验证了制作与交互改进之间的相关性。

11月1日周日
  1. 36氪55

    王智远分析AI漫剧百亿播放下IP分成困境与平台定价权

    文章指出在AI漫剧领域,流量平台掌握核心定价权,内容方收益受限。以红果平台为例,其单部IP《万妖图录传》累计播放超60亿,但作者拿到的分成不足100万元。对比阅文、掌阅等厂商的短剧业务数据,文章认为,虽然平台拥有流量优势,但维持用户规模和应对内容竞争的成本也在上升,AI漫剧的商业化路径高度依赖于流量出口与版权分配规则。

10月31日周六
  1. R/ArtificialInteligence21

    Row-Bot 5.3.1 发布

    Row-Bot 5.3.1 正式推出,核心新增关联对话功能,支持在等待进程、时间或对话时不消耗模型资源,并扩展了视频工作空间。 用户可在场景时间线上编辑视频,处理版本、旁白、音乐、字幕及多种宽高比,并运行具备独立技能、笔记和时区的定时对话工作流。 稳定版修复了工作日 cron 任务、消息来源显示、旁白检查及桌面端视频下载,同时解决了页面读取持有写锁和本地模型工具调用错误的问题。

10月30日周五
  1. 机器之心81

    启元 PrimeSim 世界模型发布,在 EWMBench 和 WorldSimProbe 榜单登顶

    启元具身研究中心发布 PrimeSim,这是一款基于预训练视频生成模型的世界模型仿真器,在 EWMBench 综合得分 6.09 位列第一,并在 WorldSimProbe 三项指标中夺冠。其技术路径包含中训练与后训练两阶段,支持跨本体迁移和超长时序推演,单卡 A100 推理速度达 10.12 FPS,相关权重与代码即将开源。

    推荐理由:原文展示了将视频生成模型改造为机器人仿真器的完整技术路径与量化指标,为具身智能训练提供了可复现的工程参考。

  2. 可灵AI49

    Kling 4.0 API 开放,赋能影视、广告及具身智能多行业应用

    可灵AI于10月28日面向全球企业客户与开发者开放Kling 4.0 API,支持将视频生成能力接入自身产品与工作流程。 API具备全能参考、多关键帧控制及30秒原生直出能力,覆盖影视分镜、广告素材、游戏动态展示及多机器人协作场景可视化等应用。 该能力帮助企业和AI创作平台降低制作时间成本,提升画面稳定性与角色一致性,推动视频生成在各行业实际业务流程中的落地。

  3. 量子位69

    英伟达联合 MIT 发布基于 MiniMax H3 的开源视频增强方案,支持最高 4K 重生成

    英伟达与麻省理工学院团队在 Hugging Face 发布视频增强项目 Open-H3-Regenerate-2K 的模型权重,该方案基于 MiniMax H3,支持将低分辨率视频重生成最高 3840×2160 的 4K 视频。

    推荐理由:英伟达联合 MIT 基于 MiniMax H3 发布的开源方案,提供了可自部署的 4K 视频重生成实现。

  4. arXiv · ML35

    GROME:视频世界模型中的因子化记忆

    新框架 GROME 通过静态-动态因子化、局部记忆检索和无训练记忆注入,显著增强视频世界模型的长期一致性。 该框架无需额外训练即可增强场景持久性,并支持外部观察作为即插即用记忆用于视频续写。

  5. arXiv · AI38

    SemantiScene-Edit: 基于指令的视频编辑方法

    SemantiScene-Edit 结合多模态编码器与视频扩散 Transformer,支持基于自然语言指令的视频编辑。 模型采用双路径源条件设计,通过可学习查询传递语义上下文,并拼接源视频潜变量以保留时空一致性。训练使用 120 万条指令视频编辑数据,推理仅需源视频和自然语言指令。

  6. arXiv · AI23

    GazeEval:利用眼动追踪评估 AI 生成视频的视觉真实性

    研究者提出 GazeEval 方法,利用眼动数据预测 AI 生成视频的感知视觉真实性,准确率达 71.3%。 该方法基于包含 90 名参与者和 438 段视频的 4,286 次有效眼动试验数据,验证了眼动模式与显式人类反馈的关联性。 研究数据已公开,支持后续关于眼动追踪在 AI 视频评估中应用的进一步研究。

  7. arXiv · AI30

    MEV:面向长镜头生成的多事件视频数据集

    MEV 是一个专为长镜头视频生成设计的多事件数据集,提供具有精确时间边界和细粒度过程注释的高质量真实视频。该数据集通过事件中心的离散化,支持时间定位条件,使模型能从原子事件单元构建长镜头视频,并提供了全面的标注流水线及全局与事件层级的结构化字幕。

  8. arXiv · NLP30

    Event-SAMA:基于神经形态事件流的语义落地视频物体分割

    研究团队发布 Event-SAMA 模型,将 SAMA-4B 适配至事件流,在 MeViS 数据集上取得 24.37 J&F 分数,确立首个事件原生 RVOS 基线。 该模型采用双通道极性 patch embedding 和零初始化事件适配器,无需重训练即可直接应用于真实事件相机记录,消融实验显示多样化训练源可带来 4.99 的性能增益。

  9. 机器之心47

    新国立与可灵 AI 提出 DiffusionART:视频后训练提速 10 倍以上

    新国立大学与可灵 AI 团队提出 DiffusionART 算法,在 HunyuanVideo-13B 上训练效率比 DiffusionNFT 快 12 倍。 该方法通过聚合奖励方向并引入自适应恢复力,无需 EMA 调参即可实现稳定训练,支持开源视频模型 RL 配方。 DiffusionART 登顶 Hugging Face Daily Papers 日榜,为扩散模型后训练提供高效稳定方案。

10月29日周四
  1. Hacker News AI45

    如何用 Outstanding Tiny Desk AI 工具基于照片生成热门微型现场音乐会视频

    使用 Outstanding Tiny Desk AI 在线工具可基于照片生成 15 秒微型现场音乐会视频,无需视频编辑技能或编写提示词。 支持 480p(50 积分)和 720p(100 积分)分辨率,生成无水印的垂直 9:16 视频,生成文件保留 7 天。 该工具能自动将照片中的亲友或宠物替换为演奏者,方便用户制作并分享个性化音乐视频。

  2. 哩布哩布AI21

    LibTV双十一:三大旗舰模型30天0积分畅用,Seedance 2.5 720P低至0.17元/s

    LibTV双十一开启,Wan 3、Kling 4.0、Minimax H3三大旗舰视频模型支持最长30天0积分无限使用。 Seedance 2.5 720P生成价格低至每秒0.17元,年会员享最高1300元立减及3个月会员加赠,首三个月累计加赠超17万积分。 至尊92K年包从40999元降至16999元,活动提供7天保价,老用户升级同享优惠。

  3. 量子位78

    Genspark Media Studio 发布:AI 视频 Agent 支持零基础制作短剧与知识讲解

    Genspark 正式发布视频 Agent 工作台 Media Studio,接入 20 多家厂商的 70 多个模型版本,支持一键生成 Rap 视频、知识讲解短片及短剧。实测显示该工具可通过“故事圣经”功能将简短主题扩展为完整剧本,并自动调用 Seedance 2.5 等模型生成视频,用户只需审批设定即可实现零基础短剧创作。

    推荐理由:实测展示了该工具如何调度多模型协作完成短剧与视频生成,为零基础用户提供了可落地的创作路径。

  4. RunningHUB52

    Hypit 视频复刻功能上线 RunningHub

    开源视频创作工具 Hypit 首发上线 RunningHub 的 Runow 工作台,支持免配置一键调用。用户上传参考视频和替换素材后,Hypit 会解析原片的镜头节奏、画面风格及文字声音,提供三种兼顾还原与改编的复刻方案。创作者可通过同步对比功能进行定向修改,直接应用于电商广告、影视二创或自媒体内容制作,无需本地安装或对接模型接口。

  5. APPSO73

    即梦推出短剧工作室并集成 Seedance 2.5

    即梦正式推出短剧工作室,覆盖剧本创作、角色场景资产、3D 导演台、智能预演、片段重拍及超分。体验中发现,其可将 DreamScript、Anycook、DreamShot 串联,并通过 3D 导演台和预演降低视频生成成本,双十一期间 Seedance 2.5 720P 带参考视频生成折算最低约 0.19 元/秒。

  6. Hacker News AI21

    Come Back and Back AI:基于照片生成舞蹈视频的工具

    Come Back and Back AI 是一款将照片转化为“Wyw My Sweetie”歌曲舞蹈视频的工具,支持 Duo、Solo 和 Group 模式,生成 10 秒 MP4 视频。 该功能需消耗 1 个视频积分,上传 JPG、PNG 或 WebP 格式照片(至少 512×512 像素),提供万圣节、街头、K-pop 练习室等四种风格。 目前该工具处于等待列表阶段,尚未正式开放生成服务。

  7. 机器之心45

    Fluid-Gen-Zero 免训练框架让视频大模型生成符合物理规律的视频

    研究团队提出 Fluid-Gen-Zero 框架,通过接入物理模拟器,使视频大模型在不重新训练的情况下生成更符合物理规律的视频。 该框架利用 Genesis 引擎计算运动轨迹,并在 Tora、VACE 和 WanMove 模型上验证。物体轨迹误差降低 26.7%–81.5%,流体光流端点误差降低 67.9%–84.0%,且保留了原始视觉质量。

  8. R/ArtificialInteligence26

    16 神经元网络如何分步学习分离双螺旋

    一个拥有 16 个隐藏神经元的网络通过 2,000 次训练步骤成功分离双螺旋数据,第 1,133 步时 300 个点全部被正确分类。 该过程展示了边界从平直弯曲到正确划分的过程,所有数据均来自实际训练运行。 视频由 SenseNova 6.8 Code2Video 生成,该开源模型以代码构建影片并包含解说时序。

10月28日周三
  1. Hacker News AI83

    Meta 发布 Muse Realtime Avatar:图像变实时互动角色

    Meta 发布 Muse Realtime Avatar,将任意参考图像转化为能实时说话的 AI 角色。该技术与 Muse Realtime Voice 共享语音 token 流,使表情、手势与语音同步,并支持无限实时视频生成。

    推荐理由:该发布把 Muse Realtime Voice 接入 Diffusion Transformer,实现 25 FPS 的 448x768 实时视频生成,并将推理优化降至 870 毫秒延迟。