全部
全部

选一篇,慢慢读

从左侧挑一篇,正文会在这里排成书页。

文章与公开阅读资产

LiveFoley:面向沉浸式交互世界的动态实时视频转音频生成

Streaming video-to-audio (V2A) generation is essential for immersive interactive applications. However, real-time constraints leave existing streaming V2A methods far behind offline models: (1) visual frontends shrink their receptive fields to cut look-ahead latency, severely degrading audio-visual alignment; (2) causa

阅读原文 · Yusheng Dai, Vladimir Iashin, Kangdi Wang, Yuxuan Jiang, Ilpo Viertola, Weiqiang Wang, Qiuhong Ke, Min Zhao, Jianfei Cai

乔木风格重写

向阳乔木 · opencode-go/deepseek-v4.1-flash

实时视频配音这件事,一直卡在一个很尴尬的位置:离线模型效果不错,但跑不进交互场景;流式方案能实时,却要牺牲音画对齐和音质。LiveFoley 想同时抓住两头。 论文来自 Yusheng Dai、Vladimir Iashin 等人,2026 年 11 月挂在 arXiv。看标题就知道它的野心:动态、实时、沉浸式交互世界。这类场景对延迟极其敏感,人对音画不同步...

  • JK下一篇 / 上一篇
  • S收藏
  • A问 AI
  • I沉浸阅读
  • Esc退出