TwKit
正在载入
TwKit

AI 视频还在等生成完成?HeyGen 开源了一个新项目,想让视频像直播一样边生成边播放。 项目叫 Hyperframes。 传统 AI 视频生成通常要等整… · @0xKillCoin · TwKit

@0xKillCoin

AI 视频还在等生成完成?HeyGen 开源了一个新项目,想让视频像直播一样边生成边播放。 项目叫 Hyperframes。 传统 AI 视频生成通常要等整段视频处理完,用户才能开始播放。数字人对话尤其明显:你问完一个问题,可能还要盯着加载动画等十几秒。 Hyperframes 换了一种思路: 边生成、边推送、边播放。 几个值得关注的技术点: ⚡ 首帧低于 500ms:项目披露的内网测试数据中,首帧延迟不到半秒,大幅缩短用户等待时间。 🔌 不绑定特定模型:只要底层模型能输出带时间戳的视频帧,就有机会接入,不必锁定某一家模型服务。 🛡️ 自动流量控制:观众网络状况不好时,可以动态降低帧率,避免数据积压和内存压力不断增加。 🌐 浏览器直接播放:配套播放器支持主流浏览器,不用等完整视频文件下载完成,就能开始播放。 这意味着它更适合实时数字人客服、虚拟主播、实时视频翻译等场景。 如果你只是批量生成视频文件,传统工作流可能更简单;但如果你想做的是实时交互,等待整段视频生成完毕就成了体验瓶颈。 项目目前仍处于早期阶段,不过核心代码已经开源。 AI 视频的下一步,可能不只是生成得更逼真,而是让用户几乎感觉不到它正在生成。 开源仓库:https://github.com/heygen-com/hyperframes 详细解读:https://mp.weixin.qq.com/s/623FDNgH0M_DzwMKNUAnRg

曝光 26 · 评论 0 · 点赞 1 · 书签 0

查看原帖