Tripo AI开源实时生成式渲染器EdenLive:消费级GPU跑720p视频,为3D场景预览带来新可能
3D 生成公司 Tripo AI 刚刚放出了一个叫 EdenLive 的实时生成式渲染器。
这名字听着陌生,但它干的事挺有意思,把编码代理或者游戏引擎生成的粗糙画面,变成更精细的视频。
这玩意儿跑起来有多快呢?
研究团队在单块消费级图形处理器 RTX 5090 上做了测试,生成 720p 视频,每秒能超过 24 帧。
而且它能连续生成好几分钟,不是卡一帧就断的那种。


更实在的是,Tripo AI 已经把这套东西的模型权重、实时视频生成代码,都开源了。
还附带一个把文本提示变成可玩简易游戏的技能,以及完整的「提示词到游戏」流程前端。
EdenLive 不是突然冒出来的。
它是 Tripo AI 在 5 月发布的交互式环境世界模型 Project Eden 的一部分。
负责这个项目的首席科学家曹艳培博士解释过底层的设计思路,Project Eden 把世界状态的演变和视觉渲染分离成三个层次,持续演变的世界状态、状态到视觉的接口,还有生成式渲染器。
听起来有点绕,但核心就是,EdenLive 实现了第二层和第三层,第一层不限制。
按照曹博士的说法,这是构建交互式世界愿景的重要一步。
这种拆法也让人觉得,视觉变成一层随时能换的外皮,世界本身却一直在往前走。

落到使用上,EdenLive 吃三样输入,场景或参考视频算一份,目标首帧算一份,文本提示算一份。
给它齐全了,就能出片。
输出分辨率支持 480p 和 720p。
那这套东西到底能用在哪些地方?
跟编码代理搭配时,它可以实时渲染交互式游戏预览。
做场景和动画预览时,创作者可以在保持布局、动作和摄像机路径都不变的情况下,反复试不同的外观效果。
它还能做实时视频风格转换和重新渲染,想替换角色、内容或者整体风格都行。
具身 AI 这边也是一个方向。
Tripo AI 说 EdenLive 可以把真实人类操作视频转成机器人视角,相当于在人类示范和机器人学习之间搭一座桥。
Tripo AI 这家公司 2023 年成立,专注做 3D 原生基础模型和世界模型,产品有 Tripo Studio 和 Tripo API。


京公网安备11010802046387号