Runway发布首个界面世界模型Solaris,实时逐帧生成动态交互界面

近期,知名AI企业Runway正式发布了全新“界面世界模型”(Interface World Models)系列的首个重磅模型——Solaris。这一创新系统的诞生,意味着软件和网页不再依赖于预先写好的代码与固定框架,而是能够在你使用的过程中直接实时、逐帧地渲染出整个图形交互界面。

近期,知名AI企业Runway正式发布了全新“界面世界模型”(Interface World Models)系列的首个重磅模型——Solaris。这一创新系统的诞生,意味着软件和网页不再依赖于预先写好的代码与固定框架,而是能够在你使用的过程中直接实时、逐帧地渲染出整个图形交互界面。

在传统的软件工程中,数字界面通常建立在两套割裂的系统之上:“知晓事物”的 AI 助手(如大模型和搜索引擎,擅长提供文本与图片等静态内容)和“实时响应”的传统程序(如游戏引擎和前端代码,擅长渲染动态效果,却对你的任务一无所知)。长久以来,每一个操作系统与应用之间的交互,都必须事先通过代码等中间表示进行明确定义,这无形中牺牲了视觉表现的丰富性,并将可能的操作空间严重“有损压缩”。

而 Solaris 的核心突破,在于将渲染和交互合二为一。它不再需要中间代码层的转译,而是作为一个单一的世界模型直接生成每一帧画面,并对用户的每一次输入做出即时、连贯的动态响应。用户在浏览虚拟服装店时,甚至可以直接以自己的照片为参考,像在现实中一样自然地拖拽衣架上的衣服试穿;或者通过一句简单的语音指令,让场景中的桌椅位置和物体颜色随光影实时演变。这种开放式、沉浸式的体验,让软件更像是一个鲜活的场景,而非冰冷脚本的堆叠。

这一革命性技术的背后,得益于底层架构的硬核创新。Solaris 建立在 Runway 的 Gen-4.5视频生成模型之上,并在速度、连贯性与成本控制三个维度实现了突破。首先,它通过自回归生成机制和多步去噪蒸馏,将原本需要数秒甚至数分钟的视频生成过程压缩至可以跟上人类操作节奏的实时运行速度;其次,通过大语言模型与世界模型的协同,大模型负责解读用户的意图并指导场景演变,而世界模型则负责视觉的实时渲染;最后,通过对快速模型的持续训练,模型在保持长会话和多步交互连贯性的同时,大幅降低了推理成本。

在客观的学术与用户评测中,Solaris 展现出了独特的优势。在对比多模态大语言模型仅凭截图重建界面的基准测试中,研究发现传统转译方式会随着视觉复杂度的提升而不可避免地丢失细节,而 Solaris 则从第一帧起便完美保留了界面的视觉与语义状态。在包含7500多次成对比较的用户研究中,参与者在遵循指令的准确度以及行为的自然度两项指标上,对 Solaris 的偏好度分别达到了61%和71%,远超传统编码界面孤立更新UI的表现。

当然,作为一项处于前沿的创新技术,Solaris 目前也面临着一些亟待解决的挑战。例如,高精度的实时文本生成仍是视频生成领域的一大难题;在长周期的开放式交互中维持视觉与语义一致性也需要进一步优化;同时,它还需要解决与现有屏幕阅读器和无障碍API等软件栈的集成问题。

尽管如此,界面世界模型的出现依然勾勒出了下一代计算平台的演进雏形。它有望彻底消除传统“应用”的边界,让软件根据用户的即时意图进行千人千面的动态重塑,从而彻底改变我们与数字世界的连接方式。目前,Runway 已面向核心合作伙伴开放该模型的抢先体验申请。

官网:https://runway.com/news/research/introducing-solaris

💬 评论
🔗 本文链接

以专业为基,引领科技向善向新

Rooted in professionalism, we lead technology toward social good and innovation.

数智化转型网 · 了解更多产业资讯与选型数据 →

📰 你可能也喜欢

数智化转型网每日AI资讯 AI情报站

1400万企业的 AI 同事上线:WorkBuddy 进通讯录,群聊勾选即成任务、产物直接发回企微

10月14日,腾讯WorkBuddy宣布与企业微信完成深度融合,WorkBuddy客户端现可在企业授权范围内调用消息、文档、会议、微盘等十大能力,并以对话机器人…
📅 10-28 · 👁 2026年10月28日
数智化转型网每日AI资讯 AI情报站

“软硬模”三位一体!STEPX 首款大模型原生智能体手机 Neo 登场,售价 3999 元起

大模型原生 AI 终端品牌 STEPX(阶跃终端)在上海召开主题发布会,正式发布了旗下首款大模型原生智能体手机 STEPX Neo。该机型通过“硬件+操作系统+…
📅 10-28 · 👁 2026年10月28日
数智化转型网每日AI资讯 AI情报站

Meta 发布最强开源模型 Muse Spark Open,并牵手苹果力推 Mac 本地运行

当地时间周四,Meta 正式发布了其迄今为止能力最强的开放权重大模型——Muse Spark Open,并宣布与苹果展开合作,推动该模型在 Mac 电脑上实现本…
📅 10-28 · 👁 2026年10月28日
数智化转型网每日AI资讯 AI情报站

Anthropic IPO 估值遭砍:增速放缓,2 万亿美元预期回落至 1.5 万亿

路透社援引四名知情人士称,随着 AI 融资成本攀升引发市场不安,Anthropic 披露最新财务数据后,部分现有股东与拟参与 IPO 的投资人开始考虑下调对其的…
📅 10-28 · 👁 2026年10月28日
数智化转型网每日AI资讯 AI情报站

Figma 推出 Markdown 编辑器 Specs,扩大代码层公开测试

Figma 在印度举办的首届 Config 大会上推出基于 Markdown 的全新编辑器 Figma Specs,并向更多用户开放代码层(Code Layer…
📅 10-28 · 👁 2026年10月28日
数智化转型网每日AI资讯 AI情报站

斯坦福等联合提出全新文本生成范式 NCM,生成速度狂飙 31 倍

人工智能领域的文本生成技术迎来颠覆性创新。斯坦福大学与 Together AI 的研究人员近日联手推出了一种截然不同于传统自回归和扩散模型的全新文本生成范式——…
📅 10-28 · 👁 2026年10月28日