小鹏甩出TuringViT视觉编码器:只用十分之一数据,却把SOTA基线甩在身后

视觉大模型长期被一个隐形门槛卡着:想拿到顶尖效果,就得先囤够天量数据和算力,这让先进视觉能力成了少数头部团队的 […]

视觉大模型长期被一个隐形门槛卡着:想拿到顶尖效果,就得先囤够天量数据和算力,这让先进视觉能力成了少数头部团队的专属玩具。7月21日,小鹏集团发布TuringViT高效视觉编码器,宣称从架构、数据范式到训练流程系统性重构了视觉编码器,为行业提供了一条可复现、低成本的SOTA级视觉Transformer训练路径,把先进视觉大模型从头部专属推向行业普惠。

TuringViT的定位很清晰:面向VLM与VLA时代,全面支撑智能驾驶、智能座舱和IRON人形机器人三大业务场景。它从架构、数据、训练三个维度同步突破,搭起一套线性注意力主导、高质量数据治理、原生动态分辨率三位一体的技术体系,在效果、效率与落地性上做三重提升。

在架构上,TuringViT推出两个规格版本。TuringViT-18L包含3组Turing Block,合计15层TLA加3层MHA,主打动态分辨率下的高效部署;TuringViT-24L包含4组Turing Block,合计20层TLA加4层MHA,在保持线性计算主导的前提下进一步拉升表征能力。实测数据显示,随着输入分辨率升高,TuringViT的延迟增长曲线远比标准softmax ViT平缓,高分辨率下的效率优势愈发突出。在1536乘1536分辨率下,TuringViT-18L的推理吞吐量达到Seed1.5-ViT的3.04倍,相比SigLIP2-ViT-L提升2.16倍,这为高分辨率感知、多摄像头输入和长时序视频处理的端侧部署扫清了核心障碍。

与行业堆数据规模的粗放路线不同,TuringViT真正锋利的地方是数据治理。它打造了VISTA-Curation多模态数据治理流水线,不再追求用更多数据,而是通过提升单样本的监督价值实现数据效率的量级跃升。针对图文数据,流水线分三步精细筛选:先过滤掉低分辨率、模糊、低纹理的劣质图片;再用多模型、多提示词生成多样化候选字幕并交叉验证视觉一致性;最后在统一对比池里,按相对图文对齐度、文本信息量与歧义度综合打分,筛出视觉贴合度高、语义密度高的优质标注,淘汰模糊、泛化和弱对齐样本。针对视频数据,流水线先把长视频切分成连续短片段并均匀采样代表帧,再用语义一致性与运动一致性双重过滤保留有效片段,最后融合局部帧级细节字幕与全局时序语义字幕,生成具备变换感知能力的视频标注,让模型从连续画面里学到更鲁棒的视觉表征。

数据效率的提升直接反映在了成绩上。TuringViT仅用了0.85B图文对,大约是SigLIP2-L训练数据规模的十分之一,却在ImageNet-1K等六项零样本分类基准上取得83.6%的平均准确率,超越那些用10B数据训练的主流开源基线;在COCO与Flickr30K图文检索任务上同样优势明显,真正实现了用十分之一数据换来更优效果的突破。

训练流程上,TuringViT采用四阶段渐进式原生动态分辨率训练范式,从预训练第一天起就适配下游VLM与VLA的输入特性,彻底告别了固定分辨率预训练再加事后适配的传统模式。

这套编码器在小鹏的技术体系里已经有了明确落点。在智能驾驶领域,它是第二代VLA模型的核心视觉编码器,负责处理多路环视摄像头的高分辨率、多帧动态道路场景输入,为预测式世界模型提供视觉token;面向智能座舱与驾泊一体化,TuringViT的VLM原生特性让视觉特征与语言模型实现更高效对齐,可支撑不同画幅和比例的视觉输入,为更丰富的座舱交互功能打底;在小鹏IRON人形机器人体系里,它则扮演着视觉视网膜的核心角色,提供物体细粒度识别、空间关系理解、可操作区域检测和动态环境追踪等基础感知能力。

💬 评论
🔗 本文链接

以专业为基,引领科技向善向新

Rooted in professionalism, we lead technology toward social good and innovation.

数智化转型网 · 了解更多产业资讯与选型数据 →

📰 你可能也喜欢

数智化转型网每日AI资讯 AI情报站

腾讯WorkBuddy企业版办公套件化升级:多端账号、资产打通,企业生产力再升级

9月23日,腾讯 WorkBuddy 企业版发布办公套件化升级最新进展,腾讯文档、腾讯乐享、腾讯网盘、安全与效能运营平台、腾讯AI设计智能体Ardot 首批接入…
📅 10-18 · 👁 2026年10月18日
数智化转型网每日AI资讯 AI情报站

国内开发者如何稳定使用 Claude Code、Codex 和 Gemini CLI:从配置接入到团队协作

随着 AI 编程工具快速发展,Claude Code、Codex、Gemini CLI 等工具已经逐渐从简单的代码补全,发展到可以理解项目结构、修改多个文件、执…
📅 10-18 · 👁 2026年10月18日
数智化转型网每日AI资讯 AI情报站

​科大讯飞正式发布 Spark-ASR-2.0,全面赋能硬件与开放生态

语音识别大模型迎来重要技术升级。9月23日,科大讯飞官方正式发布了全新一代语音识别大模型 Spark-ASR-2.0,标志着其在语音交互与智能硬件落地方面迈出了…
📅 10-18 · 👁 2026年10月18日
数智化转型网每日AI资讯 AI情报站

杭州一小伙3天搓出100个作品冲击百万大奖,支付宝:别急

在刚刚结束的外滩大会上,支付宝宣布设立“智能体涌现奖”,每年奖金池1000万元、年度大奖100万元,不会写代码也能参加。
📅 10-18 · 👁 2026年10月18日
数智化转型网每日AI资讯 AI情报站

腾讯 QClaw 微信远程办公 AI 助手宣布停运:12 月 24 日关停,即日起停新用户注册

腾讯 QClaw 微信远程办公 AI 助手发布公告称,因业务发展调整,QClaw 将于 2026 年 12 月 24 日 00:00 正式停止运营。即日起,该产…
📅 10-18 · 👁 2026年10月18日
数智化转型网每日AI资讯 AI情报站

Hy Image3.5preview 登陆 WorkRally,影视创作者免费试用两周

9月22日,腾讯混元正式发布 Hy Image3.5preview。腾讯视频专业影视智能平台 WorkRally 首发接入该模型,即日起两周内向平台创作者免费开…
📅 10-18 · 👁 2026年10月18日