详情

首页手游攻略 Om AI第二弹!VLX-Seek登场:3B小模型 细粒度感知反超Gemini

Om AI第二弹!VLX-Seek登场:3B小模型 细粒度感知反超Gemini

佚名 2026-07-06 10:32:00

Om AI发布3B小模型VLX-Seek,在细粒度视觉感知任务上反超Gemini Pro,展现精准定位新突破。
核心内容:
1. VLX-Seek模型的核心能力:解决VLM“看懂却看不准”的难题
2. 技术突破:将物理实体转为region token,提升定位精度与推理效率
3. 性能表现:在多项基准测试中超越Gemini,适配端侧实时场景


继 VLX-Flow 之后,Om AI 把 VLX 系列推进到第二层能力:让模型在实时视觉场景中看准目标。


3B 参数的 VLM,能在细粒度感知上超过 Gemini 3.1 Pro 吗?

在 Om AI 联汇发布的VLX 端侧流式多模态模型系列中,VLX-Seek 补的就是这层能力。

它对应 VLX 体系中的精准定位层,处理的是 VLM 看得懂却看不准、传统小模型能框准却难以理解复杂语义目标的问题。

在图片问答里,模型说出“画面里有人”“桌上有杯子”,已经算完成理解。但一旦任务变成跟随、巡检、预警或导航,问题会马上变细:

如果画面里有多个人,究竟跟随哪一个?如果桌上有几个杯子,用户指的是哪一个?如果目标被遮挡,边界还准不准?

如果用户给出的不是一个简单类别名,而是一段复杂语义描述,模型又能不能理解这段描述,并把它准确落到画面中的具体目标上?

放到具体结果上,VLX-Seek-3B 在 MSCOCO val2017 上达到 45.3 mAP,超过了 Gemini 3.1 Pro 的 41.4;在更考验实例感知的 PixMo Count 上拿到 85.0,同样领先 Gemini 2.5 Pro 的 73.8

3B 小模型能在这些任务上领先,起点是定位任务的表达方式变了。

传统坐标生成把精确数值输出交给语言模型。VLX-Seek 先把画面中的物理实体转成可被语言模型读取、引用和推理的 region token,再让模型在候选区域之间比较、选择和指代。

相关资讯
点击查看更多
游戏推荐
推荐专题
热门阅读
推荐下载