关闭广告

超越纯视觉模型!不改VLM标准架构,实现像素级深度预测

新智元740人阅读


新智元报道

编辑:LRST

【新智元导读】Meta开源DepthLM,首证视觉语言模型无需改架构即可媲美纯视觉模型的3D理解能力。通过视觉提示、稀疏标注等创新策略,DepthLM精准完成像素级深度估计等任务,解锁VLM多任务处理潜力,为自动驾驶、机器人等领域带来巨大前景。

在当前多模态AI发展浪潮中,视觉语言模型(Vision Language Models, VLMs)因其能通过「看图 + 文字交互」处理多样任务而备受关注。

然而,尽管在语义理解、视觉问答、图像指令等任务上表现优异,它们在从 2D 图像理解 3D 空间结构方面仍显薄弱。相比之下,纯视觉模型(pure vision models)在 绝对深度估计(metric depth estimation) 等三维理解任务上,凭借专门设计的网络结构与损失函数,早已达到了超越人类的精度。

这就带来了一个核心问题:「视觉语言模型是否有可能不更改其标准架

上一页 下一页
版权与免责声明:本文内容转载自其他媒体,目的在于传递更多信息,不代表本网观点或立场,不承担此类作品侵权行为的自己责任及连带责任。
猜你喜欢
精彩推荐

纯电续航310km 2026款海狮06DM-i上市售12.99万元起

网易汽车 浏览 389

英超前六相互交锋积分榜:曼联、维拉积12分最多,阿森纳9分

懂球帝 浏览 547

美股芯片股全线大跌,希捷科技盘后猛涨17%,闪迪大涨4%,国际油价涨超3%,霍尔木兹海峡传来新消息

21世纪经济报道 浏览 5925

罗志恒:反内卷与供给侧改革有何不同?

首席经济学家论坛 浏览 10180

阅兵准备基本就绪 已经进入倒计时

新华社 浏览 838

媒体:泽连斯基离间 声称俄罗斯正向中方放弃部分主权

澎湃新闻 浏览 712

有望2026年亮相 曝法拉利首款纯电动车谍照

车质网 浏览 748

京东外卖一周涌入近20万商家 刘强东能否拿到市场“第三张门票”?

每日经济新闻 浏览 1075

吴建豪妈妈晒与言承旭周渝民阿信合照

准备好了吗 浏览 615

斯坦福大学团队推出「许可证神谕」:让AI学会说「我不知道」

科技行者 浏览 606

当人类把经验与想象力交给机器人,具身智能如何承载新内容?

刺猬公社 浏览 643

乌武装部队前总司令扎卢日内提议:在乌克兰部署核武器

环球时报国际 浏览 655

56岁陈红颜值回春,参加路演不惧高清镜头,她满脸皱纹依旧美丽

温柔娱公子 浏览 752

海外市场扩张成效明显 澳优乳业上半年净利润增长超两成

中国商报 浏览 1645

美国4月服务业PMI不及预期,叠加价格压力高企,加剧滞胀担忧

华尔街见闻官方 浏览 2711

曝曼联与沙特谈B费转会价格!B费想自己主宰未来,拜仁或加入争夺

罗米的曼联博客 浏览 757

S=更入门?大众速腾S工信部信息曝光

网易汽车 浏览 596

你认同吗?罗德曼分享他的总统山人选:乔詹库&魔术师!

直播吧 浏览 849

廷贝尔:联赛杯决赛也许能成为争冠动力;哈弗茨不是安静的人

懂球帝 浏览 603

8个月前碰撞损伤仍未修复 美"杜鲁门"号航母新照披露惹争议

环球网资讯 浏览 713

田中碧:英超的对抗强度堪比世界杯或欧冠;世界杯会拼尽全力

懂球帝 浏览 396
本站所有信息收集于互联网,如本站收集信息侵权,请联系我们及时删除
闽ICP备16027347号-4