关闭广告

超越纯视觉模型!不改VLM标准架构,实现像素级深度预测

新智元680人阅读


新智元报道

编辑:LRST

【新智元导读】Meta开源DepthLM,首证视觉语言模型无需改架构即可媲美纯视觉模型的3D理解能力。通过视觉提示、稀疏标注等创新策略,DepthLM精准完成像素级深度估计等任务,解锁VLM多任务处理潜力,为自动驾驶、机器人等领域带来巨大前景。

在当前多模态AI发展浪潮中,视觉语言模型(Vision Language Models, VLMs)因其能通过「看图 + 文字交互」处理多样任务而备受关注。

然而,尽管在语义理解、视觉问答、图像指令等任务上表现优异,它们在从 2D 图像理解 3D 空间结构方面仍显薄弱。相比之下,纯视觉模型(pure vision models)在 绝对深度估计(metric depth estimation) 等三维理解任务上,凭借专门设计的网络结构与损失函数,早已达到了超越人类的精度。

这就带来了一个核心问题:「视觉语言模型是否有可能不更改其标准架

上一页 下一页
版权与免责声明:本文内容转载自其他媒体,目的在于传递更多信息,不代表本网观点或立场,不承担此类作品侵权行为的自己责任及连带责任。
猜你喜欢
精彩推荐

AI 内容须亮明身份,《人工智能生成合成内容标识办法》明施行

IT之家 浏览 784

长这样的外套,大骨架女孩不要买!

Yuki女人故事 浏览 669

瑞士国防军司令:为应对"俄罗斯风险"必须增加军费

澎湃新闻 浏览 589

王力宏伴舞机器人高难度后空翻后稳稳落地,马斯克点赞!

大象新闻 浏览 582

德国外长在广州表态:看到与中国建设性合作的机会

环球时报国际 浏览 536

结构性货币政策工具扩容 降准降息可期

北京商报 浏览 2316

白敬亭带着无限流杀回来了,这剧真的很好看!

伊周潮流 浏览 752

59岁无儿无女,王晶为何说张卫健一点都不惨

林雁飞 浏览 564

采用900V高压架构 蔚来ES9将于5月27日上市

车质网 浏览 365

特朗普行政令降低大麻管制等级,投资者“卖事实”,大麻股普跌

华尔街见闻官方 浏览 2470

小鹏汽车2025年全年交付量达429,445台 同比增长126%

网易汽车 浏览 579

江中药业:激励计划部分业绩考核指标或“开倒车” 子公司财务数据或现“不同版本”

金证研 浏览 1806

超450亿元!603906,锂电大单

中国基金报 浏览 2611

拼劲十足!比尔半场8中4拿到9分6板3助

直播吧 浏览 867

《玉茗茶骨》张慧雯啊,是最可惜的谋女郎

温柔娱公子 浏览 610

法式浪漫与极致速度 Venturi 400超跑传奇

老爷车 浏览 851

媒体:一级政府拒不执行法院判决 是非常恶劣的示范

南方都市报 浏览 594

可折叠iPhone来了却可能买不到?分析师预警发布初期将严重缺货

环球网资讯 浏览 577

埃迪-豪联赛对前东家伯恩茅斯7场不胜,并列英超最长纪录

懂球帝 浏览 732

早春绝美cp:九分裤+运动鞋

Yuki女人故事 浏览 505

这「禁欲」男神天花板,太顶了

独立鱼 浏览 778
本站所有信息收集于互联网,如本站收集信息侵权,请联系我们及时删除
闽ICP备16027347号-4