关闭广告

超越纯视觉模型!不改VLM标准架构,实现像素级深度预测

新智元890人阅读


新智元报道

编辑:LRST

【新智元导读】Meta开源DepthLM,首证视觉语言模型无需改架构即可媲美纯视觉模型的3D理解能力。通过视觉提示、稀疏标注等创新策略,DepthLM精准完成像素级深度估计等任务,解锁VLM多任务处理潜力,为自动驾驶、机器人等领域带来巨大前景。

在当前多模态AI发展浪潮中,视觉语言模型(Vision Language Models, VLMs)因其能通过「看图 + 文字交互」处理多样任务而备受关注。

然而,尽管在语义理解、视觉问答、图像指令等任务上表现优异,它们在从 2D 图像理解 3D 空间结构方面仍显薄弱。相比之下,纯视觉模型(pure vision models)在 绝对深度估计(metric depth estimation) 等三维理解任务上,凭借专门设计的网络结构与损失函数,早已达到了超越人类的精度。

这就带来了一个核心问题:「视觉语言模型是否有可能不更改其标准架

上一页 下一页
版权与免责声明:本文内容转载自其他媒体,目的在于传递更多信息,不代表本网观点或立场,不承担此类作品侵权行为的自己责任及连带责任。
猜你喜欢
精彩推荐

罗正自曝出道十年存款4800元,23年存款1900万

喜欢历史的阿繁 浏览 429

硅谷高管消息群一夜未停 H-1B新规让美企慌了白宫找补

红星新闻 浏览 1029

白色灵动岛:消息称努比亚手机也将“上岛”,可自行选择开关

IT之家 浏览 814

存储三巨头冲破万亿美元市值,长鑫科技上市到底值多少钱?

郭施亮 浏览 12684

沙特大幅下调旗舰原油溢价至五年低点,全球供应过剩压力显现

华尔街见闻官方 浏览 6649

蒋奇明新片路演:生图五官好嫩像清纯男大

胡一舸南游y 浏览 986

乒超常规赛落幕 山东魏桥深圳大学分列男女团头名

体坛周报 浏览 998

端网深度协同,中国移动5G-A超级上行刷新移动直播体验

环球网资讯 浏览 629

郭碧婷自曝和向佐两地分居

萌神木木 浏览 768

22岁女村支书遇车祸身亡 表姐:本来说好要做我伴娘

极目新闻 浏览 1083

跟队:切尔西将不会有正式主帅带队客战曼城

懂球帝 浏览 831

墨西哥总统宣布将向古巴提供援助并推动恢复石油供应

上观新闻 浏览 757

「寻芯记」上市后首个大动作!摩尔线程公布全功能GPU架构路线图,国产芯片发起生态冲刺

华夏时报 浏览 770

台北袭击案行凶者被造谣是"大陆籍" 蒋万安驳斥

看看新闻Knews 浏览 798

特朗普为何如此想要格陵兰岛 美联社用同个词解释3次

大象新闻 浏览 730

72岁大佬完美谢幕,套现22亿无人反对,国资和股民都很满意

壹只灰鸽子 浏览 2597

HWG!罗马诺:维拉1200万欧签下梅斯16岁前锋马乔已达成协议

懂球帝 浏览 766

盛大阅兵倒计时9天 80秒回顾三次综合演练画面

央视新闻客户端 浏览 870

奇瑞QQ3量产版曝光! 轴距2米7配8155芯片

Ai爱车 浏览 751

今晚报:国足11月要踢一场马来西亚,另一个对手没有敲定

懂球帝 浏览 71

父亲脑血栓瘫痪儿子正叛逆 母亲又气又痛告知儿子身世

红星新闻 浏览 635
本站所有信息收集于互联网,如本站收集信息侵权,请联系我们及时删除
闽ICP备16027347号-4