关闭广告

超越纯视觉模型!不改VLM标准架构,实现像素级深度预测

新智元4659人阅读


新智元报道

编辑:LRST

【新智元导读】Meta开源DepthLM,首证视觉语言模型无需改架构即可媲美纯视觉模型的3D理解能力。通过视觉提示、稀疏标注等创新策略,DepthLM精准完成像素级深度估计等任务,解锁VLM多任务处理潜力,为自动驾驶、机器人等领域带来巨大前景。

在当前多模态AI发展浪潮中,视觉语言模型(Vision Language Models, VLMs)因其能通过「看图 + 文字交互」处理多样任务而备受关注。

然而,尽管在语义理解、视觉问答、图像指令等任务上表现优异,它们在从 2D 图像理解 3D 空间结构方面仍显薄弱。相比之下,纯视觉模型(pure vision models)在 绝对深度估计(metric depth estimation) 等三维理解任务上,凭借专门设计的网络结构与损失函数,早已达到了超越人类的精度。

这就带来了一个核心问题:「视觉语言模型是否有可能不更改其标准架

版权与免责声明:本文内容转载自其他媒体,目的在于传递更多信息,不代表本网观点或立场,不承担此类作品侵权行为的自己责任及连带责任。
猜你喜欢
精彩推荐

阮奇龙庆祝冲超:美好的一个赛季,一起期待2026新的挑战

懂球帝 浏览 4387

怒砸15亿,全明星阵容,年底压轴大片来了

独立鱼 浏览 3075

新一任美联储主席被任命 华尔街无法确定其"是敌是友"

环球网资讯 浏览 7878

三人伪装"外卖员""钓鱼佬"窃取军事秘密 详情公布

扬子晚报 浏览 5367

陈运拿下华锋股份意欲何为

北京商报 浏览 4189

泽连斯基:乌克兰已准备好结束俄乌冲突

环球网资讯 浏览 4477

谢林汉姆:库尼亚是曼联从平庸到优秀的关键,愿他能保持状态

懂球帝 浏览 4328

3岁男童掉进炭火堆全身85%烧伤 母亲将手伸进白灰救娃

环球网资讯 浏览 8553

娜扎被抢休息室,网友扒出疑似林允

萌神木木 浏览 4630

推广中奖名单-更新至2026年2月3日推广

黎贝卡的异想世界 浏览 2930

中国加速构建具身智能数据标准体系 “浦江X”平台发布

上观新闻 浏览 4477

东南大学突破:AI学会情境化拒绝能力

科技行者 浏览 4607

半两财经|首款eSIM手机发售 国内运营商加速“无卡化”

北青网-北京青年报 浏览 4486

2165.1亿件!2025年我国邮政快递业业务规模创新高

央视财经 浏览 3423

降温了!羽绒服这样穿显瘦又时髦

LinkFashion 浏览 3418

中恒电气:两款旗舰产品发布,重新定义AI数据中心供电技术标准

览富财经网 浏览 4382

喜马拉雅烟花秀引争议 新华社、人民日报接连发声

21世纪经济报道 浏览 22589

AI智库“智汇”珠海,助力大湾区学术与产业的“双向奔赴”

南方都市报 浏览 4551

马德兴:张瑷晖因脚踝受伤没参加U23国足第二日的合练

懂球帝 浏览 3613

员工超长时间如厕被开除 单次最长4小时辩称护理痔疮

环球网资讯 浏览 7967

保时捷4S店暴雷背后 两记“暴击”都是新势力给的

小李车评李建红 浏览 3820
本站所有信息收集于互联网,如本站收集信息侵权,请联系我们及时删除
沪ICP备20017958号-1