关闭广告

上海AI实验室团队首创视频驱动交互网页重建基准

科技行者1031人阅读


这项由上海AI实验室、浙江大学、中国科学技术大学深圳分校等机构联合完成的突破性研究发表于2025年9月,论文编号为arXiv:2509.24709。研究团队包括陈阳、刘明浩、沈雨帆等多位来自不同院校的研究者,项目由上海AI实验室的沈雨帆教授领导。有兴趣深入了解的读者可以通过该论文编号查询完整论文内容。

当我们浏览网页时,看到精美的界面、流畅的动画效果和各种交互功能,很少有人会想到这背后需要大量的代码来支撑。传统上,要让AI学会制作网页,研究者们通常只给它看静态的截图,然后让它生成对应的代码。这就像让一个人仅凭一张照片就要画出整幅画作一样,缺少了很多重要信息。

然而,真实的网页远比静态截图复杂得多。当用户点击按钮时页面会发生变化,当鼠标悬停在某个区域时会出现新的内容,当用户填写表单时系统会给出相应反馈。这些动态的交互过程包含了网页运作的核心逻辑,但在传统的AI训练方法中却被完全忽略了。

正是在这样的背景下,研究团队提出了一个革命性的想法:为什么不让AI观看完整的用户操作视频,就像人类学习使用软件一样,通过观察整个交互过程来理解网页的工作原理呢?

上一页 下一页
版权与免责声明:本文内容转载自其他媒体,目的在于传递更多信息,不代表本网观点或立场,不承担此类作品侵权行为的自己责任及连带责任。
猜你喜欢
精彩推荐

46岁董璇被曝怀二胎,本人现身机场脱外套辟谣,小腹平坦状态超好

扒虾侃娱 浏览 1001

竞逐AI内容,爱奇艺先出手了

连线Insight 浏览 992

俄军中将遭汽车炸弹袭击身亡 目击者:没开几米车突然爆炸

红星新闻 浏览 929

乌武装部队前总司令扎卢日内提议:在乌克兰部署核武器

环球时报国际 浏览 941

中超第27轮传球成功率榜:国安89.6%居首,时隔5轮再次登顶

懂球帝 浏览 914

至高6000元购车红包 长安启源推限时购车福利

网易汽车 浏览 788

土耳其对内塔尼亚胡等人发出逮捕令 以色列回应

环球网资讯 浏览 987

伊朗最高领袖顾问:特朗普理应担心有更多美国人伤亡

环球网资讯 浏览 851

泰国王太后诗丽吉逝世享年93岁,后宫恐加混乱

译言 浏览 971

郭宇欣刘萧旭太原盛典现场互动 太甜了

生性洒脱 浏览 1061

对话Memories.ai:“人的记忆本质上是视觉,AI也该如此”

硅星人 浏览 947

面相变了!看活动上“挂脸”的杨幂,才懂林永健对她的评价

娱乐圈笔娱君 浏览 1040

景区欲花1.27亿给大山装扶梯惹争议:资金来自专项债

中国新闻周刊 浏览 1219

珠海收获2金!广东省无人机应用技术职业技能大赛结果揭晓

南方都市报 浏览 991

喜羊羊之父,又要去IPO了

投资家 浏览 3173

安帅:我相信穆帅会做得很好,皇马将迎来一个伟大的赛季

懂球帝 浏览 386

泽连斯基透露可能的和平谈判地点

财联社 浏览 977

新华鲜报|向着8万海里!中国第42次南极考察队起航

新华社 浏览 963

项立刚再批罗永浩!为搞流量煽动舆论,被封就是活该

雷科技 浏览 938

读懂IPO|北芯生命累亏超5亿元,第一大推广服务商0人参保,实控人以1元/股获8万股股权激励

时代周报 浏览 1944

诺思与您相约 IMFW 2026 第三届国际微波滤波器研讨会

爱集微 浏览 905
本站所有信息收集于互联网,如本站收集信息侵权,请联系我们及时删除
闽ICP备16027347号-4