阿里巴巴将Page Agent开源,以缓解大型模型的代码重构焦虑
在浏览器自动化开发的漫长征途中,开发者常常发现自己是在“ reinventing the wheel ”。无论是使用复杂的屏幕截图来“观察”网页,还是依赖低级协议来强制交互,这些方法往往难以应对动态变化的网页结构。 近日,阿里巴巴开源了一款名为 Page Agent 的 JavaScript 客户端库,为这一行业难题提供了一种全新的解决方案:它不再试图从外部强行破解网页,而是让大型模型直接“理解”网页内部的 DOM 结构。
Page Agent 的核心技术创新在于“DOM 脱水”。传统方案通常需要截取网页屏幕截图并进行多模态分析以供 AI 识别,这不仅成本高昂,还容易丢失关键的交互信息。 Page Agent 则采取了不同的方法,它在网页内部直接运行,并将复杂的 DOM 树压缩为轻量级的“FlatDomTree”纯文本映射。 这一过程如同为 AI 绘制了一张高精度的交互地图;模型无需处理复杂的视觉渲染,仅凭这一简化的结构映射,即可准确完成按钮点击和表单输入等高难度操作。

对于开发者而言,Page Agent 的“嵌入式”设计带来了显著的便利。由于它直接在网页环境中运行,因此自然继承了所有 Cookie、会话状态和登录凭据,消除了在后端处理复杂验证流程的困扰。 该项目采用高度兼容的开放式设计,可与任何支持标准接口的大型语言模型无缝集成。在 SaaS 产品智能助手、自动化数据采集以及提升 Web 应用程序可访问性等场景中,Page Agent 提供了一种高效且经济实惠的替代方案。

当然,Page Agent 并非万能钥匙。开发团队在开源文档中明确指出,该库目前更侧重于单页面内的高效交互。 此外,在处理支付或数据篡改等高安全敏感操作时,开发者仍需在服务器端实现严格的逻辑验证。为确保系统稳定性,Page Agent 在设计中采用了由提示词触发的权限控制机制,为自动化流程构建了初步的安全屏障。

目前,Page Agent 已根据 MIT 许可证在 GitHub 上正式开源。 随着该工具的发布,开发者有望彻底告别高昂的多模态计算成本,采用更实用的工程方法将真正“感知网页”的智能代理嵌入应用程序中。这也表明,AI网页自动化技术正迈入轻量化和普及化的新阶段。
相关文章
韩国启动国家人工智能计算中心建设,投资2.5万亿韩元,目标2028年完成
韩国媒体EtNews报道,韩国AI计算中心(KOACC)的奠基仪式于8月3日在全罗南道顺天市的Solar City数据中心园区举行。该项目总投资额为2.5万亿韩元(约合118.38亿元人民币),计划于2028年投入运营,成为迄今为止韩国在AI基础设施领域规模最大的国家投资之一。该项目的股权分布凸显了深化政企合作的战略意图。三星SDS作为最大股东持有30%的股份,而包括科学技术信息通信部、金融监督院和国家成长基金在内的公共实体合计持有29%的股份。NAVER Cloud紧随其后,持股26.1%,
六大科技巨头向 Linux 基金会捐赠 1250 万美元,以应对人工智能漏洞噪音
为应对由人工智能自动化工具产生的大量低质量安全报告,六家主要科技公司——Anthropic、亚马逊(AWS)、GitHub、Google、Microsoft 和 OpenAI——共同向 Linux 基金会项目提供了 1250 万美元 的资金支持。这项投资旨在减轻开源软件(FOSS)维护者手动筛选的工作负担,使他们能够专注于真正的安全威胁。随着人工智能技术降低了漏洞发现的门槛,开源社区正面临前所未有的挑战:无效报告:自动生成的 AI 报告使维护者应接不暇。虽然数量庞大,但这些提交往往缺乏深度,
马斯克曾考虑将OpenAI留给他的孩子,而奥特曼正在作证
今早,OpenAI 首席执行官山姆·阿尔特曼出庭作证,回应前联合创始人埃隆·马斯克针对该公司企业结构提起的诉讼。当被问及马斯克声称其他联合创始人通过成立一家以营利为目的的子公司来推广基于人工智能的产品,从而“窃取了一家慈善机构”的说法时,阿尔特曼表现出明显的犹豫。“这种说法甚至让人难以理解,”阿尔特曼在停顿后说道,“我们成立的是全球最大的慈善机构之一。该基金会正在开展令人难以置信的工作,并将继续做更多事情。”马斯克的律师团队指出,OpenAI 基金会目前持有的资产价值约为 2000 亿美元
相关专题推荐
评论 (0)
0/500
在浏览器自动化开发的漫长征途中,开发者常常发现自己是在“ reinventing the wheel ”。无论是使用复杂的屏幕截图来“观察”网页,还是依赖低级协议来强制交互,这些方法往往难以应对动态变化的网页结构。 近日,阿里巴巴开源了一款名为 Page Agent 的 JavaScript 客户端库,为这一行业难题提供了一种全新的解决方案:它不再试图从外部强行破解网页,而是让大型模型直接“理解”网页内部的 DOM 结构。
Page Agent 的核心技术创新在于“DOM 脱水”。传统方案通常需要截取网页屏幕截图并进行多模态分析以供 AI 识别,这不仅成本高昂,还容易丢失关键的交互信息。 Page Agent 则采取了不同的方法,它在网页内部直接运行,并将复杂的 DOM 树压缩为轻量级的“FlatDomTree”纯文本映射。 这一过程如同为 AI 绘制了一张高精度的交互地图;模型无需处理复杂的视觉渲染,仅凭这一简化的结构映射,即可准确完成按钮点击和表单输入等高难度操作。

对于开发者而言,Page Agent 的“嵌入式”设计带来了显著的便利。由于它直接在网页环境中运行,因此自然继承了所有 Cookie、会话状态和登录凭据,消除了在后端处理复杂验证流程的困扰。 该项目采用高度兼容的开放式设计,可与任何支持标准接口的大型语言模型无缝集成。在 SaaS 产品智能助手、自动化数据采集以及提升 Web 应用程序可访问性等场景中,Page Agent 提供了一种高效且经济实惠的替代方案。

当然,Page Agent 并非万能钥匙。开发团队在开源文档中明确指出,该库目前更侧重于单页面内的高效交互。 此外,在处理支付或数据篡改等高安全敏感操作时,开发者仍需在服务器端实现严格的逻辑验证。为确保系统稳定性,Page Agent 在设计中采用了由提示词触发的权限控制机制,为自动化流程构建了初步的安全屏障。

目前,Page Agent 已根据 MIT 许可证在 GitHub 上正式开源。 随着该工具的发布,开发者有望彻底告别高昂的多模态计算成本,采用更实用的工程方法将真正“感知网页”的智能代理嵌入应用程序中。这也表明,AI网页自动化技术正迈入轻量化和普及化的新阶段。
韩国启动国家人工智能计算中心建设,投资2.5万亿韩元,目标2028年完成
韩国媒体EtNews报道,韩国AI计算中心(KOACC)的奠基仪式于8月3日在全罗南道顺天市的Solar City数据中心园区举行。该项目总投资额为2.5万亿韩元(约合118.38亿元人民币),计划于2028年投入运营,成为迄今为止韩国在AI基础设施领域规模最大的国家投资之一。该项目的股权分布凸显了深化政企合作的战略意图。三星SDS作为最大股东持有30%的股份,而包括科学技术信息通信部、金融监督院和国家成长基金在内的公共实体合计持有29%的股份。NAVER Cloud紧随其后,持股26.1%,
六大科技巨头向 Linux 基金会捐赠 1250 万美元,以应对人工智能漏洞噪音
为应对由人工智能自动化工具产生的大量低质量安全报告,六家主要科技公司——Anthropic、亚马逊(AWS)、GitHub、Google、Microsoft 和 OpenAI——共同向 Linux 基金会项目提供了 1250 万美元 的资金支持。这项投资旨在减轻开源软件(FOSS)维护者手动筛选的工作负担,使他们能够专注于真正的安全威胁。随着人工智能技术降低了漏洞发现的门槛,开源社区正面临前所未有的挑战:无效报告:自动生成的 AI 报告使维护者应接不暇。虽然数量庞大,但这些提交往往缺乏深度,
马斯克曾考虑将OpenAI留给他的孩子,而奥特曼正在作证
今早,OpenAI 首席执行官山姆·阿尔特曼出庭作证,回应前联合创始人埃隆·马斯克针对该公司企业结构提起的诉讼。当被问及马斯克声称其他联合创始人通过成立一家以营利为目的的子公司来推广基于人工智能的产品,从而“窃取了一家慈善机构”的说法时,阿尔特曼表现出明显的犹豫。“这种说法甚至让人难以理解,”阿尔特曼在停顿后说道,“我们成立的是全球最大的慈善机构之一。该基金会正在开展令人难以置信的工作,并将继续做更多事情。”马斯克的律师团队指出,OpenAI 基金会目前持有的资产价值约为 2000 亿美元





首页






