Cloudflare 指责 Perplexity 使用人工智能机器人秘密抓取被封网站

人工智能初创公司被指规避网站限制
Cloudflare 最近的调查称,人工智能搜索公司 Perplexity 一直在使用绕过网站所有者实施的抓取限制的策略。这家互联网基础设施提供商报告称,他们观察到 Perplexity 的网络爬虫在遇到访问障碍时试图进行系统性伪装。
规避策略
根据 Cloudflare 的调查结果,Perplexity 的爬虫最初会显示标准标识("PerplexityBot "或 "Perplexity-User")。但是,当通过
- robots.txt 指令
- 网络应用程序防火墙规则
- 其他访问限制
据称,该系统会在 macOS 上将其身份转换为普通的 Chrome 浏览器用户,并利用以下手段掩盖身份:
- 轮换未正式列出的 IP 地址
- 更改自治系统网络标识符
- 未记录的用户代理模式
活动规模
Cloudflare 记录了以下行为
- 数以万计的域名
- 每天数百万次请求
- 各种网络配置
公司回应
Perplexity 的官方声明质疑 Cloudflare 的描述,称其为:
- 宣传噱头
- 包含 "许多误解
- 有可能混淆合法用户流量和搜索活动
该初创公司将一些检测到的活动归因于
- 发出特定请求的实际用户
- 第三方服务 BrowserBase
- 偶尔的技术需要
行业背景
此事件发生在
- 之前关于 Perplexity 绕过付费墙的报道
- 该公司过去对第三方爬虫的归因
- 行业对人工智能内容搜刮的担忧与日俱增
Cloudflare 已采取以下措施
- 取消 Perplexity 的验证机器人身份
- 实施新的阻止措施
- 扩大默认的人工智能爬虫限制
这种情况反映了以下两方面更广泛的紧张关系
- 人工智能公司的数据需求
- 发布者的权利和保护
- 不断发展的互联网基础设施应对措施
相关文章
华纳音乐收购AI归因初创公司Sureel AI
华纳音乐集团(WMG)于周三确认,其正在收购Sureel AI,一家专注于人工智能归因的初创公司。Sureel的专有技术为音乐曲目生成“AI DNA”,将其分解为各个组成部分,以追踪人工智能模型如何利用这些元素。通过此次收购,WMG旨在增强其监控其艺术家和词曲创作者的作品在人工智能生成内容中被使用或用于训练人工智能模型的能力。“将Sureel整合到WMG中,增强了我们的保护、控制和变现能力,确保创意社区保留对其知识产权、姓名、肖像、形象和声音的控制权,”WMG首席执行官Robert Kync
亚马逊推出“Alexa for Shopping”,同时将Rufus边缘化
亚马逊推出了“Alexa for Shopping”,将 Rufus 购物聊天机器人 Alexa+ 整合到应用程序、网站和 Echo Show 设备中。该助手回答产品查询、比较商品、跟踪价格,并支持购物提醒。它还处理计划中的购物操作和符合条件的自动购买。据该公司称,“Alexa for Shopping”将 Rufus 的产品专业知识与 Alexa+ 的个性化助手上下文相结合。亚马逊表示,Rufus 在 2025 年协助了超过 3 亿客户进行产品研究、比较和购买。GeekWire 报道称,
微软、Azure 和人工智能技术共同应对加利福尼亚州野火风险
微软投资于人工智能驱动的山火监测技术,其首席副总裁兼首席数据科学家胡安·拉维斯塔·费雷斯(Juan Lavista Ferres)探讨了减轻环境损害的策略。据美国国家航空航天局(NASA)称,气候变化影响着地球上的每个人,其表现为气温上升、降雨模式改变以及海平面上升。NASA指出,有确凿证据表明地球正以史无前例的速度变暖,而人类活动是其主要驱动因素。随着全球气温上升,野火构成的威胁日益加剧。 在美
相关专题推荐
评论 (3)
0/500
Alors, cette nouvelle me fait vraiment réfléchir aux limites entre innovation et éthique dans l'IA. Perplexity ferait ça en cachette ? Si c'est vrai, c'est pas joli joli. On dirait un peu un jeu du chat et de la souris où les startups bousculent les règles. 😬 Mais bon, Cloudflare n'est pas parfait non plus, ils ont leur propre agenda. Un peu de transparence ne ferait de mal à personne ! C'est ce manque de clarté qui mine la confiance du public envers toute cette industrie.
¿Está Perplexity realmente raspando sitios web bloqueados a escondidas? 🤔 Si es verdad, es bastante preocupante. Muchas empresas de IA prometen ser 'éticas', pero a veces parece que sus acciones contradicen sus palabras. Espero que haya más transparencia en la industria y que respeten los archivos robots.txt de los sitios. Este caso podría suponer un precedente importante.
¿Es esto lo que llaman 'innovación'? Primero nos venden la IA como una herramienta mágica, y luego descubrimos que hacen trampas para robar datos. Si Perplexity realmente evita bloqueos a propósito, es un problema serio de ética y legal. ¡Qué hipocresía! 🙄 ¿Hasta dónde llegarán algunas startups para ganar la carrera de la IA?

人工智能初创公司被指规避网站限制
Cloudflare 最近的调查称,人工智能搜索公司 Perplexity 一直在使用绕过网站所有者实施的抓取限制的策略。这家互联网基础设施提供商报告称,他们观察到 Perplexity 的网络爬虫在遇到访问障碍时试图进行系统性伪装。
规避策略
根据 Cloudflare 的调查结果,Perplexity 的爬虫最初会显示标准标识("PerplexityBot "或 "Perplexity-User")。但是,当通过
- robots.txt 指令
- 网络应用程序防火墙规则
- 其他访问限制
据称,该系统会在 macOS 上将其身份转换为普通的 Chrome 浏览器用户,并利用以下手段掩盖身份:
- 轮换未正式列出的 IP 地址
- 更改自治系统网络标识符
- 未记录的用户代理模式
活动规模
Cloudflare 记录了以下行为
- 数以万计的域名
- 每天数百万次请求
- 各种网络配置
公司回应
Perplexity 的官方声明质疑 Cloudflare 的描述,称其为:
- 宣传噱头
- 包含 "许多误解
- 有可能混淆合法用户流量和搜索活动
该初创公司将一些检测到的活动归因于
- 发出特定请求的实际用户
- 第三方服务 BrowserBase
- 偶尔的技术需要
行业背景
此事件发生在
- 之前关于 Perplexity 绕过付费墙的报道
- 该公司过去对第三方爬虫的归因
- 行业对人工智能内容搜刮的担忧与日俱增
Cloudflare 已采取以下措施
- 取消 Perplexity 的验证机器人身份
- 实施新的阻止措施
- 扩大默认的人工智能爬虫限制
这种情况反映了以下两方面更广泛的紧张关系
- 人工智能公司的数据需求
- 发布者的权利和保护
- 不断发展的互联网基础设施应对措施
华纳音乐收购AI归因初创公司Sureel AI
华纳音乐集团(WMG)于周三确认,其正在收购Sureel AI,一家专注于人工智能归因的初创公司。Sureel的专有技术为音乐曲目生成“AI DNA”,将其分解为各个组成部分,以追踪人工智能模型如何利用这些元素。通过此次收购,WMG旨在增强其监控其艺术家和词曲创作者的作品在人工智能生成内容中被使用或用于训练人工智能模型的能力。“将Sureel整合到WMG中,增强了我们的保护、控制和变现能力,确保创意社区保留对其知识产权、姓名、肖像、形象和声音的控制权,”WMG首席执行官Robert Kync
微软、Azure 和人工智能技术共同应对加利福尼亚州野火风险
微软投资于人工智能驱动的山火监测技术,其首席副总裁兼首席数据科学家胡安·拉维斯塔·费雷斯(Juan Lavista Ferres)探讨了减轻环境损害的策略。据美国国家航空航天局(NASA)称,气候变化影响着地球上的每个人,其表现为气温上升、降雨模式改变以及海平面上升。NASA指出,有确凿证据表明地球正以史无前例的速度变暖,而人类活动是其主要驱动因素。随着全球气温上升,野火构成的威胁日益加剧。 在美
Alors, cette nouvelle me fait vraiment réfléchir aux limites entre innovation et éthique dans l'IA. Perplexity ferait ça en cachette ? Si c'est vrai, c'est pas joli joli. On dirait un peu un jeu du chat et de la souris où les startups bousculent les règles. 😬 Mais bon, Cloudflare n'est pas parfait non plus, ils ont leur propre agenda. Un peu de transparence ne ferait de mal à personne ! C'est ce manque de clarté qui mine la confiance du public envers toute cette industrie.
¿Está Perplexity realmente raspando sitios web bloqueados a escondidas? 🤔 Si es verdad, es bastante preocupante. Muchas empresas de IA prometen ser 'éticas', pero a veces parece que sus acciones contradicen sus palabras. Espero que haya más transparencia en la industria y que respeten los archivos robots.txt de los sitios. Este caso podría suponer un precedente importante.
¿Es esto lo que llaman 'innovación'? Primero nos venden la IA como una herramienta mágica, y luego descubrimos que hacen trampas para robar datos. Si Perplexity realmente evita bloqueos a propósito, es un problema serio de ética y legal. ¡Qué hipocresía! 🙄 ¿Hasta dónde llegarán algunas startups para ganar la carrera de la IA?





首页






