开云(中国)Kaiyun·官方网站 - 登录入口并通过更启航份象征回避阻难规定-开云体育最新网站 开云最新官方网站 - 登录入口

IT之家 8 月 5 日音书，当地时候周一，Cloudflare 发布了一份申诉，指控 AI 初创公司 Perplexity 在网站已明确标注不容 AI 合手取的情况下仍进行合手取开云(中国)Kaiyun·官方网站 - 登录入口，并通过更启航份象征回避阻难规定。

申诉透露，Perplexity 忽略网站 robots.txt 文献（用于见告搜索引擎和 AI 公司哪些页面可供索引）及针对其已知爬虫的阻难规定，退换 UA  和 ASN 信息，通过更换身份和收罗地址等技巧绕过屏蔽并合手取大宗实质。

Cloudflare 称，他们通过“机器学习与收罗信号衔接合”的风景，识别出了 Perplexity 爬虫的特征，其行动触及“数万个域名，每天数百万次申请”。

针对指控，Perplexity 发言东谈主 Jesse Dwyer 暗示：Cloudflare 的博文是“销售噱头”，并暗示文中截图“透露莫得实质被探望”。在后续邮件中，Dwyer 进一步否定，称 Cloudflare 提到的机器东谈主“以致不是咱们的”。

Cloudflare 暗示，其考察源于客户投诉 —— 部分客户已在 robots 文献中添加规定并独特阻难 Perplexity 的已知爬虫，但仍遭其合手取。Cloudflare 测试后说明属实。

动作修起，Cloudflare 已将 Perplexity 的爬虫移出认证名单（用于象征正当爬虫），并添加新的时期阻难其行动。

IT之家预防到，这并非 Perplexity 初度靠近此类指控。客岁《Wired》等媒体曾经指控 Perplexity 抄袭其实质；首席实验官 Aravind Srinivas 在 Disrupt 2024 大会上头对媒体问询却不敢回答。

参考贵府：

《Perplexity is using stealth开云(中国)Kaiyun·官方网站 - 登录入口, undeclared crawlers to evade website no-crawl directives》