Perplexity被指控抓取明确阻止AI抓取的网站
周一,Cloudflare发布研究报告称,其观察到这家人工智能初创公司忽略了阻止,并隐藏了其抓取和爬取活动。Cloudflare 的研究人员写道,这家网络基础设施巨头指责 Perplexity 在试图抓取网页时隐藏了其身份,“试图绕过网站的偏好设置”。
网站 perplexity 爬虫程序 爬虫 dwyer 2025-08-05 00:11 2
周一,Cloudflare发布研究报告称,其观察到这家人工智能初创公司忽略了阻止,并隐藏了其抓取和爬取活动。Cloudflare 的研究人员写道,这家网络基础设施巨头指责 Perplexity 在试图抓取网页时隐藏了其身份,“试图绕过网站的偏好设置”。
网站 perplexity 爬虫程序 爬虫 dwyer 2025-08-05 00:11 2