免费CDN加速Cloudflare如何阻止机器人AI抓取我们站点内容?

现在有很多AI智能搜索,导致我们个人博客网站的流量下降了很多。如果你的站点使用国外免费CDN加速Cloudflare,那么建议开启“AI Scrapers and Crawlers(AI抓取工具和爬虫)”,这样就可以阻止机器人为模型训练等AI应用程序抓取我们站点内容。

AI Scrapers and Crawlers

Block bots from scraping your content for AI applications like model training.

AI抓取工具和爬虫

阻止机器人为模型训练等AI应用程序抓取您的内容。

前往Cloudflare官网并登录 >> 点击自己的网站 >> 点击左侧导航菜单“安全性 – 自动程序”>> 点击“AI Scrapers and Crawlers(AI抓取工具和爬虫)”的开关按钮,让其处于开启状态即可。

免费CDN加速Cloudflare如何阻止机器人AI抓取我们站点内容?-第1张-boke112百科(boke112.com)

如果你知道各个AI爬虫的User Agent,还可以在robots.txt文件中禁止它们抓取我们的站点内容。

文章创作不易,期待您的评分

本文地址:https://boke112.com/article/p1507.html

版权声明:本文为原创文章,版权归 boke112百科 所有,欢迎分享本文,转载请保留出处!发布此文是出于传递更多信息之目的,若有来源标注错误或侵犯了您的合法权益,请联系我们,确认后马上更正或删除,谢谢!
wu