现在有很多AI智能搜索,导致我们个人博客网站的流量下降了很多。如果你的站点使用国外免费CDN加速Cloudflare,那么建议开启“AI Scrapers and Crawlers(AI抓取工具和爬虫)”,这样就可以阻止机器人为模型训练等AI应用程序抓取我们站点内容。
AI Scrapers and Crawlers
Block bots from scraping your content for AI applications like model training.
AI抓取工具和爬虫
阻止机器人为模型训练等AI应用程序抓取您的内容。
前往Cloudflare官网并登录 >> 点击自己的网站 >> 点击左侧导航菜单“安全性 – 自动程序”>> 点击“AI Scrapers and Crawlers(AI抓取工具和爬虫)”的开关按钮,让其处于开启状态即可。

如果你知道各个AI爬虫的User Agent,还可以在robots.txt文件中禁止它们抓取我们的站点内容。
















桂公网安备 45010502000016号