经常有站长反馈说必应爬虫太厉害把服务器都干趴了,其实我们可以在必应站长平台(bing网站管理员工具Bing Webmaster Tools)中设置必应爬取时间和速度的。至于有些网友问“是否有必要设置爬网控件?”,这个只能说看你的主机空间,如果必应爬虫来的时候你感觉到不受影响,那么可以不用理会,不过boke112百科认为根据网站各个时间段的实际访问量来设置必应爬虫还是非常有必要了,让它跟我们站点的用户错开,不要浪费我们的带宽和服务器资源。具体设置必应站长平台“爬网控件”操作如下:
1、前往bing网站管理员工具官网并登录 – 点击左上角选择相应的网站后点击左侧导航菜单“配置 – 爬网控件”- 时区建议选择“(UTC+08:00 )北京、重庆、香港特别行政区、乌鲁木齐”,时间格式可随意,这里boke112百科选择“24-十二小时制”。

2、爬网设置中“你的网站受到最多流量的时间”默认就是全天候爬网速度都一样,boke112百科建议各位站长根据网站流量的实际情况选择时间段。如果你的站点使用了51LA统计工具,那么登录进入后台查看该网站报表中的“趋势分析”,建议选择“昨日”,然后指标选择“IP数”,这样就可以看出我们的站点一天各个时间段的访问情况了。
然后我们在“你的网站受到最多流量的时间”选择“自定义”,然后在“爬网速率”中相应时间段设置最快的爬网速度,而其他网站流量多的地方就设置最慢的爬网速度。
3、设置好爬网速率后记得点击【保存更改】按钮,然后在“保存更改”对话框中点击【保存】按钮即可。
至此,我们已经成功设置了必应的“爬网控件”,这样以后必应爬虫就是在我们设置的时间段内大马力爬取我们站点了。
















桂公网安备 45010502000016号