抓取频次:搜索引擎在单位时间内(天级)对网站服务器抓取的总次数。如果搜索引擎对站点的抓取频次过高,很有可能造成服务器不稳定,Baiduspider会根据网站内容更新频率和服务器压力等因素自动调整抓取频次。
什么是抓取频次
抓取频次是搜索引擎在单位时间内(天级)对网站服务器抓取的总次数,如果搜索引擎对站点的抓取频次过高,很有可能造成服务器不稳定,Baiduspider会根据网站内容更新频率和服务器压力等因素自动调整抓取频次。
Baiduspider会根据网站服务器压力自动进行抓取频次调整
建议您慎重调节抓取频次上限值,如果抓取频次过小则会影响Baiduspider对网站的收录
什么情况下可以进行抓取频次上限调整
首先,Baiduspider会根据网站服务器压力自动进行抓取频次调整。
其次,如果Baiduspider的抓取影响了网站稳定性,站长可以通过此工具调节Baiduspider每天抓取您网站的频次上限。
强调1:调整抓取频次上限不等于调高抓取频次。
强调2:建议您慎重调节抓取频次上限值,如果抓取频次过小则会影响Baiduspider对网站的收录。
注意事项
Baiduspider会根据网站服务器压力自动进行抓取频次调整;
抓取频次过大:很有可能造成服务器不稳定,影响网站正常访问;
抓取频次过小:影响站点收录。
当前抓取频次过大怎么办?
如果抓取了过多的无价值页面,可以更新网站robots文件;
合理调节抓取频次上限值。
当前抓取频次过小怎么办?
取消或调整抓取频次上限值;
使用抓取异常工具辅助诊断;
通过资源提交工具主动提交资源。
声明:本站所有文章,如无特殊说明或标注,均为本站原创发布。任何个人或组织,在未征得本站同意时,禁止复制、盗用、采集、发布本站内容到任何网站、书籍等各类媒体平台。如若本站内容侵犯了原著者的合法权益,可联系我们进行处理。
本站提供的资源,都来自网络,版权争议与本站无关,所有内容及软件的文章仅限用于学习和研究目的。
如果您喜欢该程序,请支持正版软件,购买注册,得到更好的正版服务。侵删请致信E-mail:1484712216@qq.com
本站提供的资源,都来自网络,版权争议与本站无关,所有内容及软件的文章仅限用于学习和研究目的。
如果您喜欢该程序,请支持正版软件,购买注册,得到更好的正版服务。侵删请致信E-mail:1484712216@qq.com