蜘蛛过多，导致负载状态一直100%，又不想升级服务器，怎么办？360和头条的蜘蛛同时来，但是过几个小时蜘蛛不来了又恢复了。
来归来啊，你是一条收录都没有，站长平台也没有看到索引量和收录，但是基本天天来，导致服务器一直负载状态一直100%。
这个有没有办法解决？难道禁止他们来吗？还是让他一直这样，还还还还是是是有其他的解决方法？
遇到这个问题我们可以尝试通过搜索引擎站长平台来调节蜘蛛的抓取频次。
百度站长平台-抓取频次-当前抓取频次过大如何解决？-抓取频次上限调整
360搜索站长平台-蜘蛛压力-手动调整最大抓取频率
头条搜索站长平台-抓取频次-抓取频次上限调整
调整后等个一两天看看，是不是恢复正常了，如果还是这样，建议屏蔽掉一些搜索引擎蜘蛛，比如360和头条搜索引擎蜘蛛，往往都会给服务器带来非常大的压力，可以通过网站请求日志查看一些访问较为频繁的IP，然后用防火墙进行拦截。
有条件的话，可以考虑用CDN进行抓取缓解。相关链接
声明：本站所有文章，如无特殊说明或标注，均为本站原创发布。任何个人或组织，在未征得本站同意时，禁止复制、盗用、采集、发布本站内容到任何网站、书籍等各类媒体平台。如若本站内容侵犯了原著者的合法权益，可联系我们进行处理。
