谷歌蜘蛛把服务器抓爆了，能不能设抓取频率-wfc

做了个垃圾站，本来怼百度的，结果百度不收录，谷歌到爱上这个站了，cpu吃不消了啊，还是绿云双核amd的，一直占满绿云没事吧，谷歌search也没找到设置的地方，收录几百万一看流量十个。。

热议
推荐楼 小白鸡 昨天17:03

这个问题挺纠结的
拒了吧，又怕不来了
不拒吧，又受不了了

3楼 wfc 昨天17:04

这个问题挺纠结的
拒了吧，又怕不来了
不拒吧，又受不了了

对啊，也想万一时间长了带来流量了呢

4楼 总是吵架的猪 昨天17:05

谷歌网站后台不能调节吗
我记得百度的站长后台可以调节

5楼 苗儿旺 昨天17:29

谷歌网站后台不能调节吗
我记得百度的站长后台可以调节

哪里能调节？我想拉满

6楼 破影成双 昨天17:32

哪里能调节？我想拉满

7楼 学到了么 昨天17:42

这点蜘蛛扛不住 还做啥站

8楼 燕十三丶 昨天17:43

蜘蛛都扛不住升级配置吧
可以看看签名

9楼 gch3399 昨天17:45

做的啥站啊

10楼 tinysiri 昨天17:46

赶紧加钱升级配置啊

12楼 yangken 昨天22:45

蜘蛛频率可以自己写代码或者nginx实现，超过频率500错误码

13楼 mjjok 昨天23:44

这个问题挺纠结的
拒了吧，又怕不来了
不拒吧，又受不了了

不用纠结。

robots中，写下限制谷歌蜘蛛爬行速度即可。

比如延迟几秒爬行一次。

谷歌会遵守的。以后谷歌爬行就不会把你服务器爬爆了。

这样就没有又怕.....，又受.... 的问题出现了。

14楼 StarkSands 昨天23:57

楼主现在心里状态：好想谈恋爱，但是又怕被驲

若你无力推倒这堵墙
那也请别加它一块砖。

15楼 wfc 3小时前

楼主现在心里状态：好想谈恋爱，但是又怕被驲

钱给的太少了！

16楼 DogeLee2 1小时前

这边建议直接上杜甫了

申明：本文内容由网友收集分享，仅供学习参考使用。如文中内容侵犯到您的利益，请在文章下方留言，本站会第一时间进行处理。