立即注册  找回密码
 立即注册
CeraNetworksBGVM服务器主机交流会员请立即修改密码Sharktech防护
查看: 241|回复: 7

限制单ip每分钟请求数,会不会影响搜索引擎收录

[复制链接]

限制单ip每分钟请求数,会不会影响搜索引擎收录

[复制链接]

20

主题

209

回帖

648

积分

高级会员

积分
648
binghe

20

主题

209

回帖

648

积分

高级会员

积分
648
2018-5-20 19:22:01 | 显示全部楼层 |阅读模式
比如我设置了一个规则,单个ip每60秒访问数超过100次,就会封禁5分钟。那么搜索引擎在爬取的过程中,会不会因为触发规则而爬取失败?
回复

使用道具 举报

4

主题

79

回帖

250

积分

中级会员

积分
250
administratorA

4

主题

79

回帖

250

积分

中级会员

积分
250
2018-5-20 19:26:45 | 显示全部楼层
什么搜索引擎60秒爬100次?
回复

使用道具 举报

20

主题

209

回帖

648

积分

高级会员

积分
648
binghe 楼主

20

主题

209

回帖

648

积分

高级会员

积分
648
2018-5-20 19:33:58 | 显示全部楼层
"

我不是很懂搜索引擎,所以来问一下,只要不会出现这种情况就好。我之前一直很信任Cloudflare,直到昨天晚上我随手对签名站来了一发CC,结果真是一打就挂,看来免费版对CC没有半点防护能力,还是在服务器做防护靠谱。
回复

使用道具 举报

11

主题

106

回帖

353

积分

中级会员

积分
353
qccj001

11

主题

106

回帖

353

积分

中级会员

积分
353
2018-5-20 19:26:00 | 显示全部楼层
小站可以这样做 大站的话现在很多地方都是共用出口 会误封
搜索引擎不是同一IP爬站,是N个IP爬 一般不会影响蜘蛛
回复

使用道具 举报

35

主题

1788

回帖

5661

积分

论坛元老

积分
5661
小夜

35

主题

1788

回帖

5661

积分

论坛元老

积分
5661
2018-5-20 19:55:06 | 显示全部楼层
蜘蛛一般不会影响,以百度为例,都是整个段来爬的。每个IP,要好久才能轮一次。
回复

使用道具 举报

328

主题

1462

回帖

6075

积分

论坛元老

积分
6075
yugan300

328

主题

1462

回帖

6075

积分

论坛元老

积分
6075
2018-5-20 19:58:25 | 显示全部楼层
不用吊搜索。淘宝就不叼搜索
回复

使用道具 举报

56

主题

459

回帖

1674

积分

金牌会员

积分
1674
hundouluo

56

主题

459

回帖

1674

积分

金牌会员

积分
1674
2018-5-20 20:04:44 | 显示全部楼层
"

那是你策略不对,CF可不背这个锅!
回复

使用道具 举报

5

主题

515

回帖

1704

积分

金牌会员

积分
1704
yangen

5

主题

515

回帖

1704

积分

金牌会员

积分
1704
2018-5-20 20:40:00 | 显示全部楼层
搜索引擎正常是没事,不会一个ip一直爬,都是非常多ip分布式的爬取
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

Archiver|小黑屋|HS2V主机综合交流论坛

GMT+8, 2025-1-1 16:47 , Processed in 0.024008 second(s), 5 queries , Gzip On, Redis On.

Powered by Discuz! X3.5

© 2001-2024 Discuz! Team.

快速回复 返回顶部 返回列表