laowen 发表于 2024-10-31 12:07:32

帖子上了权限，搜索引擎是不是就抓取不到了

如题

fux 发表于 2024-10-31 12:09:26


static/image/smiley/coolmonkey/08.gif
对的

迷茫的tom 发表于 2024-10-31 12:14:00

理论上是这样，但是实际上
这个已经被很多人说破落的loc，有很多爬虫论坛早就排着队把你的帖子爬好转载了

总是吵架的猪 发表于 2024-10-31 12:17:52

不是 有很多采集的网站采集的时候会带着cookie这样权限帖子就能看到采集了然后搜索引擎就收录了

jiao1396009596 发表于 2024-10-31 12:18:11

但是有采集站 搜索引擎照样可以爬到内容
页: [1]
查看完整版本: 帖子上了权限，搜索引擎是不是就抓取不到了