有什么办法不让网站被各大搜索引擎收录

Polymer_dg · 2017-8-19 19:14:58

除了去暗网

余晖脉脉 · 2017-8-19 19:15:35

本帖最后由余晖脉脉于 2017-8-19 19:27 编辑

设置Robots.txt，但会有不听话的乱收录

萌䒤萌 · 2017-8-19 19:19:12

全站必须登录才能访问就是

leaveoff · 2017-8-19 19:19:29

设置Robot.txt是可以的。。。

余晖脉脉 · 2017-8-19 19:19:42

"

还是会收录登陆页面

萌䒤萌 · 2017-8-19 19:19:00

余晖脉脉发表于 2017-8-19 19:19

还是会收录登陆页面

sky170 · 2017-8-19 19:20:55

robost.txt?

sky170 · 2017-8-19 19:19:00

我记得meta头部信息也可以设置好像

hdown · 2017-8-19 19:21:30

robost.txt加上nginx判断一下蜘蛛的ua

dvbhack · 2017-8-19 19:21:50

就是robots.txt，“各大搜索引擎”还是能遵守的，不遵守的都是些不知道什么玩意儿的搜索引擎

		立即注册	自动登录	找回密码
密码			立即注册

有什么办法 不让网站 被各大搜索引擎收录