在谷歌的 Bolgger 上写日记,不想被其他人看见,就设置了“不允许搜索引擎搜索您的博客”选项,还设置了只本账户登录查看内容。这样的话还会被其他的引擎比如百度之类的搜索到吗?
1
EasonC 2020-11-13 17:46:00 +08:00 via iPhone
当然不会啦
|
2
tLbf2p3UC4BM3H1N 2020-11-14 02:15:39 +08:00
不要指望搜索引擎的蜘蛛会自觉的根据你的设定不爬取内容,自己在 NGINX 里面加个 server,蜘蛛请求返回 403 错误才靠谱。
|