全球主机交流论坛

标题: 为何在未设置robots.txt的情况下谷歌搜不到上海人大官网任何内容但Bing正常搜到? [打印本页]

作者: chen0717    时间: 2025-5-17 19:11
标题: 为何在未设置robots.txt的情况下谷歌搜不到上海人大官网任何内容但Bing正常搜到?
搜索 site:www.shrd.gov.cn ,
Google的搜索结果为0
Bing的搜索结果包括了大部分公开内容,https://www.shrd.gov.cn 并未设置robots.txt
作者: maro666    时间: 2025-5-17 19:52
服务器屏蔽了谷歌蜘蛛抓取就行了呗
作者: chen0717    时间: 2025-5-17 19:55
maro666 发表于 2025-5-17 19:52
服务器屏蔽了谷歌蜘蛛抓取就行了呗

为什么不同时屏蔽掉bing?想不出仅仅屏蔽掉谷歌蜘蛛有啥用
作者: swds    时间: 2025-5-17 21:32
很多政府网站屏蔽境外IP。科学上网时试试看就知道了
作者: chen0717    时间: 2025-5-17 22:14
swds 发表于 2025-5-17 21:32
很多政府网站屏蔽境外IP。科学上网时试试看就知道了

上海人大网站境外可以正常访问




欢迎光临 全球主机交流论坛 (https://fd.vvwvv.eu.org/) Powered by Discuz! X3.4