我讨厌蜘蛛我讨厌蜘蛛侠

大胡子 · 发表于 2013-3-4 20:31:10

2.jpg (129.33 KB, 下载次数: 0)

3.jpg (175.79 KB, 下载次数: 0)

QQ截图20130304203727.jpg (88.74 KB, 下载次数: 0)

vagaa · 发表于 2013-3-4 20:31:26

为什么？

大胡子 · 发表于 2013-3-4 20:33:22

vagaa 发表于 2013-3-4 20:31
为什么？

你们是不是指定搜索引擎来爬？

Janjun · 发表于 2013-3-4 20:33:40

在robot.txt里设置屏蔽蜘蛛吧，哈哈哈，不被收录最安心。

lyue5555 · 发表于 2013-3-4 20:42:39

做什么坏事？为什么讨厌蜘蛛？

simo · 发表于 2013-3-4 20:44:00

爬蜘蛛不喜欢啊？

大胡子 · 发表于 2013-3-4 21:00:24

simo 发表于 2013-3-4 20:44
爬蜘蛛不喜欢啊？

有时候被爬很讨厌。。谷歌百度搜狗soso还有一些不知名的搜索引擎全部撞在一起爬我哪抗的住

flylight · 发表于 2013-3-4 21:03:42

抗不住蜘蛛爬？

大胡子 · 发表于 2013-3-4 21:06:17

flylight 发表于 2013-3-4 21:03
抗不住蜘蛛爬？

正常爬当然没问题百度联通IP一来封也封不掉就挂了。//

满意沟通 · 发表于 2013-3-4 22:15:43

宜搜这家不按国际规则办事搜狗这家也是

		自动登录	找回密码
密码			注册

我讨厌蜘蛛 我讨厌蜘蛛侠