查看: 6707|回复: 25

你会在robots.txt禁止360搜索的蜘蛛吗

电梯直达

1^#

发表于 2012-9-1 12:33:05 | 显示全部楼层回帖奖励

本帖最后由 dstwhk 于 2012-9-1 14:23 编辑

先不讨论搜索引擎的蜘蛛是否遵守robots.txt规则

参与人数 1	威望 +1	收起理由
zt1993	+ 1	360绝对不鸟http://nhce.njut.edu.cn/robot.

分享到: QQ好友和群 QQ空间

GMT+8, 2024-5-14 06:23 , Processed in 0.069148 second(s), 18 queries , Gzip On, MemCache On.

Powered by Discuz! X3.4

		自动登录	找回密码
密码			注册