MJJ论坛

 找回密码
 注册

QQ登录

只需一步,快速开始

12
返回列表 发新帖
楼主: cgsyzdd

找到谷歌源头了

[复制链接]
发表于 2011-5-3 16:03:51 | 显示全部楼层
楼主 厉害
 楼主| 发表于 2011-5-3 23:27:47 | 显示全部楼层
原帖由 aru 于 2011-5-3 14:03 发表
直接用robots.txt 不就完了么
封IP是下策

如果是用的多镜像呢? 写到 robots 直接网站也挂了
 楼主| 发表于 2011-5-3 23:28:13 | 显示全部楼层
原帖由 yim 于 2011-5-3 14:01 发表
哥被yahoo的蜘蛛爬死了,屏蔽之后,那速度哗啦啦的

yahoo不来我这。。。。
 楼主| 发表于 2011-5-3 23:29:06 | 显示全部楼层
原帖由 wdlth 于 2011-5-3 08:28 发表
谷歌IP一堆,会换的。

这是谷歌在加利福尼亚州的全部ipv4地址了。
您需要登录后才可以回帖 登录 | 注册

本版积分规则

Archiver|手机版|小黑屋|MJJ论坛

Copyright MJJ论坛 © 2022 All Rights Reserved.

快速回复 返回顶部 返回列表