hoby 发表于 2013-9-6 12:31 
& U8 S' |$ T! R- r3 K: X7 m; ^0 e可能我没有表达清楚,robots是阻止它们的蜘蛛来我的网站爬,但是我在其他网站做的外链它还是会去爬,就是不 ...
3 u& ]% F/ F; d: D- W& w" T! V仔细想了一下,貌似蜘蛛抓取外链的行为,我们是没办法控制的.最近的google网站管理员貌似可以对自己网站的外链做一个提交区删除垃圾外链,但是还真没办法去不让蜘蛛抓你的外链. Z" s: k% x- {) x4 t8 e
8 z) ~. z, R6 W7 I4 X2 v4 n
|