|
我今天早上发文章的时候就发现了。只要我发文章 蜘蛛就爬行feed和首页。但是有时候之后就没有爬行了,等待一段时间才会有。
今晚的记录
2014-01-08 19:32:22 66.249.66.90 / Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)2014-01-08 19:31:59 66.249.66.90 /feed/ Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)2014-01-08 18:27:10 66.249.66.90 / Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)2014-01-08 18:26:09 66.249.66.90 /feed/ Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)2014-01-08 17:51:40 66.249.66.90 / Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)2014-01-08 17:50:32 66.249.66.90 /feed/ Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)
为什么会导致这种情况?
|
|