排名全掉了，原因是谷歌抓取错误

xiaoyanmi · 发表于 2013-10-10 09:30:09

本帖最后由 xiaoyanmi 于 2013-10-10 09:32 编辑

最近收到谷歌邮件，
说
Googlebot can't access your siteOver the last 24 hours, Googlebot encountered 25 errors while attempting to access your robots.txt. To ensure that we didn't crawl any pages listed in that file, we postponed our crawl. Your site's overall robots.txt error rate is 86.2%.

我问了我的seo 老师，他说我该换个大点的空间了，
我问我的空间服务商，他说我空间一切正常，

可是，现在排名全掉了，

兄弟们能帮我看下是什么原因吗，焦头烂额中。。。

xiaoyanmi · 发表于 2013-10-10 09:38:51

万网服务商说他们的空间是正常的。但google 不能抓取 robot.txt, 到底是什么原因呢

大家的宝贵信息和回答，我一定要给你加分

frozeng · 发表于 2013-10-10 09:46:57

难道是伟大的长城问题?

浮沉 · 发表于 2013-10-10 10:40:19

谷歌这封邮件下面是不是有recommended action，就是建议你怎么操作解决这个问题的，你收到的邮件有这个没？

自由之路 · 发表于 2013-10-10 12:04:05

robots.txt 吧，不懂，你自己能不能访问到哦

搞搞阵 · 发表于 2013-10-10 12:08:15

你在用万网？找抽吧？

qqqwwqqq · 发表于 2013-10-10 12:11:26

搞搞阵发表于 2013-10-10 12:08
你在用万网？找抽吧？

是啊，LS找到了这段话的重点。LZ难了，陷在害人坑里，况且做英文站为什么要用这空间？

ningye · 发表于 2013-10-10 12:29:01

楼主损失大了期待早解决

月光飞燕 · 发表于 2013-10-10 14:56:28

国内空间有时候会主动屏蔽国外的，他们认为用他们空间主要是做中文站呢

ddkbyo · 发表于 2013-10-10 15:14:13

做英文站的话最好还是国外空间，便宜限制少~~

xiaoyanmi · 发表于 2013-10-10 15:40:47

明白了，用万网四年了，以前都挺好的，太悲催了

xiaoyanmi · 发表于 2013-10-10 15:48:37

可怜，今天只有四分可以评，否则准备每人给三分。

我去看看怎么解决了，万网才刚续费，气死我了。

若鱼 · 发表于 2013-10-10 16:19:38

很明显，googlebot访问你robots.txt出现了问题，你怪空间服务商。。。

你自己看图啊，服务器连接压根就没有报错。

你敢不敢把你robots.txt的内容贴出来看看

xiaoyanmi · 发表于 2013-10-10 16:27:52

robots.txt 这个怎么才可以看到呢，或找到呢，

我该去哪里找呢，

我就一电脑白痴。。。不怕你笑话

xiaoyanmi · 发表于 2013-10-10 16:42:11

这个为什么有的天数，抓的页面多，有的抓的少，等待大师解惑。。。

wolfstyle · 发表于 2013-10-10 16:59:07

模拟蜘蛛抓取试试不就知道了，现在不是都是用国外的空间吗。你怎么用国内的。谷歌国内老是打不开

xiaoyanmi · 发表于 2013-10-10 21:14:09

今天下午，我让程序员帮我重新弄了下，我也不知道怎么弄的，

总之，robots.txt 可以访问了。

刚看了下，

排名又有了，不过都掉了，比以前低了5，6名甚至更多，不等。

猜想是受了企鹅2.1 影响，或者是受了最近gg 爬不到的影响。

另外，发现不少facebook 或者 linkedin 的页面排名不错，

这个高手可以分析下吗

mir · 发表于 2013-10-11 23:17:13

做这个怎么可能还用国内的空间.....

ryan2101 · 发表于 2013-10-12 14:17:14

长城是起双向屏蔽作用的，做国外最好把网站放到国外

xiaoyanmi · 发表于 2013-10-12 15:58:26

ryan2101 发表于 2013-10-12 14:17
长城是起双向屏蔽作用的，做国外最好把网站放到国外

兄弟，只剩一分了，本来想给你评三分的，因为我的最高权限是一次评三分。。。

qyl83 · 发表于 2013-10-12 16:46:40

空间问题，一看就是阻止了蜘蛛的抓取。。。做英文站，为何用国内空间。你是wp吗，直接插件sitemap，robot文件，网上很多例子。

eingbol · 发表于 2013-10-12 17:06:12

万网貌似很贵吧，听说一般只有企业站用用，不差钱，自己个人做站还是考虑其他便宜量又足，特别是国外的，一定要用国外空间或者vps了。。。

jzdtx1 · 发表于 2013-10-12 18:04:37

为什么不选择一个国外空间？

zhaoniupai · 发表于 2013-10-15 17:20:52

几年前也是用的万网，后来换其它空间才知道那几乎是最贵的空间商，贵但未必有多好。

况且做英文站，还是赶紧转到国外吧

xiaoyanmi · 发表于 2013-10-15 19:19:13

zhaoniupai 发表于 2013-10-15 17:20
几年前也是用的万网，后来换其它空间才知道那几乎是最贵的空间商，贵但未必有多好。

况且做英文站，还是赶 ...

国外什么空间比较稳定，并且售后服务比较好呢。

兄弟能给推荐个吗？

zhaoniupai · 发表于 2013-10-15 19:50:30

本帖最后由 zhaoniupai 于 2013-10-15 19:54 编辑

xiaoyanmi 发表于 2013-10-15 19:19
国外什么空间比较稳定，并且售后服务比较好呢。

兄弟能给推荐个吗？

国外主机我也不太了解哈，你可以找坛里的妃子笑MM咨询。
目前在测试狗爹的Economy，没有在线客服（Live Chat）主要是便宜，。

据说都要经历这么一个过程，就是从GoDaddy到HostGator，再到BlueHost。以下是我之前找主机时总结的三篇博客：
BlueHost　www.zhaoniupai.com/archives/313.html
HostGator　www.zhaoniupai.com/archives/314.html
GoDaddy　www.zhaoniupai.com/archives/315.html

xiaoyanmi · 发表于 2013-10-17 16:40:42

楼上的兄弟，太感谢了，准备好好研读下你的博客。

排名全掉了，原因是谷歌抓取错误

本帖子中包含更多资源

评分

评分

评分

评分

本帖子中包含更多资源

评分

评分

评分