robots.txt对搜索引擎收录, post属于多个Categories

  [复制链接]
查看: 496   回复: 9
发表于 2013-12-27 17:42:35 | 显示全部楼层 |阅读模式

1,边学边做建站,拖的时间长,网站好多部分还没完工,如果这时被搜索引擎抓取,那肯定不好,
robots.txt设置代码禁止搜索引擎收录,待完工后再允许抓取。
我担心因为之前的禁止收录,会被搜索引擎认为不友好,完工后再允许抓取,搜索引擎却不收录了,怎么办?
ps, 有人说可以在本地PHP搭建好网站,再上传网站文件到主机空间。这样本地测试ok,可能到主机空间又会出错的。

2, 一个介绍产品post, post既属于 Categories1  又属于Categories2  ,
会不会造成搜索引擎重复收录,这样是不是对seo不好?
是不是让一个产品属于一个Categories这样好,属于多个Categories就不好?


补充内容 (2013-12-27 18:47):
如果两个Categories之间是父子层级关系,这样对seo有无影响?
发表于 2013-12-27 19:03:35 | 显示全部楼层
屏蔽Category页面就行了,对niche站来说目录页的意义不大,

评分

参与人数 1T币 +1 收起 理由
hardrock + 1

查看全部评分

回复 支持 反对

使用道具 举报

发表于 2013-12-27 19:05:18 | 显示全部楼层
1. 无所谓,如果你担心,那至少准备好一篇文章再把网站上线。
回复 支持 反对

使用道具 举报

发表于 2013-12-27 20:35:57 | 显示全部楼层
个人觉得  担心都是多余的  GG 没有这挑刺,他什么都懂。

评分

参与人数 1T币 +1 收起 理由
hardrock + 1

查看全部评分

回复 支持 反对

使用道具 举报

 楼主| 发表于 2013-12-27 20:36:15 | 显示全部楼层
1,会不会变成这样,
之前的禁止收录,会被搜索引擎认为不友好,完工后再允许抓取,搜索引擎却不收录了
回复 支持 反对

使用道具 举报

发表于 2013-12-27 22:10:37 | 显示全部楼层
1.先禁止抓取。搭建好再开放。google扫robots还是比较勤的。一周左右就有反映了
   国内小搜索引擎,反应慢,可能要1个月左右
2:无所谓

评分

参与人数 1T币 +1 收起 理由
hardrock + 1

查看全部评分

回复 支持 反对

使用道具 举报

发表于 2013-12-27 22:11:49 | 显示全部楼层
本帖最后由 Seanhere 于 2013-12-27 22:12 编辑

待想要谷歌收录时,勤快些在google webmaster里提交下不就行了。且如果是需长久动作的正规站,也不在乎谷歌反应的一点时间


评分

参与人数 1T币 +1 收起 理由
hardrock + 1

查看全部评分

回复 支持 反对

使用道具 举报

发表于 2013-12-28 09:42:07 | 显示全部楼层
用site:xxx.com -tag 试一下就知道了.不管你怎么设置 tag的 url,甚至 xxx.com/tag/ 这样的url,一样全部被排除.
对于用wp做的站,gg啥都知道. robots.txt对搜索引擎收录, post属于多个Categories,
或者用seo插件,noindex 分类和tag页面就行了.

评分

参与人数 1T币 +1 收起 理由
hardrock + 1

查看全部评分

回复 支持 反对

使用道具 举报

 楼主| 发表于 2013-12-31 00:10:41 | 显示全部楼层
举例吧,手表吧,我按功能和品牌分两类,这种手表介绍post只有一个URL,都属于这两类中,怎样有利于seo?
用yoast wordpress seo插件把地址中category去掉,这样会不会利于seo?
回复 支持 反对

使用道具 举报

发表于 2013-12-31 01:35:09 | 显示全部楼层
只要不是恶意优化,不会有任何问题,太多心了。
例如
how to install windows
既可以是guide分类,又可以是windows分类,主要起的是导航作用,跟tag是一样的。

评分

参与人数 1T币 +1 收起 理由
hardrock + 1

查看全部评分

回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则