使用道具 举报
RootSir 发表于 2014-4-21 10:34 inurl xxxx.html site:xx.com
Neoman 发表于 2014-4-21 17:48 换个思路,去分析日志,基本就知道了,哪些url被抓取,抓取多少次
dylan 发表于 2014-4-21 12:02 抓取所有urls 例如sb分析收录的(sb分析也不完全) 剩下没收录
lengxue888 发表于 2014-4-21 20:47 楼主是想分析竞争对手的网站吧?
本版积分规则 发表回复 回帖并转播 回帖后跳转到最后一页
floes
楼主
|Archiver|手机版|小黑屋|TGL论坛 ( 鄂ICP备20005464号-19 )|网站地图
Powered by 武汉掌媒科技有限公司 X3.4 © 2001-2021 腾讯云提供服务器支持