如何更多的搜刮 amazon的产品页url

  [复制链接]
查看: 1680   回复: 12
发表于 2012-2-4 11:00:06 | 显示全部楼层 |阅读模式
如题,我想尽可能的搜刮amazon的产品页url,请问有什么好办法么?
发表于 2012-2-4 12:19:48 | 显示全部楼层
搜刮页面是为了作什么,不是直接拿插件采集就是了,为了获取地址吗?
回复 支持 反对

使用道具 举报

发表于 2012-2-4 12:37:15 | 显示全部楼层
太多了
据我搜刮amazon大小类目就有近40w
全部类目url保存成txt,就有40多m

如果要采集产品url,也是一个浩大的工程,估计wordpress的数据库是撑不住的。
回复 支持 反对

使用道具 举报

 楼主| 发表于 2012-2-4 13:05:26 | 显示全部楼层
不是的  我是想按条件找出pr0的产品页  这样的产品我觉得竞争能低一些
回复 支持 反对

使用道具 举报

 楼主| 发表于 2012-2-4 13:05:50 | 显示全部楼层
回复 3# 挨个搞

能问下你用什么采集的么?
回复 支持 反对

使用道具 举报

发表于 2012-2-4 15:14:33 | 显示全部楼层
回复 5# xdyputixin


    自己写的软件
回复 支持 反对

使用道具 举报

发表于 2012-2-4 21:44:45 | 显示全部楼层
搜刮amazon大小类目如何更多的搜刮 amazon的产品页url,求此技术
回复 支持 反对

使用道具 举报

发表于 2012-2-5 12:19:02 | 显示全部楼层
找到Amazon链接的固定特点,然后Google里搜啊,很简单的
回复 支持 反对

使用道具 举报

发表于 2012-2-5 16:16:06 | 显示全部楼层
试下 API
回复 支持 反对

使用道具 举报

发表于 2012-2-8 17:39:26 | 显示全部楼层
猛一点的需要定制
回复 支持 反对

使用道具 举报

发表于 2012-4-2 15:31:06 | 显示全部楼层
通过获取amazon.com站中的产品URL再获取产品相关相信的念头还是打销吧,可查的amazon.com产品URL有两亿三千万多,你怎么存储呢。楼主要是想知道,M我,告诉你怎么弄,工程相当的浩大。
回复 支持 反对

使用道具 举报

发表于 2012-4-2 16:24:56 | 显示全部楼层
只要有产品的ID,就可以通过Amazon提供的Product Advertising API来获得他提供的产品数据,其中就包含了产品的DetailPageURL,这个URL就是你需要的产品页URL。
可以用PHP或者其他程序来获得Amazon提供的XML数据,再分析一下就能得到这个URL。通过这个方法,在你的自己的mysql数据库里保存几千万个产品是没有问题的。
回复 支持 反对

使用道具 举报

发表于 2012-4-10 16:36:41 | 显示全部楼层
强悍,学习下。嘻嘻
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则