如何更多的搜刮 amazon的产品页url

xdyputixin · 发表于 2012-2-4 11:00:06

如题，我想尽可能的搜刮amazon的产品页url,请问有什么好办法么？

cicisky · 发表于 2012-2-4 12:19:48

搜刮页面是为了作什么，不是直接拿插件采集就是了，为了获取地址吗？

挨个搞 · 发表于 2012-2-4 12:37:15

太多了
据我搜刮amazon大小类目就有近40w
全部类目url保存成txt，就有40多m

如果要采集产品url，也是一个浩大的工程，估计wordpress的数据库是撑不住的。

xdyputixin · 发表于 2012-2-4 13:05:26

不是的我是想按条件找出pr0的产品页这样的产品我觉得竞争能低一些

xdyputixin · 发表于 2012-2-4 13:05:50

回复 3# 挨个搞

能问下你用什么采集的么？

挨个搞 · 发表于 2012-2-4 15:14:33

回复 5# xdyputixin

自己写的软件

lovekisser · 发表于 2012-2-4 21:44:45

搜刮amazon大小类目

,求此技术

firearmer · 发表于 2012-2-5 12:19:02

找到Amazon链接的固定特点，然后Google里搜啊，很简单的

wannabeme · 发表于 2012-2-5 16:16:06

试下 API

hlzone · 发表于 2012-2-8 17:39:26

猛一点的需要定制

kevin · 发表于 2012-4-2 15:31:06

通过获取amazon.com站中的产品URL再获取产品相关相信的念头还是打销吧，可查的amazon.com产品URL有两亿三千万多，你怎么存储呢。楼主要是想知道，M我，告诉你怎么弄，工程相当的浩大。

yoo · 发表于 2012-4-2 16:24:56

只要有产品的ID，就可以通过Amazon提供的Product Advertising API来获得他提供的产品数据，其中就包含了产品的DetailPageURL，这个URL就是你需要的产品页URL。
可以用PHP或者其他程序来获得Amazon提供的XML数据，再分析一下就能得到这个URL。通过这个方法，在你的自己的mysql数据库里保存几千万个产品是没有问题的。

sd7379 · 发表于 2012-4-10 16:36:41

强悍，学习下。嘻嘻