如何更多的搜刮 amazon的产品页url

xdyputixin 发表于 2012-2-4 11:00:06

如题，我想尽可能的搜刮amazon的产品页url,请问有什么好办法么？

cicisky 发表于 2012-2-4 12:19:48

搜刮页面是为了作什么，不是直接拿插件采集就是了，为了获取地址吗？

挨个搞 发表于 2012-2-4 12:37:15

太多了
据我搜刮amazon大小类目就有近40w
全部类目url保存成txt，就有40多m

如果要采集产品url，也是一个浩大的工程，估计wordpress的数据库是撑不住的。

xdyputixin 发表于 2012-2-4 13:05:26

不是的我是想按条件找出pr0的产品页这样的产品我觉得竞争能低一些

xdyputixin 发表于 2012-2-4 13:05:50

回复 3# 挨个搞

能问下你用什么采集的么？

挨个搞 发表于 2012-2-4 15:14:33

回复 5# xdyputixin

自己写的软件

lovekisser 发表于 2012-2-4 21:44:45

搜刮amazon大小类目:hug:,求此技术

firearmer 发表于 2012-2-5 12:19:02

找到Amazon链接的固定特点，然后Google里搜啊，很简单的

wannabeme 发表于 2012-2-5 16:16:06

试下 API

hlzone 发表于 2012-2-8 17:39:26

猛一点的需要定制

kevin 发表于 2012-4-2 15:31:06

通过获取amazon.com站中的产品URL再获取产品相关相信的念头还是打销吧，可查的amazon.com产品URL有两亿三千万多，你怎么存储呢。楼主要是想知道，M我，告诉你怎么弄，工程相当的浩大。

yoo 发表于 2012-4-2 16:24:56

只要有产品的ID，就可以通过Amazon提供的Product Advertising API来获得他提供的产品数据，其中就包含了产品的DetailPageURL，这个URL就是你需要的产品页URL。
可以用PHP或者其他程序来获得Amazon提供的XML数据，再分析一下就能得到这个URL。通过这个方法，在你的自己的mysql数据库里保存几千万个产品是没有问题的。

sd7379 发表于 2012-4-10 16:36:41

强悍，学习下。嘻嘻

页: [1]

TGL论坛's Archiver

如何更多的搜刮 amazon的产品页url