(免费)WordPressRSS采集助手+月光任意RSS采集插件【已作废】

月光飞燕 · 发表于 2008-10-29 11:29:53

最近研究了下WordPress的RSS采集，但是我几乎看了所有的插件，都有各种各样的问题。

下面我把我研究的几个WP的RSS采集插件简述一下：

jay_smart_rss
http://www.jaylee.cn/jay_smart_rss/
这个作者2006年就不更新了，只能用于WP2.2以下的版本，当时还是很不错的，可惜新版的WP用不起了。我曾试图修改这个插件，但发现他写的太乱了，改的话几乎就是100%，还有他那个rss解析部分写的来我都看不懂。

FwArtsAutoIn [风度自动文章采集发布插件]
http://www.flywud.com/wp-content/fwautoinhelp/
这个使用教程很详细，而且我发现他还比较新，几个月前的东西。但是看他教程的常见问题，就知道要是虚拟主机，各种虚拟主机给PHP开的权限和插件不一样，只有配置较好的，才能用的顺畅。我下载试了一下，居然采集了没反应，好像对windows主机的php主机环境没反应，懒的去研究代码了，而且我想到php的采集能力还是比较弱的。

SMART_RSS
这个插件是老外的，我都没有下到。听说很多虚拟主机不兼容，同样是PHP环境要配置的相当好才行。

火车头采集
好像有wordpress的采集模块，但是我不会用火车头，也不知道采集RSS难不难。但我想新手用起来肯定不是那么容易的。

写个软件版的‘WordPressRSS采集助手’+PHP版的采集插件
功能比较简单，远比不上火车头，但是专一，且使用简单，就是采集各种RSS到WordPress
最重要是新手用起来简单无比

此软件和插件共花时间2个晚上（我晚上才工作）

介绍下它的功能：

WordPressRSS采集助手，负责采集RSS工作，它比PHP采集要快和强，使用多线程，不超过5个
WordPressRSS采集助手将采集到的数据通过桥连接的方式发送到PHP的插件页面，由插件负责保存到数据库的工作。
数据直接入库，中间不经过任何wordpress的自带环节，就是说只要有数据库表，没安装wordpress都可以采集入库。
软件已自带文章去重复功能，重复的文章是会自己避开的。

介绍它的使用方法：

添加一个RSS链接就不说了，关键是RSS的节点配置

比如一个RSS文本如下

- <rss version="2.0">
- <channel>
- <item>
<title>外形很唬人 "啤酒瓶"造型电话现身</title>
<span>http://news.dayoo.com/photo/200810/15/54034_4282360.htm</span>
<guid>http://news.dayoo.com/photo/200810/15/54034_4282360.htm</guid>
<pubDate>Wed, 15 Oct 2008 11:00:05 GMT</pubDate>
- <description>
- <![CDATA[ 内容]]>
</description>
</item>
</channel>
</rss>

复制代码

标题路径：就是wordpress发贴时的标题，你想想，你是不是应该把上面RSS中，路径 rss/channel/item/title 作为标题路径呢。
文章内容路径：就是wordpress发贴时的标题对应的内容，路径应该是 rss/channel/item/description

这里不要想复杂了，其实异常的简单，就是标签的绝对路径，只要你找准了，就能正确解析RSS。

这里可比火车头的采集规则简单得多。

其他也没有好说的了，要注意的是，采集的时候，一个链接采集了一次要隔一段时间再去采集，太频繁了会被封一会。

说下为什么没有做全自动的每天自动采集：
1.因为我本人不提倡和不喜欢采集
2.RSS更新很慢，每天手工点一下，这样也有助于你收录，因为搜索引擎不喜欢大量的搜录，如果你每天或隔几天才多出少许的新文章，这样的站搜索引擎才不会认为你再采集。
3.这个软件第一版我看下反响，再考虑以后的版本功能，要是反应不好我就不做了。
4.假如有超强的全功能版本，我会收取少量费用，第一版就免费了，功能还是蛮不错的。

软件的安装：

1.上传月光RSS采集插件 hyrinlight_gather_rss.php 到你的wordpress插件目录

2.打开助手，添加插件准确位置，保存。

3.添加新的RSS链接，并设置采集节点。

4.开始采集并检查结果。

最后附截图

tangadmin · 发表于 2008-10-29 16:33:24

可以回帖不

maybe · 发表于 2008-10-29 17:27:51

先占个位子

445566 · 发表于 2008-10-29 17:41:58

嗯？咦？哦？

月光飞燕 · 发表于 2008-10-29 19:50:42

swqlgcj wrote on 2008-10-29 19:46 :
月光强,非常好！视频下了还没看，先买再看，不懂再问

这是风儿

此情可待成追忆 · 发表于 2008-10-29 21:22:10

下了视频，怎么打不开啊，我用暴风影音？

月光飞燕 · 发表于 2008-10-29 21:25:55

swf格式，是flash，暴风可以打开，要不是试试其他播放器

tnt4 · 发表于 2008-10-30 03:24:02

只能先流口水了

anon · 发表于 2008-10-30 09:03:16

强烈支持一把~~~~~

问题：录入数据库的时候怎么没有分类？（看截图的，还没有试用）

PS：扩散太大不大好，怕影响SE对WP的好感

[ Last edited by anon on 2008-10-30 09:06 ]

lieren · 发表于 2008-10-30 10:35:19

二话不说直接买下，研究去了

Yan · 发表于 2008-10-30 11:06:41

看看俺的BB 不够.....
努力一下!!!

onlybo · 发表于 2008-10-30 14:08:19

好东西.
回忆月光再弄个JOOMLA的

月光飞燕 · 发表于 2008-10-30 17:49:04

anon wrote on 2008-10-30 09:03 :
强烈支持一把~~~~~

问题：录入数据库的时候怎么没有分类？（看截图的，还没有试用）

PS：扩散太大不大好，怕影响SE对WP的好感

[ Last edited by anon on 2008-10-30 09:06 ]

第一版试用版，我花的时间较短，如果我觉得在一段时期内反响不错，第二版我会功能加强

分类的功能，又会多写一个数据表，稍微难一点

anon · 发表于 2008-10-30 17:50:11

需要配套软件，不好用

月光飞燕 · 发表于 2008-10-30 17:50:55

onlybo wrote on 2008-10-30 14:08 :
好东西.
回忆月光再弄个JOOMLA的

wordpress已经出来了，JOOMLA已经很容易了，先需要看一段时间反响，市场中有一部分能接受也有一部分人不能接受

月光飞燕 · 发表于 2008-10-30 17:51:41

anon wrote on 2008-10-30 17:50 :
需要配套软件，不好用

不配套的也没有一个好用

你并没有仔细看我的解说，PHP并不万能，并不能解析更多的RSS类型代码，但是客户端软件就不一样了，解析的类型更多，速度更快

要是遇到了一个站点，恰巧PHP插件不能解析，郁闷吧

maybe · 发表于 2008-10-30 18:10:19

呵呵，楼主给出宣传文本吧，
我很吝啬的，舍不得花钱买，
就让我为论坛宣传做一点贡献

月光飞燕 · 发表于 2008-10-30 23:21:42

宣传文本已奉上，需要的就下，看看视频，你就能知道他的价值
国外有多少RSS占且不说，博客和好点的网站都有，随时能更新内容，然后多找点wp免费模板，可以造很多个站，可以申请很多广告

maybe · 发表于 2008-10-31 11:46:02

已经宣传，以下是链接，楼主检查：
http://wordpress.org.cn/thread-23413-1-1.html
http://wfans.org/forums/viewthre ... &extra=page%3D1
http://www.u8881.com/discuz/view ... &extra=page%3D1
http://bbs.chinahtml.com/showthread.php?p=550997#post550997

另外，可能是咱论坛的原因吧，楼主给的那个图片链接的图片是不显示的，我只好，把图片上传到了所宣传的网站上

simonf · 发表于 2008-10-31 12:12:47

不得不支持一下

baiwanwang · 发表于 2008-10-31 12:52:41

在cnwebmaster上看到贴子,呵
楼主好强大啊!

月光飞燕 · 发表于 2008-10-31 13:02:47

maybe，我看了你宣传的论坛，非常好
但是我有了新的想法，既然这样宣传不开，那么我就来一招全开放，直到泛滥为止

我讨厌那些自作聪明，不肯接受新事物的人，这只能说明他们嫉妒

wordpress缺的就是rss插件，这里正好弥补空白
wordpress.com.org却不肯接受
还有采集跟seo完全是2回事，那个白痴

月光飞燕 · 发表于 2008-10-31 13:05:38

硬的不行就来软的，我不信宣传不开

月光飞燕 · 发表于 2008-10-31 13:07:37

maybe，加100威望以示感谢

其他人尽情的下，反响好我会加强新功能

月光飞燕 · 发表于 2008-10-31 13:16:12

火车头能接受这个不能接受，真是想不通

lieren · 发表于 2008-10-31 13:35:59

俺都买了，你又免费了

，不过确是不错

月光飞燕 · 发表于 2008-10-31 13:41:57

lieren wrote on 2008-10-31 13:35 :
俺都买了，你又免费了，不过确是不错

看你币有点少，补你150

maybe · 发表于 2008-10-31 13:50:44

wordpress.com.org直接被禁止访问，
cnwebmasters刚刚看到惰惰明明给这个帖子加了4分的，可是刷了一下就找不到了，估计被哪个版主正法了
u8881应该安全，那里的环境比较宽松。

难道真是AD的口气重了点

Yan · 发表于 2008-10-31 16:46:20

额.....
完全免费啦??
下了! 强烈支持!!!!!

baiwanwang · 发表于 2008-10-31 16:52:09

下载了，感谢月光啊！！

yzwwm88 · 发表于 2008-10-31 16:55:20

下了看看虽然不懂慢慢研究吧

Yan · 发表于 2008-10-31 17:09:06

过段时间用一下

确实是好东西!

大米饭 · 发表于 2008-10-31 18:11:09

好东西不会用

zws1981 · 发表于 2008-10-31 18:35:57

好东西谢谢了

123jj · 发表于 2008-10-31 19:00:22

楼主很强大，我们很喜欢！

此情可待成追忆 · 发表于 2008-10-31 21:19:26

可不可以加个这样的功能，rss更新自动留言功能，比如我订阅了你的rss博客，今天你的博客发更新了一篇文章，那我肯定是第一时间知道这个信息，因为订阅了你的博客，所以第一时间我在你的博客里留言，这样我觉得比那些博客群发软件要好的多，
首先内容的相关性，当然还有一些其它的好处，对于流量的增加很重要的，因为是沙发啊，

haichao · 发表于 2008-10-31 21:59:03

学习了
下一个研究一下

遗忘未来 · 发表于 2008-10-31 22:00:57

月光姐姐

wendong · 发表于 2008-10-31 22:43:03

月光越来越强了！
顶一下！！

woshigaozhen · 发表于 2008-10-31 23:54:59

绝对是好东西，谢谢楼主分享了！

此情可待成追忆 · 发表于 2008-11-1 01:21:16

测试中

月光飞燕 · 发表于 2008-11-1 03:48:05

此情可待成追忆 wrote on 2008-10-31 21:19 :
可不可以加个这样的功能，rss更新自动留言功能，比如我订阅了你的rss博客，今天你的博客发更新了一篇文章，那我肯定是第一时间知道这个信息，因为订阅了你的博客，所以第一时间我在你的博客里留言，这样我觉得比那些 ...

你是说让软件自动去对方博客相关文章发表回复？这就相当于去填表，但是千变万化的填表标签可怎么应付了，你想过没有

你知道roboform，每填一个表都要先保存表单的，而每个网站的表单随着模板而千变万化

要是软件能直接连接对方数据库操纵那多好，可惜没有那个权限了

如果还有比填表的方式更好的办法你倒可以说说

lljglh · 发表于 2008-11-1 08:34:42

期待老大的joomla采集插件

此情可待成追忆 · 发表于 2008-11-1 09:29:48

软件测试了，不错，不过，从你的视频上看，采集完的文章应该是自动发布，，自动在管理---文章目录下的，但是不知为什么，我采集两次都不支持自动发布，插件也激活了，
还有，有些rss地址无法获得源文件比如
www.qlseo.cn/rss.xml,
ttp://feed.feedsky.com/sofish
可能是不是php源文件的原因吧

月光飞燕 · 发表于 2008-11-1 09:59:48

你好，确实是支持自动发布的，我不知道你的程序具体是怎么回事，没有看过后台和数据库确实不知道是怎么回事

再回答你下面2个问题
http://www.qlseo.cn/rss.xml
这个页面，是可以获取源文件的，你在浏览器查看->源文件,或鼠标右键查看->源文件，就可以得到xml文档代码

http://feed.feedsky.com/sofish
道理同上

你看不到源文件是因为这是一种障眼法，他给xml加了CSS样式等，这样XML就变成了另外一个样子了
为什么我们说未来会淘汰html而被xml取代，未来的xml就是那个样子

月光飞燕 · 发表于 2008-11-1 10:03:25

第一个问题，我建议你换一个版本的wordpress再试试，或者把你的wp程序打包发上来

li031587 · 发表于 2008-11-1 11:45:02

采集到的好像都是摘要，还有图片好像也采集不了

月光飞燕 · 发表于 2008-11-1 11:59:54

li031587 wrote on 2008-11-1 11:45 :
采集到的好像都是摘要，还有图片好像也采集不了

如果RSS里面只有摘要而不是全文输出，就只能采集到摘要

如果RSS里面有图片链接，也同样能采集到图片，一切都是由RSS来定的

软件不可能采集到RSS里面没有的东西

此情可待成追忆 · 发表于 2008-11-1 13:45:13

测试成功，非常感谢，

lieren · 发表于 2008-11-3 08:34:13

需要选择好的rss链接内容，非常的实用，而且上手简单，估计英文的不会出这种问题。

lieren · 发表于 2008-11-3 08:35:55

回忆月光 wrote on 2008-10-31 13:41 :

看你币有点少，补你150

谢谢啦，lz真提供了一个好东西啊，太好了，非常感谢。

poeeop · 发表于 2008-11-3 09:12:09

看看。。。。。。。。。。。。。。。。。。。。。

lencho · 发表于 2008-11-3 14:02:55

太捧了~~论坛有你更精彩~

此情可待成追忆 · 发表于 2008-11-3 21:42:09

如何才能采集到rss输出中的某一分类文章或者某一篇文章？

月光飞燕 · 发表于 2008-11-3 21:51:49

此情可待成追忆 wrote on 2008-11-3 21:42 :
如何才能采集到rss输出中的某一分类文章或者某一篇文章？

现在的RSS都是把所有的文章集合输出，有些rss自己并没有分类的，这样的rss也不可能单独去采集一个分类；

另外有一种rss，自己有分类，比如<category>GOOGLE专版</category> ，这样的rss应该能理顺分类的；

不过目前还没这个功能，下版我会考虑一下

qqqwwqqq · 发表于 2008-11-5 03:12:28

明明是发展趋向嘛，有阻力才有动力，月光努力呀。等你下个版本

现在提供全文RSS的比例小吧？

月光飞燕 · 发表于 2008-11-5 14:04:19

qqqwwqqq wrote on 2008-11-5 03:12 :
现在提供全文RSS的比例小吧？

仔细找还是有不少的

lieren · 发表于 2008-11-5 23:01:28

感觉国内的比较少，国外的还可以

tintin · 发表于 2008-11-8 06:20:29

我以前用的是smart rss. 沒出國啥問題。到現在那個站也更新著

aerbeisi · 发表于 2008-11-8 12:52:51

非常强大，顶一个！！

baiwanwang · 发表于 2008-11-9 11:01:00

原来的丢失了，再重新下提示我没有论坛币了

月光飞燕 · 发表于 2008-11-9 11:05:47

baiwanwang wrote on 2008-11-9 11:01 :
原来的丢失了，再重新下提示我没有论坛币了

免费的不要论坛币，可能骄阳设置下载扣币

williamss · 发表于 2008-11-10 17:59:31

只有一句话，支持一下。

lzmhit · 发表于 2008-11-16 13:07:15

非常感谢楼主的分享精神

龟仙人 · 发表于 2008-11-16 19:12:45

多谢楼主,已经下载了~

sorcerer · 发表于 2008-11-19 20:47:57

月光发布的都是精品

软件的好与坏，在于使用者How To发挥他的最大作用。

支持月光

CHOP · 发表于 2008-11-19 21:07:02

怎么下载呢？

shoott123 · 发表于 2008-11-20 00:56:09

哇色，好强哦，我来看看

shoott123 · 发表于 2008-11-20 00:58:39

怎么下载啊，有限制啊

shoott123 · 发表于 2008-11-20 01:04:33

宣传就加分吗，那我去宣传哦

月光飞燕 · 发表于 2008-11-20 12:08:47

免费的，但你一点论坛币和威望都没有

月光飞燕 · 发表于 2008-11-20 12:09:27

论坛设置了任意下载都会扣除1论坛币

caryfx · 发表于 2008-11-21 03:57:23

老大,看了一下视频,感觉非常not bad,要是RSS源里只有摘要怎么办啊?

月光飞燕 · 发表于 2008-11-21 13:37:13

caryfx wrote on 2008-11-21 03:57 :
老大,看了一下视频,感觉非常not bad,要是RSS源里只有摘要怎么办啊?

这个是RSS作者的行为决定的，只有摘要的话只能采集到摘要，别无他法，你可以去寻找全文输出的rss

wyh4444 · 发表于 2008-11-21 16:00:43

很好很强大！！~~~

sanwang · 发表于 2008-11-22 15:55:27

下载了。多谢。；。

Birch · 发表于 2008-11-25 20:26:39

才发现有这样的好东西~
谢谢月光老大提供~

chungwoo · 发表于 2008-11-26 00:30:27

不行啊.发布不了
采集开始～～
开始解析0号链接
解析完毕，准备将数据保存到wordpress！
文章女朋友今天发给我看的已保存到数据库
文章以前一个虚拟主机用户添加的的shell 已保存到数据库
文章 javascript压缩和gzip压缩测试对比已保存到数据库
文章 Ubuntu 效能調校備忘已保存到数据库
文章 Firefox我使用以来收集的一些优化方法已保存到数据库
文章 Curl在Squid测试中可能出现的问题已保存到数据库
文章 Perl笔记已保存到数据库
文章使用Public Key (OpenSSH) 不用密码登陆已保存到数据库
文章 Fedora Core与RedHat的关系已保存到数据库
文章什么是痛苦已保存到数据库
全部采集结束！

wp233 251都试了

还有,为什么只采这么少?是不是试版的原故

月光飞燕 · 发表于 2008-11-26 04:01:35

楼上你好，这软件是针对wp2.62版本及以上开发的
经很多人测试采集成功并正确自动发布
一个rss的页面会被全部采集，你觉得少，你可以多加几个rss，另外rss是随时会更新内容的，采集数量跟软件没关系
请你再仔细检查

vanbollu · 发表于 2008-11-30 23:13:57

有个问题，wordpress换了永久链接地址后，导致不能打开文章~

moyuhuanlan · 发表于 2008-12-1 09:41:22

老大出个自动更新的吧lol，我好期待啊LZ

moyuhuanlan · 发表于 2008-12-1 15:32:05

lz你好。我是在本地测试的用的是WAMP5，按照你的教程我怎么采集不了呢？是不是我的保存路径不对，我用的是2.65，还是版本太高的原因。着急。请回答下，谢谢了

moyuhuanlan · 发表于 2008-12-1 15:35:49

补充下错误信息：
采集开始～～
开始解析0号链接
解析此RSS失败！可能读取次数太多，服务器拒绝线程访问，请稍候再试！
全部采集结束！

请楼主帮帮我谢谢了！

qkst · 发表于 2008-12-1 22:28:08

下来好好研究下！谢谢免费！

月光飞燕 · 发表于 2008-12-1 23:06:48

Original posted by vanbollu at 2008-11-30 23:13
有个问题，wordpress换了永久链接地址后，导致不能打开文章~

问题已记录，能不能解决待研究

月光飞燕 · 发表于 2008-12-1 23:08:00

Original posted by moyuhuanlan at 2008-12-1 15:32
lz你好。我是在本地测试的用的是WAMP5，按照你的教程我怎么采集不了呢？是不是我的保存路径不对，我用的是2.65，还是版本太高的原因。着急。请回答下，谢谢了

我当时写此程序的时候还没出来2.65，lol，我已记录此问题

vagaa · 发表于 2008-12-5 17:05:08

要钱吗

jxsfxx · 发表于 2008-12-7 10:48:59

这个要支持，好东西

shballfuns · 发表于 2008-12-7 11:08:49

好东西，一定要推荐呀。

mm22gg · 发表于 2008-12-9 18:54:24

mm22gg · 发表于 2008-12-9 19:10:17

yyyyyyyyyyyyyyyyyyyyyyyyyyyyyyyyy

jack · 发表于 2008-12-11 19:21:53

好东西，下个版本什么时候出来

ccddad · 发表于 2008-12-12 17:08:50

虽然不懂慢慢研究吧,好东西,支持

ccddad · 发表于 2008-12-12 17:23:00

下不了呀,不是免费的吗 ?怎么还说钱不够?

zmkmzmkm · 发表于 2008-12-15 09:21:58

非常强悍了！！！！！

spartak · 发表于 2008-12-18 16:04:28

谢谢，可否加伪原创功能

月光飞燕 · 发表于 2008-12-18 19:56:59

Original posted by spartak at 2008-12-18 16:04
谢谢，可否加伪原创功能

新版在不久后出来，伪原创当然可以加，收费功能

大排 · 发表于 2008-12-19 16:02:19

我火热加入测试团队，第一时间反馈问题

shenlei0513 · 发表于 2008-12-26 15:37:53

虽然现在还不懂，但下了以后慢慢研究。

章鱼王 · 发表于 2008-12-27 18:01:23

fsdfsdffsdfsdf发送到

(免费)WordPressRSS采集助手+月光任意RSS采集插件【已作废】

本帖子中包含更多资源

评分

评分

评分

回复 49# 的帖子