红叶文章采集器3.6 绿色版

红叶文章采集器是一款强大且高效的文章采集工具，亮点在于它能快速精准地从众多网站抓取所需文章。我特别喜欢它的智能筛选功能，它能根据关键词、发布时间等条件，精准筛选出符合要求的文章。之前我做内容创作时，要从海量网页中找素材，耗时又费力。有了这个功能，一键就能筛选出合适文章，大大提高了我的创作效率。

软件特色

(1)本软件采用北大天网MD5指纹排重算法，对于相似相同的网页信息，不再重复保存。

(2)采集信息含义：[[HT]]表示网页标题，[[HA]]表示文章标题，[[HC]]表示10个权重关键字，[[UR]]表示网页中的图片链接，[[TXT]]之后为正文。

(3)蜘蛛性能：本软件开启300个线程来保证采集效率。通过采集100万精华文章来执行压力测试，以普通网民的联网计算机为参考标准，单台计算机可以在一天内遍历200万网页、采集20万精华文章，100万精华文章仅需5天就可采集完毕。

(4) 正式版与免费版的区别在于：正式版允许将采集的精华文章数据自动保存为ACCESS数据库。购买正式版请联系QQ(970093569)。

操作方法

(1)使用前，必须确保你的计算机可以连通网络，且防火墙不要拦截本软件。

(2)运行SETUP.EXE和setup2.exe，以安装操作系统system32支持库。

(3)运行spider.exe，输入网址入口，先点"人工添加"按钮，再点"启动"按钮，将开始执行采集。

注意事项

(1)抓取深度：填写0表示不限制抓取深度;填写3表示抓到第3层。

(2)通用蜘蛛模式与分类蜘蛛模式的区别：假定网址入口为“http://youxi.baidu.com/”，若选择通用蜘蛛模式，将遍历“baidu.com”里面的每一个网页;若选择分类蜘蛛模式，则只遍历“youxi.baidu.com”里面的每一个网页。

(3) 按钮“从MDB导入”：网址入口从TASK.MDB中批量导入。

(4)本软件采集的原则是不越站，例如给的入口是“http://youxi.baidu.com/”，就只在百度站点内部抓取。

(5)本软件采集过程中，偶尔会弹出一个或数个“错误对话框”，请不予理会，倘若关闭“错误对话框”，采集软件就会挂掉。

(6)使用者如何选择采集题材：例如你若想采集 “股票类”文章，只需把那些“股票类”站点作为网址入口即可。