红叶文章采集器 3.6绿色版
本文摘要:超级强大的网站文章采集器,本软件全称为红叶文章采集器,英文名字Fast_Spider,是蜘蛛爬虫类程序,用于从指定网站采集大量精华文章,将直接丢弃其中的垃圾网页信息,仅保存拥有阅

红叶文章采集器 3.6绿色版详细介绍

  • 资源大小:5.03 MB
  • 月下载量:48次
  • 软件属性:简体中文 免费软件
  • 系统平台:Win7/WinVista/Win2003/WinXP/Win2000/Win8/Win10兼容软件
  • 更新时间:2020-01-10
  • 红叶文章采集器下载软件简介

    超级强大的网站文章采集器,本软件全称为红叶文章采集器,英文名字Fast_Spider,是蜘蛛爬虫类程序,用于从指定网站采集大量精华文章,将直接丢弃其中的垃圾网页信息,仅保存拥有阅读价值和浏览价值的精华文章,自动实行HTM-TXT转换。
    软件特点
    本软件使用北大天网MD5指纹排重算法,对于相似相同的网页信息,不再重复保存。
    采集信息含义:[[HT]]表示网页标题,[[HA]]表示文章标题,[[HC]]表示10个网站权重关键词,[[UR]]表示网页中的图片链接,[[TXT]]之后为正文。
    蜘蛛性能:本软件开启300个线程来保证采集效率。通过采集100万精华文章来实行重压测试,以一般网民的联网计算机为参考标准,单台计算机可以在一天内遍历200万网页、采集20万精华文章,100万精华文章只需要5天就可采集完毕。
    正式版与免费版有什么区别在于:正式版允许将采集的精华文章数据自动保存为ACCESS数据库。购买正式版请联系QQ。
    操作办法
    用前,需要确保你的计算机可以连通互联网,且防火墙不要拦截本软件。
    运行SETUP.EXE和setup2.exe,以安装操作系统system32支持库。
    运行spider.exe,输入网址入口,先点"人工添加"按钮,再点"启动"按钮,将开始实行采集。
    需要注意的地方
    抓取深度:填写0表示不限制抓取深度;填写3表示抓到第3层。
    通用蜘蛛模式与分类蜘蛛模式有什么区别:假定网址入口为“http://youxi.baidu.com/”,若选择通用蜘蛛模式,将遍历“baidu.com”里面的每个网页;若选择分类蜘蛛模式,则只遍历“youxi.baidu.com”里面的每个网页。
    按钮“从MDB导入”:网址入口从TASK.MDB中批量导入。
    本软件采集的原则是不越站,比如给的入口是“http://youxi.baidu.com/”,就只在百度站点内部抓取。
    本软件采集过程中,偶尔会弹出一个或数个“错误对话框”,请不予理会,假如关闭“错误对话框”,采集软件就会挂掉。
    用户怎么样选择采集题材:比如你若想采集 “股票类”文章,仅需把那些“股票类”站点作为网址入口即可。

    红叶文章采集器 3.6绿色版下载地址直达

    内容聚焦