友善之家 Linux技术交流区 守望数据采集器 3.7 绿色版

主题 : 守望数据采集器 3.7 绿色版复制链接 | 浏览器收藏 | 打印

yangsibei

级别: 新手上路

作者资料
发送短消息
加为好友

UID: 129896
精华: 0
发帖: 3
金钱: 15 两
威望: 3 点
贡献值: 0 点
综合积分: 6 分
注册时间: 2016-12-13
最后登录: 2016-12-13

楼主发表于: 2013-01-09 16:02

只看楼主 | 小中大

守望数据采集器 3.7 绿色版

抓取bbs(论坛电子公告板程序)时只抓取顶层内容；
能抓取utf(UNICODE的一种变长字符编码)-8编码网站，实现gb(千兆字节，电脑的一种存储单位)与utf(UNICODE的一种变长字符编码)8相互交换；
能导进phpwind、dz(国内人气很高的论坛程序)、dvbbs(动网论坛保证速度)……bbs(论坛电子公告板程序)；
加进在抓取内容后可添来历网站，例如在您导进论坛的每篇文章以后加上“来源于：新浪网络”；（可选）
增强无内容题目无内容内容的筛选，节约很多抓取时间，同一时候界面亦漂亮点！
更新bbs(论坛电子公告板程序)区域简单教材：
先点采集配置-点设置bbs(论坛电子公告板程序)参变量-设置佳bbs(论坛电子公告板程序)参变量(fid不需要编写了)-接着点升级bbs(论坛电子公告板程序)区域消息就可!!!
革新下主页就可看到您的论坛区域了,从今以后不用继续更新区域缓存,只有您bbs(论坛电子公告板程序)拥有改动!!
DZ与PHPWIND都可以自动获得区域消息,如果您BBS是模静态,务必临时关闭这功能,等等获取版块消息以后继续打开。。。。。
适用领域：
1、抓取目的不限制，只需可以连接的页面；
2、抓取东西支持：文章、图像、flash(交互式矢量图和Web动画的标准)、多媒体影音等等
3、圆满的内容运入仓库处理方法，防希望抓取工具提供2类运入仓库方法：数据库直引与模仿提出交纳。
1）数据库直导方式支持任意基于mysql(小型关系型数据库管理系统)数据库存储消息的内容管理系统；
2）模仿提出交纳方法理论上支持任何目的，不受目的程序语言、数据库类型限定；真实应用效果遭目的使用程序影响。
功能陈述：
1、支持文章内容分页采集；
2、支持论坛抓取
3、支持utf(UNICODE的一种变长字符编码)-8改换至GB2312，能抓取内容字符格式为utf(UNICODE的一种变长字符编码)-8的目标；
4、支持将文章内容存储到本地；
5、支持网站＋组合节目管理方法，让抓取管理一目了然；
6、支持文章超链接更换功能；
7、支持抓取工具配置无限筛选功能；
8、支持文章里图片采集存储到当地，自动更换文件称呼避免重复；
9、支持文章里FLASH文件抓取存储至当地；
10、支持限制php(英文超级文本预处理语言) FOPEN程序函数功能的虚拟服务器；
11、支持抓取后果人工过滤，并提供“无内容标题、无内容内容”的快速筛选卸载；
12、支持phpwind(全能建网站软件)、DiscuzBBS引仓库，程序包内部包含2大BBS导库规则及操纵指南描述；
13、支持自定义入库间隔时间，避躲虚拟服务器并发量限定。
以下特别功能仅“守希望采集工具”拥有：
1、支持抓取过程断点继取功能，不受网页浏览器意料之外关闭影响，重启以后勿能重复抓取；
2、支持自动对照筛选功能，对已经抓取的超链接系统勿能进行重复抓取与入库；
以上二只功能能大幅度减少采集时间，减少系统压力。
3、采集准则侦测器，只需简单的滑鼠拷贝剪贴就可产生圆满的抓取规则，无须繁琐的过程，即就您是新手也可以炉火纯青地使用守希望采集器抓取任何内容！
以上众多强劲功能给你无偿应用，马上装配使用感受消息抓取的轻松、高效率。
-----------------------------
挑选防望抓取工具的美好的地方：
1、防希望程序使用php(英文超级文本预处理语言)设计支持迈平台运行，不管windows(微软公司视窗电脑操作系统)还是Unix种作业系统全可运行，是壹个高效采集、圆满运入仓库的在线使用软件。
2、守希望不受装配地址限制，家中、单位电脑、网站主机全能够；推介直接装配在网站服务器上运行，逾可以心得防希望超强功能与便利的地方。
3、采用主机装配，可以将抓取的图像/flash(交互式矢量图和Web动画的标准)直接采集到本台电脑应用；无需如其它抓取工具采集至个人计算机还需要将数据FTP上载服务器。测思如若你当日采集图像、flash(交互式矢量图和Web动画的标准)超过100M，上载时间是个什么意识。
4、采用服务器装配，能高速实行采集内容导入cms(意为内容管理系统)文章系统或者BBSBBS系统；假设您应用非在线的采集器，脏离运入仓库或者上载sql(结构化查询语言)文件来入库国际都市浪费时间。
5、防希望单独具有的断点续取、重复抓取筛选功能，逾可以节约您设计内容时间。

顶端

友善之家 Linux技术交流区

http://www.aiothome.net
访问内容超出本站范围，不能确定是否安全
继续访问	取消访问

友友粉丝快线

NanoPi 交流与讨论

嵌入式交流与讨论

站点服务

守望数据采集器 3.7 绿色版