火车采集器(LocoySpider)是一款专业的功能强大的网络数据/信息挖掘软件,通过灵活的配置,您可以很轻松的从网页上抓取文字、图片、文件等任何资源。程序支持远程下载图片文件,支持网站登陆后的信息采集,支持探测文件真实地址,支持代理,支持防盗链的采集,支持采集数据直接入库和模仿人手工发布等许多功能特点。火车采集器支持从任何类型的网站采集获取您所需要的信息,如各种新闻类网站、论坛、电子商务网站、求职招聘网站等。同时具有强大的网站登录采集、多页和分页的采集、网站跨层采集、POST采集、脚本页面采集、动态页面采集等高级采集功能。强大的php和c#插件支持,让您可以通过二次开发实现您所想要的任何更强大的功能。
功能特性:
1.规则自定义 - 通过采集规则的定义,可以搜索所有网站采集几乎任何类型的信息。
2.多任务,多线程 - 可以同时进行多个信息采集任务,每个任务可以使用多个线程。
3.所见即所得 - 任务采集过程所见即所得,过程中遍历的链接信息、采集信息、错误信息等都会及时的反映在软件界面中。
4.数据保存 - 数据边采集边自动保存到关系数据库中,并且数据结构能够自动适应,软件可以根据采集规则自动创建数据库,以及其中的表和字段,也可以通过导库方式灵活的将数据保存到客户已有的数据库结构中。
5.断点续采 - 信息采集任务可以在停止后从断点开始继续采集,从此你用不再担心你的采集任务意外中断了。
6.网站登录 - 支持网站Cookie,支持网站可视化登录,即使登录时需要验证码的网站也能采集。
7.计划任务 - 通过这个功能可以让你的采集任务定时、定量或者一直循环执行。
8.采集范围限制 - 可以根据采集的深度和网址的标识来限制采集的范围。
9.文件下载 - 可以将采集到的二进制文件(诸如:图片、音乐、软件、文档等等)下载到本地磁盘或者采集结果数据库中。
10.结果替换 - 可以将采集的结果根据规则替换成你定义的内容。
11.条件保存 - 可以根据某个条件来决定那些信息保存,那些信息过滤。
12.过滤重复内容 - 软件可根据用户设置和实际情况对重复内容和重复网址自动删除重复内容。
13.特殊链接识别 - 运用此功能可以将用JavaScript动态生成的链接或其他更古怪的连接识别出来。
14.数据发布 - 可以通过自定义接口,将已采集的结果数据发布到任意的内容管理系统和指定数据库中。现在已支持的目标发布媒体包括:数据库(access, sql server,my sql,oracle) ,静态htm文件。
15、预留编程接口 - 定义多个编程接口,用户可以在事件中利用PHP,C#语言进行编程,扩充采集功能。
更新日志:v9.3
1.修复一个当使用火车浏览器采集cookie时,与采集器处理冲突导致程序退出的问题。
2.修复任务编辑框,当未进行任何编辑时,仍然弹出保存对话框的问题。
3.标签组合时,支持对于循环获取新纪录的支持。
4.修复列表页标签,在重新开始任务后,未能加载“探测下载”的问题。
5.在任务编辑中,编辑Web,数据库发布模块时,增加对于任务标签的支持。
6.修复边采集边发布时,对于Id标签,未能正确发布的问题。
7.修复一个任务完成之后,下载列表显示为空白的问题。
8.对于网址库增加压缩方案,修复在网址库数据过大时,任务加载很慢的问题。
9.数据库的发布模块中,现在可以支持(insert ignore)语句
10.其他一些bug修复。
精品软件
- [未上架]Windows XP SP2 MSDN原版光盘(592M)v1.0
- Unlocker(最好的顽固软件删除工具) 32Bit 中文绿色版v1.9.2
- Anyreader(复制无法读取的数据) 中文绿色特别版v3.15
- 超级巡警之U盘病毒免疫器 绿色版V1.5
- 抠图工具 TeoreX PhotoScissors 绿色汉化注册版v4.1
- MP3 Sound Cutter(小巧的MP3/WAV任意截取工具)汉化绿色特别版V1.41
- 光影魔术手 绿色便携版 简体免费版v4.2.2
- 卡巴斯基企业版KSOS (FS)服务器版(多用户五年授权版) 汉化正式版v9.1.0.59
- AusLogics Registry Defrag(分析整理注册表碎片)汉化绿色版V4.0.4.47
- NetInfo(功能完善的网络工具箱) Build 715汉化绿色特别版V6.2
- 搜狗拼音智慧版 去广告优化版v3.0
- 波尔远程控制(远程监控管理) 简体绿色版v9.1
- 照片制作成令人惊讶的卡通效果(Cartoon Maker Recorder 5.95)汉化绿色特别版v1.0.0.1
- Recuva Business Edition 多国语言绿色版v1.53
- MemTest(内存测试)专业汉化版v6.3
- FinalRecovery 功能强大容易使用数据恢复工具 汉化绿色特别版V2.2.5.275
用户评论
最新评论
- 置顶 甘肃兰州联通 网友 一别两宽
正好需要!!
- 置顶 辽宁本溪电信 网友 凉生
好软件强势来袭。。。漂亮
- 置顶 西藏那曲电信 网友 疯人院毕业
真正好用
- 置顶 山东青岛移动 网友 笙情
我只想说一句很好很强大!
- 置顶 江苏徐州移动 网友 画眉如黛
这个厉害了哈哈
最新专题
更多>最新更新
更多>热门标签
软件排行榜
- 1
- 2
- 3
- 4
- 5
- 6
- 7
- 8
- 9
- 10