论坛采集专家是一款专门针对楼层型数据,和需要自动增量更新的需求而开发的一款软件。它定义了一套发布规则,按规则开发插件接口,就可以实现论坛,知道,连载等的自动更新功能。它有如下功能特色:
1.支持采集标题,内容,用户名,注册时间,签名,头像,附件等。支持添加采集字段
2.支持自动回复,方便采回复帖,采隐藏附件。支持发回复帖
3.支持回复部分的增量采集。可采集新回复并发布。可处理论坛,贴吧,连载类的更新问题
4.智能生成采集规则。系统内置几大常用论坛自动识别规则,可以自动生成采集规则
5.支持网站自动登录,支持目前主流的Discuz,PHPWind论坛,暂时不支持验证码登录
6.接口支持自动注册帐号,处理头像,处理主题和回复,官方接口在不断的更新维护
7.支持下载文件,支持翻译,分词,代理等火车采集器的功能
8.支持插件开发,灵活的接口可以采集更复杂的网站数据和做数据处理
9.支持通过通过搜索关键词采集帖子网址,可以批量设置关键词做查询类采集