web data mining

الوصف

一、 主要功能 乐思论坛采集系统的主要功能为：根据用户自定义的任务配置，批量而精确地抽取目标论坛栏目中的主题帖与回复帖中的作者，标题，发布时间，内容，栏目等，转化为为结构化的记录，保存在本地数据库中。 功能示意图如下所示： 二、 系统特点 可以抽取所有主题帖或者最新主题帖内容 可以抽取某个主题帖的所有回复帖或者最新回复帖的内容 支持命令行格式，可以Windows任务计划器配合，定期抽取目标数据 支持记录唯一索引，避免相同信息重复入库 支持数据库表结构完全自定义 保证信息的完整性与准确性 支持各种主流数据库，如MSSQL、Access、MySQL、Oracle、DB2、Sybase等 三、 运行环境 操作系统：Windows XP/NT/***0/***3 内存：最低*2M内存，建议**8M或以上 硬盘：最少*0M空余硬盘空间 四、 行业应用 乐思论坛采集系统主要用于：门户网站的专业论坛集成, 市场调研机构的市场分析，竟争情报获取。 门户网站 可以做到： 每天定时抽取目标论坛的信息(标题, 作者, 内容等)到数据库中 利益: 轻松提供论坛门户 企业应用 可以做到： 实时而准确地采集本企业的品牌以及竞争对手的品牌在各大论坛中的反馈情况 实时而准确地采集各大行业论坛中的信息，从中了解消费者的需求与反馈，从而发现市场趋势与机会 利益: 快速而大量地获取目标商业信息，立刻提高公司的市场营销能力 广告与市场研究机构 可以做到： 快速而大量地获取目标论坛的各种原始信息到数据库中 利益: 快速形成针对传统品牌研究，网络用户研究的的基础数据库