信息采集系统采集的主要数据项有哪些
发布网友
发布时间：2022-04-23 09:09
共1个回答
热心网友
时间：2023-09-14 12:35
举个例子，国内比较出色的
乐思网络信息采集系统可以将因特网上的网站信息采集保存到用户的本地数据库中。并具备以下功能：
规则定义
－
通过采集规则的定义，可以搜索所有网站采集几乎任何类型的信息。
多任务，多线程
－
可以同时进行多个信息采集任务，每个任务可以使用多个线程。
数据保存
－
数据边采集边自动保存到关系数据库中，并且数据结构能够自动适应，软件可以根据采集规则自动创建数据库，以及其中的表和字段，
网站登录
－
支持网站登录，
智能网页正文提取
－
可以将正文从网页代码中智能提取
结果替换
－
可以将采集的结果根据规则替换成你定义的内容。
文件下载
－
可以将采集到的二进制文件（诸如：图片、音乐、软件、文档等等）下载到本地磁盘或者采集结果数据库中。
采集结果分类
－
可以根据用户定义的分类信息进行采集结果的自动分类。
数据发布
－
可以通过自定义接口，将已采集的结果数据发布到任意的内容管理系统和指定数据库中。
条件过滤
－
可以根据某个条件来决定那些信息保存，那些信息过滤。过滤重复内容
－
软件可根据用户设置和实际情况对重复内容和重复网址自动删除重复内容等等
更多信息你自己去乐思的网站上看去
