网站运行环境:
1、运行环境 .Net Framework 3.5或以上版本
2、SqlServer2005或以上版本
网站开发技术:
1、C#语言
2、windows应用程序/服务程序
功能说明:
针对各大网站搜索引擎,使用关键字过滤搜索数据,采集所有对应关键字的网页标题和内容到本地或平台资讯模块的临时数据库,可自己设定过滤关键字,或可以结合平台的栏目作为关键字,实现采集+批量审核+发布的流程。
主要功能点:
1、设置关键字和采集来源
2、设置采集标题和内容规则,设置采集分页网页完整内容的规则
3、检查内容采集时间点获取新数据来源页
4、数据采集入库
5、服务循环检查更新
6、采集失败提示(修订采集规则)
7、设置采集频率和每次采集最大数量