基于自动化信息抽取技术的垂直网络爬虫设计与实现[EB/OL]
北京:中国科技论文在线
最后对基于自动化信息抽取技术的网络爬虫从爬取效率和抽取准确率两个方面进行了测试
本文首先对自动化信息抽取网络爬虫进行了框架设计和优化
针对信息自动化抽取问题分析了自动模板生成算法RoadRunner算法并且给出了优化方案
然后针对爬虫抓取问题详分析了开源网络爬虫框架Scrapy并且给出了优化方案
目前大多数的网络爬虫使用人工定义规则来完成对数据的抽取工作
王洪波 * ( 北京邮电大学网络与交换技术国家重点实验室
【收录情况】 中国科技论文在线: 张建宇
【详情见下载】