基于TF-IDF语义和Hub分数学习的集中爬行

Scidown文献预览系统！

作者：scidown 发布时间：2021-05-25 09:40:04 文章标题：

基于TF-IDF语义和Hub分数学习的集中爬行( Focused Crawling Based Upon TF-IDF Semantics and Hub Score Learning )

文章作者：

M Kumar R Vig Web Internet Retrieval Focused Web Crawler Search Engine

文章简述：

聚焦爬虫遍历Web以收集与特定主题相关的文档，并可用于构建特定主题的文档集合，以用于数字图书馆和特定领域的搜索。一般的爬虫都是利用呼吸优先的搜索方法来遍历Web以获取尽可能多的信息。聚焦爬虫帮助搜索索引器索引万维网上与特定领域相关的所有文档，从而为搜索引擎的用户提供更完整、更新鲜的信息。在本文中，我们提出了一个聚焦爬虫，它能够从以前的爬行结果中学习，以收集与体育领域相关的文档。将显示连续四次爬网的爬网结果。结果表明，爬虫的精度值相对于爬行尝试次数有显著提高。

文章下载地址（开放版）：