资料下载
×
采用多目标蚁群优化算法的主题爬虫方法
消耗积分:0 |
格式:pdf |
大小:1.36 MB |
2021-03-23
分享资料个
基于关键词匹配检索的传统搜索引擎爬全率和爬准率较低，而使用基于语义检索的主题爬虫方法容易偏离主题与陷入局部最优。针对该问题，提岀一种采用多目标蚁群优化算法的主题爬虫方法。构建主题爬虫领域本体和主题向量，以链接的锚文本相关度、链接所在网页主题相关度以及链接指向网页主题相关度为指标判断链接是否与主题相关，并建立链接主题相关度的多目标优化模型，将基于多目标优化的蚁群算法引入主题爬虫的链接选择过程，采用非支配排序和最近最远候选解法选取 Pareto最优链接，以引导主题爬虫搜索方向并提升全局搜索性能。实验结果表明，与FCSA、WSE等传统主题爬虫方法相比，该方法爬准率更高，并且能更快抓取到主题相关度高的网页。
声明：本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人，不代表电子发烧友网立场。文章及其配图仅供工程师学习之用，如有内容侵权或者其他违规问题，请联系本站处理。 举报投诉
评论(0)
发评论
- 相关下载
- 相关文章
