×

一个高效自动化分析日志的两阶段检测方法

消耗积分:0 | 格式:pdf | 大小:5.53 MB | 2021-04-07

分享资料个

  随着国家高性能计算环境各个节点产生日志数量不断增加,采用传统的人工方式进行异常日志分析已不能满足日常的分析需求。为了高效自动化地分析日志,提出了一个两阶段的检测方法。第一阶段首先在预处理时将日志模式进行分类,然后使用主成分分析方法进行异常检测,并将日志类型的有序排列定义为种日志流量模式,通过该定义将异常检测中得到的异常流量模弌提取岀来,最后使用层次聚类算法简化流量模式的结果并保存。第二阶段通过第一阶段得到的检测模型和流量模弌,可以实时监测分析日忐流量信息并匹配对应流量模式。最终基于高性能计算环境中的真实日忐进行实验分析,并实现了结果的可视化展示,从而大大减轻了运维人员的工作负担。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉

评论(0)
发评论

下载排行榜

全部0条评论

快来发表一下你的评论吧 !