团体标准网
文库搜索
切换导航
文件分类
频道
仅15元无限下载
联系我们
问题反馈
文件分类
仅15元无限下载
联系我们
问题反馈
批量下载
(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211020001.3 (22)申请日 2022.08.24 (71)申请人 平安健康保险股份有限公司 地址 200000 上海市徐汇区凯滨路16 6号B 座16楼 (72)发明人 冉冰冰 (74)专利代理 机构 深圳国新 南方知识产权代理 有限公司 4 4374 专利代理师 徐小洋 (51)Int.Cl. G06F 16/13(2019.01) G06F 16/14(2019.01) G06F 16/35(2019.01) G06F 11/30(2006.01) (54)发明名称 一种日志处理方法、 装置、 电子设备及存储 介质 (57)摘要 本发明提供了一种日志处理方法、 装置、 电 子设备及计算机可读存储介质。 本发 明提供的日 志处理方法, 包括: 获取日志数据, 根据日志数据 的类型对日志数据进行格式化, 得到格式化后的 日志数据; 将格式化后的日志数据存储至分布式 搜索和分析引擎中, 并对分布式搜索和分析引擎 中的格式化后的日志数据添加对应的索引; 根据 格式化后的日志数据对应的索引, 对格式化后的 日志数据进行归类, 根据归类结果对格式化后的 日志数据对应的索引设置标签, 得到包含标签的 索引; 根据包含标签的索引, 将格式化后的日志 数据与日志标准进行匹配, 得到匹配结果, 根据 匹配结果确定对应的日志数据是否正常。 本发明 的日志处理方法, 可以提高日志处理的及时性和 效率。 权利要求书2页 说明书10页 附图2页 CN 115391279 A 2022.11.25 CN 115391279 A 1.一种日志处 理方法, 其特 征在于, 包括如下步骤: 获取日志数据, 根据所述日志数据的类型对所述日志数据进行格式化, 得到格式化后 的日志数据; 将所述格式化后的日志数据存储至分布式搜索和分析引擎中, 并对所述分布式搜索和 分析引擎中的所述格式化后的日志数据添加对应的索引; 根据所述格式化后的日志数据对应的索引, 对所述格式化后的日志数据进行归类, 得 到归类结果, 根据所述归类结果对所述格式化后的日志数据对应的索引设置标签, 得到包 含标签的索引; 根据所述包含标签的索引, 将所述格式化后的日志数据与 日志标准进行匹配, 得到匹 配结果, 根据所述匹配结果确定对应的日志数据是否正常。 2.根据权利要求1所述的日志处理方法, 其特征在于, 获取日志数据, 根据所述日志数 据的类型对所述日志数据进行格式化, 包括: 运行日志采集器进行日志数据收集, 获取所述日志数据, 通过数据收集引擎并根据所 述日志数据的类型, 对所述日志数据进 行格式化, 其中, 所述日志数据类型包括前端服务类 型、 Java类型以及Pytho n类型。 3.根据权利要求1所述的日志 处理方法, 其特征在于, 根据 所述格式化后的日志数据对 应的索引, 对所述格式化后的日志数据进行归类, 包括: 将所述格式化后的日志数据对应的索引中, 包含Tomcat或Java标记的索引归为一类, 将所述格式化后的日志数据对应的索引中, 包括nginx或前端ingress标记的索引归为一 类。 4.根据权利要求1所述的日志处理方法, 其特征在于, 根据所述包含标签的索引, 将所 述格式化后的日志数据与日志标准进行匹配, 包括: 根据所述包含标签的索引确定所述格式化后的日志数据对应的日志标准, 将所述格式 化后的日志数据与所述对应的日志标准进行正则匹配。 5.根据权利要求4述的日志处理方法, 其特征在于, 根据 所述匹配结果确定对应的日志 数据是否正常, 包括: 若所述格式化后的日志数据与所述对应的日志标准匹配成功, 则所述对应的日志数据 为正常, 若所述格式化后的日志数据与所述对应的日志标准匹配不成功, 则所述对应的日 志数据为异常。 6.根据权利要求5述的日志处理方法, 其特征在于, 在根据 所述匹配结果确定对应的日 志数据是否正常之后, 还包括: 若所述对应的日志数据为异常, 或者, 所述对应的日志数据 包括debug或者 Info关键字, 则触发异常告警。 7.根据权利要求1所述的日志 处理方法, 其特征在于, 在将所述格式化后的日志数据存 储至分布式搜索和分析引擎中之后, 还 包括: 对所述分布式搜索和分析引擎中的所述格式化后的日志数据进行统计, 获取所述格式 化后的日志数据在各个时段的数据量, 若 所述格式化后的日志数据在某个时段的数据量大 于预设数据量阈值, 则触发日志量异常告警; 若所述格式化后的日志数据在某个时段的数 据增量大于超过 预设增量阈值, 则触发日志增量异常告警。 8.一种日志处理装置, 其特征在于, 包括日志数据预处理模块、 索引添加模块、 日志数权 利 要 求 书 1/2 页 2 CN 115391279 A 2据归类模块以及日志数据匹配模块; 所述日志数据预处理模块, 用于获取日志数据, 根据所述日志数据的类型对所述日志 数据进行格式化, 得到格式化后的日志数据; 所述索引添加模块, 用于将所述格式化后的日志数据存储至分布式搜索和分析引擎 中, 并对所述分布式搜索和分析引擎中的所述格式化后的日志数据添加对应的索引; 所述日志数据归类模块, 用于根据所述格式化后的日志数据对应的索引, 对所述格式 化后的日志数据进行归类, 得到归类结果, 根据所述归类结果对所述格式化后的日志数据 对应的索引设置标签, 得到包 含标签的索引; 所述日志数据匹配模块, 用于根据所述包含标签的索引, 将所述格式化后的日志数据 与日志标准进行匹配, 得到匹配结果, 根据所述匹配结果确定对应的日志数据是否正常。 9.一种电子设备, 包括存储器、 处理器, 所述存储器存储有可被所述处理器执行的计算 机程序, 其特征在于, 所述处理器执行所述计算机程序时实现如权利要求1至7任一项所述 的日志处 理方法。 10.一种计算机可读存储介质, 所述计算机可读存储介质存储有计算机程序, 其特征在 于, 所述计算机程序被处 理器执行时实现如权利要求1至7任一项所述的日志处 理方法。权 利 要 求 书 2/2 页 3 CN 115391279 A 3
专利 一种日志处理方法、装置、电子设备及存储介质
文档预览
中文文档
15 页
50 下载
1000 浏览
0 评论
309 收藏
3.0分
赞助2.5元下载(无需注册)
温馨提示:本文档共15页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
下载文档到电脑,方便使用
赞助2.5元下载
本文档由 人生无常 于
2024-03-18 02:12:27
上传分享
举报
下载
原文档
(530.7 KB)
分享
友情链接
GB-T 33172-2016 资产管理 综述、原则和术语.pdf
GB-T 6490-2021 水轮泵.pdf
DB22-T 1945-2013 信息系统运行维护技术服务规范应用 软件系统部分 吉林省.pdf
关键信息基础设施网络安全保护基本要求 关基安全保护基本要求报批稿 2019.11.5 .pdf
GB-T 2847-2005 用于水泥中的火山灰质混合材料.pdf
数据出境管理办法.pdf
GB-T 24936-2010 全地形车 术语.pdf
GB-T 42381.140-2023 数据质量 第140部分:主数据:特征数据交换:完整性.pdf
GB-T 37966-2019 纳米技术 氧化铁纳米颗粒类过氧化物酶活性测量方法.pdf
德勤 数字化时代下的网络安全战略框架系列之四 .pdf
GB-T 23050-2022 信息化和工业化融合管理体系 供应链数字化管理指南.pdf
GB-T 9969-2008 工业产品使用说明书 总则.pdf
YD-T 1729-2008 电信网和互联网安全等级保护实施指南.pdf
GB-T 42926-2023 金融信息系统网络安全风险评估规范.pdf
GB 29146-2012 钼精矿单位产品能源消耗限额.pdf
GB-T 33850-2017信息技术服务质量评价指标体系.pdf
中国软件测评中心 数据安全复合治理与实践白皮书.pdf
DB2101-T 0080—2023 企业商业秘密信息化安全防护规范 沈阳市.pdf
GB-T 3765-2008 卡套式管接头技术条件.pdf
T-ZZB 0659—2018 马丁代尔耐磨及起毛起球性能试验仪.pdf
1
/
3
15
评价文档
赞助2.5元 点击下载(530.7 KB)
回到顶部
×
微信扫码支付
2.5
元 自动下载
官方客服微信:siduwenku
支付 完成后 如未跳转 点击这里 下载
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们
微信(点击查看客服)
,我们将及时删除相关资源。