• 热门行业
  • 装修建材
  • 家居生活
  • 餐饮食品
  • 母婴教育
  • 电脑办公
  • 服装首饰
  • 汽车工具
  • 家电数码
  • 机械化工
  • 休闲美容
返回上一页
专利状态
一种高可靠的实时日志收集及可视化检索方法
有效
专利申请进度
申请
2018-12-05
申请公布
2019-03-29
授权
2020-05-01
预估到期
2038-12-05
专利基础信息
申请号 CN201811479203.8 申请日 2018-12-05
申请公布号 CN109542733A 申请公布日 2019-03-29
授权公布号 CN109542733B 授权公告日 2020-05-01
分类号 G06F11/30;G06F16/14;G06F16/182;G06F16/13;G06F16/18
分类 计算;推算;计数;
申请人名称 焦点科技股份有限公司
申请人地址 江苏省南京市高新开发区星火路软件大厦A座12F
专利法律状态
  • 2020-05-01
    授权
    状态信息
    授权
  • 2019-04-23
    实质审查的生效
    状态信息
    实质审查的生效IPC(主分类):G06F 11/30
  • 2019-03-29
    公布
    状态信息
    公开
摘要
高可靠的实时日志收集及可视化检索方法,1)设置实时日志收集架构,设有实时日志收集,日志数据加密传输,日志数据完整性检查,缺失告警,检查结果可视化系统架构;在目标日志服务器上部署Flume客户端及自定义Flume插件、Kafka集群、HDFS分布式文件系统;通过配置Flume配置文件,进行多线程的目标日志读取,并将读取的数据传输至Kafka集群;Kafka集群通过创建的分区与Kafka集群的Topic归类进行日志数据的缓存;2)日志数据完整性检查流程与算法步骤:通过自定义Flume插件在传输日志数据时,对已收集的日志文件发送检查消息,使Storm集群在对落地日志数据时,对HDFS存储的日志数据进行完整性检查;3)切片日志文件删除与缺失数据重传流程与算法步骤。