• 热门行业
  • 装修建材
  • 家居生活
  • 餐饮食品
  • 母婴教育
  • 电脑办公
  • 服装首饰
  • 汽车工具
  • 家电数码
  • 机械化工
  • 休闲美容
返回上一页
专利状态
高可靠性的大数据日志采集与传输方法
有效
专利申请进度
申请
2017-01-25
申请公布
2017-05-24
授权
2018-06-15
预估到期
2037-01-25
专利基础信息
申请号 CN201710056287.3 申请日 2017-01-25
申请公布号 CN106709069A 申请公布日 2017-05-24
授权公布号 CN106709069B 授权公告日 2018-06-15
分类号 G06F17/30
分类 计算;推算;计数;
申请人名称 焦点科技股份有限公司
申请人地址 江苏省南京市高新技术产业开发区星火路软件大厦A座8-12F
专利法律状态
  • 2018-06-15
    授权
    状态信息
    授权
  • 2017-06-16
    实质审查的生效
    状态信息
    实质审查的生效;IPC(主分类):G06F17/30;申请日:20170125
  • 2017-05-24
    公布
    状态信息
    公布
摘要
高可靠性的大数据日志采集与传输方法,步骤如下,步骤1设计日志采集架构;设计可以实现并有利于日志采集的平台架构:设有基于能够采集日志和校验日志的系统架构;flume部署至多个数据源上,flume用于采集数据源的日志数据并发送;Kafka作为数据传输模块,部署在网络中心节点;storm和HDFS部署在最终数据汇总的大数据集群上;步骤2数据恢复的流程和算法;保障数据因程序中断或网络中断而重新恢复的流程和算法。步骤3设计文本校验的交互流程和算法。