• 热门行业
  • 装修建材
  • 家居生活
  • 餐饮食品
  • 母婴教育
  • 电脑办公
  • 服装首饰
  • 汽车工具
  • 家电数码
  • 机械化工
  • 休闲美容
返回上一页
专利状态
读取RabbitMQ数据的方法及装置
有效
专利申请进度
申请
2018-11-06
申请公布
2020-05-12
授权
2023-05-16
预估到期
2038-11-06
专利基础信息
申请号 CN201811311846.1 申请日 2018-11-06
申请公布号 CN111143082A 申请公布日 2020-05-12
授权公布号 CN111143082B 授权公告日 2023-05-16
分类号 G06F9/54;G06F16/2455;G06F16/25
分类 计算;推算;计数;
申请人名称 航天信息股份有限公司
申请人地址 北京市海淀区杏石口路甲18号航天信息园
专利法律状态
  • 2023-05-16
    授权
    状态信息
    授权
  • 2020-05-12
    公布
    状态信息
    公布
摘要
本发明涉及大数据技术领域,公开了一种基于Spark Streaming读取RabbitMQ数据的方法及装置,用于实现Spark Streaming从RabbitMQ数据读取数据进行处理,使Spark Streaming接收到的数据流更加稳定和准确,并且避免了Spark Streaming停止运行后数据的丢失。所述方法包括:通过RabbitMQ的接收器Receiver读取所述RabbitMQ中的数据,并将所述数据存储在指定内存中;通过Spark Streaming的Receiver从所述指定内存中读取所述数据,并对所述数据进行批处理。