一种数据ETL系统及方法_专利查询-品牌网

热门行业
装修建材
家居生活
餐饮食品
母婴教育
电脑办公
服装首饰
汽车工具
家电数码
机械化工
休闲美容

热门行业

教育培训
板材
地板
涂料
家纺
集成吊顶
美缝剂
木门
硅藻泥
管材
指纹锁
橱柜
衣柜
床垫
电热水器
集成灶
暖气片
净水器
酒店
卫浴

返回上一页

专利状态

一种数据ETL系统及方法

有效

专利申请进度

申请

2019-03-01

申请公布

2019-06-04

授权

2023-04-21

预估到期

2039-03-01

专利基础信息

申请号	CN201910158544.3	申请日	2019-03-01
申请公布号	CN109840267A	申请公布日	2019-06-04
授权公布号	CN109840267B	授权公告日	2023-04-21
分类号	G06F16/25
分类	计算；推算；计数;
申请人名称	成都品果科技有限公司
申请人地址	四川省成都市高新区天府大道中段1268号1栋13层

专利法律状态

2023-04-21

授权

状态信息

授权
2019-06-04

公布

状态信息

公布

摘要

本发明公开一种数据ETL系统，包括：Spark调度模块，数据ETL模块，Zeppelin Notebook模块，Airflow调度模块；所述Spark调度模块用于读取落地数据，将所述落地数据结构化，并将结构化的落地数据灌入所述数据ETL模块；所述数据ETL模块用于对接收的所述结构化的落地数据进行ETL操作，将ETL操作结果转换为Json数据，并将所述Json数据回写给所述Spark调度模块；所述Spark调度模块还用于将接收的所述Json数据结构化，获取结构化的Json数据；所述ZeppelinNotebook模块用于将所述结构化的Json数据进行加总处理，获取处理后数据，将所述处理后数据导入AWS Redshift中；所述Airflow调度模块用于对所述Spark调度模块、所述数据ETL模块、所述ZeppelinNotebook模块进行流程调度。本发明提供的技术方案，能够自动完成数据ETL过程，提高工作效率。

更多专利

全国服务热线：

在线客服

1211389656 咨询

商务合作

85926368 咨询

媒体合作

921888730 咨询

在线客服
客服微信号

品牌网官方客服微信

打开微信扫一扫

客服微信
商务合作微信

商务合作详谈

打开微信扫一扫

商务合作
回到顶部

在线客服

商务合作

媒体合作

客服微信号

商务合作微信