说明:最全电力标准
文库搜索
切换导航
文件分类
频道
仅15元无限下载
联系我们
问题反馈
文件分类
仅15元无限下载
联系我们
问题反馈
批量下载
(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211020384.4 (22)申请日 2022.08.24 (71)申请人 上海爱数信息技 术股份有限公司 地址 201112 上海市闵行区联航路1 188号8 幢第2层A-1单 元 (72)发明人 李瞿 (74)专利代理 机构 上海科盛知识产权代理有限 公司 312 25 专利代理师 叶敏华 (51)Int.Cl. G06F 16/21(2019.01) G06F 16/23(2019.01) G06F 16/27(2019.01) G06F 16/28(2019.01) (54)发明名称 一种数据库元 数据采集与管理的方法 (57)摘要 本发明涉及一种数据库元数据采集与管理 的方法, 该方法通过使用元数据采集网络和元数 据管理网络来实现, 其中, 元数据采集网络包括 数据源数据库、 内置关系型数据库、 Debezium和 Kafka, 该方法包括: (1)元数据管理网络监控数 据源数据库并开始采集元数据, 包括全量采集和 增量采集; (2)元数据信息被保存到内置关系型 数据库; (3)元数据管理网络对内置关系型数据 库获取到的元数据进行管理, 包括添加数据库字 典、 标记元数据信息和更新旧版本, 然后返回 (2), 直至元数据管理网络中的对外接口接收操 作指令, 结束。 与现有技术相比, 本发明具有实时 性强和方便对历史数据进行 管理等优点。 权利要求书2页 说明书5页 附图2页 CN 115470192 A 2022.12.13 CN 115470192 A 1.一种数据库元数据采集与管理的方法, 其特征在于, 该方法通过使用元数据采集网 络和元数据管理网络来实现, 其中, 元数据采集网络包括数据源数据库、 内置关系型数据 库、 Debezium和Kafka, 该 方法包括: 步骤S1、 元数据管理网络监控数据源数据库并开始全量采集元数据, 同时执行步骤S2 和步骤S3; 步骤S2、 检测是否有增量数据, 若是, 进入步骤S5, 若否, 重新进入步骤S2; 步骤S3、 元 数据信息被保存到内置关系型 数据库; 步骤S4、 元数据管理网络对内置关系型数据库获取到的元数据进行管理, 包括添加数 据库字典、 标记元数据信息和更新旧版本, 然后返回步骤S 3, 直至元数据管 理网络中的对外 接口接收操作指令, 结束; 步骤S5、 进行增量采集, 进入步骤S3 。 2.根据权利要求1所述的一种数据库 元数据采集与 管理的方法, 其特征在于, 所述的增 量采集的步骤 包括: 步骤S501、 当所述的数据源数据库 中的元数据发生变化时, 所述的Debezium对数据源 数据库的事务日志进行解析; 步骤S502、 所述的Kafka接收被Debezium解析的数据定义语言; 步骤S503、 数据定义语言被读取后, 发生变化的元数据信息被保存至内置关系型数据 库。 3.根据权利要求1所述的一种数据库 元数据采集与 管理的方法, 其特征在于, 所述的元 数据管理网络包括元数据监控管理模块、 元数据版本管理模块、 元数据标记管 理模块、 数据 库字典管理模块和元数据交互管理模块, 依次负责管理数据采集、 更新版本、 元数据信息标 记、 数据库字典和用户访问。 4.根据权利要求3所述的一种数据库 元数据采集与 管理的方法, 其特征在于, 所述的元 数据监控管理模块负责对Debezium发起创建Connector指令, 令Debezium采集数据并保存 至内置关系型数据库中; 从Kafka中读取数据定义语 言; 获取变化的元数据信息并完整保存 到内置关系型 数据库中, 同时将这条保存记录保存到内置关系型 数据库中。 5.根据权利要求3所述的一种数据库 元数据采集与 管理的方法, 其特征在于, 所述的元 数据版本管理模块获取元数据信息; 更新有变化的元数据的版本字段, 同时新增变化的元 数据信息; 使用关联字段 连接新版本和旧版本 。 6.根据权利要求3所述的一种数据库 元数据采集与 管理的方法, 其特征在于, 所述的元 数据标记管理模块负责对内置 关系型数据库中的数据库元数据信息进 行标记, 所述的标记 包括对元 数据信息和关联 联系进行 备注。 7.根据权利要求6所述的一种数据库 元数据采集与 管理的方法, 其特征在于, 所述的标 记包括由系统自动默认标记或者由客户查询后手动进行 标记。 8.根据权利要求3所述的一种数据库 元数据采集与 管理的方法, 其特征在于, 所述的数 据库字典管理模块对内置关系型数据库中的元数据信息进 行查询, 同时支持对历史的数据 字典信息进行 更新调整。 9.根据权利要求3所述的一种数据库 元数据采集与 管理的方法, 其特征在于, 所述的元 数据交互管理模块负责提供元数据信息管理页面并对外提供接口, 支持包括对元数据信息权 利 要 求 书 1/2 页 2 CN 115470192 A 2的查询、 更新和删除。 10.根据权利要求1所述的一种数据库元数据采集与管理的方法, 其特征在于, 所述的 数据源数据库包括MySQ L、 Oracle、 SQ LServer、 DB2或PostgreSQ L。权 利 要 求 书 2/2 页 3 CN 115470192 A 3
专利 一种数据库元数据采集与管理的方法
文档预览
中文文档
10 页
50 下载
1000 浏览
0 评论
0 收藏
3.0分
赞助2.5元下载(无需注册)
温馨提示:本文档共10页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
下载文档到电脑,方便使用
赞助2.5元下载
本文档由 SC 于
2024-02-07 12:42:57
上传分享
举报
下载
原文档
(405.6 KB)
分享
友情链接
DB31-T 1240.1-2020 公共数据共享交换工作规范 第1部分:平台建设和运行管理要求 上海市.pdf
GB-T 35799-2018 化妆品中吡咯烷酮羧酸钠的测定 高效液相色谱法.pdf
商用密码应用安全性测评机构管理办法(试行).pdf
GB-T 28181-2022 公共安全视频监控联网系统信息传输、交换、控制技术要求.pdf
NB-T 47005-2021 板式蒸发装置.pdf
GM-T 0013-2012 可信计算 可信密码模块符合性检测规范.pdf
GB-T 43445-2023 信息安全技术 移动智能终端预置应用软件基本安全要求.pdf
GB 7000.204-2008 灯具 第2-4部分:特殊要求 可移式通用灯具.pdf
GB 15084-2013 机动车辆 间接视野装置 性能和安装要求.pdf
GB-T 15166.1-2019 高压交流熔断器 第1部分:术语.pdf
DB11-T 2046.1-2022 智慧停车系统技术要求 第1部分:总则 北京市.pdf
奇安信 安全内生从框架开始.pdf
GB-T 271-2017 滚动轴承 分类.pdf
cnnic 2012年中国网络购物市场研究报告.pdf
DB34-T 3433.2-2019 计量检测数据信息 第 2 部分:采集规范 安徽省.pdf
T-SISTB 006—2021 现代物业管理评价指标体系1.0.pdf
GM-T 0074-2019 网上银行密码应用技术要求.pdf
专利 黑产设备的确定方法、装置及服务器.PDF
GB-T 35913-2018 地采暖用实木地板技术要求.pdf
GB-T 5762-2012 建材用石灰石、生石灰和熟石灰化学分析方法.pdf
1
/
10
评价文档
赞助2.5元 点击下载(405.6 KB)
回到顶部
×
微信扫码支付
2.5
元 自动下载
官方客服微信:siduwenku
支付 完成后 如未跳转 点击这里 下载
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们
微信(点击查看客服)
,我们将及时删除相关资源。