iso file download
文库搜索
切换导航
文件分类
频道
仅15元无限下载
联系我们
问题反馈
文件分类
仅15元无限下载
联系我们
问题反馈
批量下载
(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210906036.0 (22)申请日 2022.07.29 (71)申请人 天翼云科技有限公司 地址 100007 北京市东城区青龙胡同甲1 号、 3号2幢2层20 5-32室 (72)发明人 朱军 黄景平 段江南 廖少波 (74)专利代理 机构 北京三聚阳光知识产权代理 有限公司 1 1250 专利代理师 朱惠琴 (51)Int.Cl. G06F 16/28(2019.01) G06F 16/22(2019.01) G06F 16/23(2019.01) G06F 16/245(2019.01) G06F 16/2453(2019.01)G06F 9/50(2006.01) (54)发明名称 ClickHouse集群数据均衡方法、 装置及设备 (57)摘要 本发明公开了一种ClickHouse集群数据均 衡方法、 装置及设备, 其中, 所述方法包括: 在所 述ClickHouse集群的源节点上, 构建与目标表结 构相同的第一表, 所述第一表用于接收均衡过程 中新插入的数据, 以使 得所述目标表中的数据在 均衡过程中不发生变化; 从所述目标表中复制出 需要均衡至目标节点的第一数据, 并发送至所述 目标节点; 在接收到所述目标节点的成功反馈 后, 从所述目标表中删除所述第一数据, 并与所 述第一表合并。 本发明提供的技术方案, 在数据 均衡过程中, 无需停止节点, 占用额外的存储空 间小, 无需人为干预调整权 重, 耗时少。 权利要求书2页 说明书7页 附图3页 CN 115455122 A 2022.12.09 CN 115455122 A 1.一种Cl ickHouse集群扩容数据均衡的方法, 其特 征在于, 所述方法包括: 在所述ClickHouse集群的源节点上, 构建与目标表结构相同的第一表, 所述第一表用 于接收均衡过程中新插 入的数据, 以使得 所述目标表中的数据在均衡过程中不发生变化; 从所述目标表中复制出需要均衡至目标节点的第一数据, 并发送至所述目标节点; 在接收到所述目标节点的成功反馈后, 从所述目标表中删除所述第一数据, 并与所述 第一表合并。 2.根据权利要求1所述的方法, 其特征在于, 所述从所述目标表中复制出需要均衡至目 标节点的第一数据之前, 还 包括: 根据所述源节点的数量和所述目标节点的数量, 确定均衡指标; 根据所述均衡指标, 确定所述第一数据的大小。 3.根据权利要求2所述的方法, 其特征在于, 所述目标节点为多个, 所述均衡指标为需 要均衡至其中一个所述目标节点的所述第一数据与所述目标表的当前 数据大小的比值; 所述在接收到所述目标节点的成功反馈后, 从所述目标表中删除所述第一数据, 并与 所述第一表合并, 包括: 在接收到所有的所述目标节点的成功反馈后, 从所述目标表中删除所述第一数据, 并 与所述第一表合并。 4.根据权利要求1所述的方法, 其特征在于, 所述在所述ClickHouse集群的源节点上, 构建与目标表结构相同的第一表之前, 还 包括: 针对每一所述源节点, 确定均衡过程所需的磁 盘空间大小; 判断可用磁 盘空间是否大于或等于所述磁 盘空间大小。 5.根据权利要求4所述的方法, 其特征在于, 所述目标节点为多个, 所述磁盘空间大小 等于第一空间大小和 第二空间大小之和, 所述第一空间大小为需要均衡至其中一个所述目 标节点的所述第一数据的大小, 所述第二空间大小为用于存储需要均衡至其中一个所述目 标节点的所述第一数据的第二表自身的大小。 6.根据权利要求5所述的方法, 其特征在于, 所述第 二表自身的大小等于 需要均衡至其 中一个所述目标节点的所述第一数据的行 数乘以每行 所需的字节数。 7.根据权利要求1所述的方法, 其特征在于, 所述从所述目标表中复制出需要均衡至目 标节点的第一数据之前, 还 包括: 在所述目标表中添加序号列, 并填充行号。 8.一种Cl ickHouse集群扩容数据均衡的装置, 其特 征在于, 包括: 临时表构建模块, 用于在所述ClickHouse集群的源节点上, 构建与目标表结构相同的 第一表, 所述第一表用于接 收均衡过程中新插入的数据, 以使得所述 目标表中的数据在均 衡过程中不发生变化; 数据转移模块, 用于从所述目标表中复制出需要均衡至目标节点的第一数据, 并发送 至所述目标节点; 表更新模块, 用于在接收到所述目标节点的成功反馈后, 从所述目标表中删除所述第 一数据, 并与所述第一表合并。 9.一种电子设备, 其特 征在于, 包括: 存储器和 处理器, 所述存储器和所述处理器之间互相通信连接, 所述存储器用于存储权 利 要 求 书 1/2 页 2 CN 115455122 A 2计算机程序, 所述计算机程序被所述处理器执行时, 实现权利要求1至7中任一项所述的 ClickHouse集群扩容数据均衡的方法。 10.一种计算机可读存储介质, 其特征在于, 所述计算机可读存储介质用于存储计算机 程序, 所述计算机程序被处理器执行时, 实现权利要求1至7中任一项所述的ClickHouse集 群扩容数据均衡的方法。权 利 要 求 书 2/2 页 3 CN 115455122 A 3
专利 ClickHouse集群数据均衡方法、装置及设备
文档预览
中文文档
13 页
50 下载
1000 浏览
0 评论
309 收藏
3.0分
赞助3元下载(无需注册)
温馨提示:本文档共13页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
下载文档到电脑,方便使用
赞助3元下载
本文档由 思考人生 于
2024-02-07 20:38:16
上传分享
举报
下载
原文档
(628.2 KB)
分享
友情链接
GB-T 30520-2014 会议分类和术语.pdf
GB-T 26141.2-2010 无损检测 射线照相底片数字化系统的质量鉴定 第2部分:最低要求.pdf
T-CISA 293—2022 钢铁企业重点工序能效标杆对标指南.pdf
T-HEBQIA 260—2024 节能型陶瓷砖.pdf
信通院 人工智能白皮书-2022年.pdf
信通院 区块链白皮书 2023年.pdf
工业数据分类分级指南(试行).pdf
GB-T 37980-2019 信息安全技术 工业控制系统安全检查指南.pdf
DB3202-T 1052-2023 特种设备作业人员设置指南 无锡市.pdf
T-JSSLKX 002—2023 小型农田水利工程规划设计导则.pdf
GB-T 41670-2022 安全与韧性 社区韧性 突发事件弱势群体救援指南 ISO 22395-2018.pdf
GB-T 25181-2019 预拌砂浆.pdf
如何结合使用TOGAF® 和IT4IT™ 标准.pdf
GB-T 39044-2020 政务服务平台接入规范.pdf
中国移动 5g r17、r18技术解读.pdf
GB-T 42807-2023 港口基础地理信息交换服务技术要求.pdf
JR-T 0138-2016 银团贷款业务技术指南.pdf
GB-T 41542-2022 地球卫星轨道空间环境探测要素通用规范.pdf
GB-T 41619-2022 科学技术研究项目评价实施指南 基础研究项目.pdf
T-XLTDA 005—2021 地方特色乳制品 风味奶酪.pdf
1
/
13
评价文档
赞助3元 点击下载(628.2 KB)
回到顶部
×
微信扫码支付
3
元 自动下载
官方客服微信:siduwenku
支付 完成后 如未跳转 点击这里 下载
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们
微信(点击查看客服)
,我们将及时删除相关资源。