网易首页 > 网易科技 > 网易科技 > 正文

从单体式向分布式演进 金山云打造更高性能的数据库DragonBase

0
分享至

(原标题:从单体式向分布式演进 金山云打造更高性能的数据库DragonBase)

在信息快速发展多元化的今天,数据库作为现代信息技术领域的三大核心基础之一,重要性愈发明显。随着传统商业数据库产品的热度逐渐下降,更多的企业级用户逐渐转向云分布式数据库及开源数据库产品,云化部署模式正在逐渐超越传统部署模式并成为市场的发展趋势。12月18日,在全球分布式云大会分布式数据论坛上,金山云数据库总监余邵在分享了《金山云分布式数据库DragonBase的实践与发展》。

  从单体式向分布式演进 金山云布局全系数据库产品

  “从单体式向分布式转变,整个数据库架构发展大致分为三种形态,金山云布局了全系的数据库产品”余邵在表示。

  第一种是单体式数据库,以主、备架构为主,如MySQL、PostgreSQL,优势是成熟度和稳定性较高,其劣势在于性能和容量受限单机,在业务发展较快速的情况下,难以满足业务发展的需求。

  第二种是共享式数据库,类似于PolarDB、Aurora,优点是兼容性高、分钟级扩展,缺点也显而易见,比如对硬件要求较高、成本高,由于单点写入,性能只能到十万级,当分布式存储出现故障时影响面较大,比较适用于公有云的客户需求。

  第三种是分布式数据库,目前比较主流的数据库,主要包含分布式SQL引擎和分布式存储。其中,分布式SQL引擎在设计上各个厂商实现的功能基本类似。分布式存储主要包括基于B+ Tree的关系型存储和基于LSM Tree的KV存储。对比前两种架构,分布式数据库在计算能力或存储能力可以很好地实现水平扩展,不足之处在于兼容部分SQL语法和功能方面,不过仍然存在很大的提升空间。

  “金山云在这三种架构类型的数据库上都做了布局,包括单体式的RDS、共享式的KingDB以及分布式的DragonBase。”余邵在表示。

  金山云布局全系数据库产品,在资源层面,金山云公有云上提供了轻量级LXC和KVM,基于K8S的容器化正在研发中;存储可以提供本地磁盘、云磁盘、对象存储等;在引擎类层面,分为关系型产品MySQL、PgSQL、KingDB等,NoSQL包括Redis、MongoDB、InfluxDB等数据库产品;在服务层面,提供数据传输DTS、分布式事务DTX、安全审计DBAudit、数据管理DMS以及数据备份DBS等服务。

  “客户想用你的数据库产品,数据迁移不可避免,DTS就是解决数据迁移的服务类产品。有些传统行业使用Oracle等商业数据库的,我们也需要提供异构数据迁移的能力。一些传统行业做集中式核心系统,往分布式架构去转型,会涉及到服务的拆分,对于跨服务的分布式事务,就需要用到像DTX这样的分布式事务的中间件服务。”余邵在表示,此外审计、管理、备份等重要的增值服务,我们也提供了不同的产品解决方案。

  其实早在2016年金山云就已经发布了DragonBase单体版本,2017-2018年深度优化单体版本稳定性和性能,2019年发布DragonBase分布式1.0版本,2020年发布升级版本2.0支持分布式事务、分布式计算、高可用、弹性扩展、安全审计、数据强一致、灾备恢复、云管平台和数据迁移等诸多核心能力,正在研发的DragonBase3.0版本将在Oracle兼容、分布式计算引擎和自动化运维等方面进行迭代。目前,DragonBase已在金融、互联网、政企等多领域实践应用,提供稳定、高性能、安全可靠的数据库服务。

  余邵在讲到,DragonBase总体架构主要由数据库云平台和内核组成。其中,云平台可以提供数据库的资源调度、故障切换、监控运维、数据校验等能力,并采用容器来部署数据库内核,实现多租户、资源隔离和弹性扩展等功能;数据库内核支持单体式和分布式两种部署形态,采用Share-Nothing架构,能够实现性能和容量的水平扩展,支持Hash、Range、List等分片方式。目前,DragonBase除了能支持X86平台,像主流的ARM平台等也能实现很好地支持。

  六大特性DragonBase不断提升的核心能力

  “强一致、高可用、易扩展、高可靠、高性能、安全性,六大特性成为金山云DragonBase数据库正在打造和一直不断提升的核心能力。”余邵在表示。

  在一致性方面,DragonBase的分布式事务,通过优化读写强一致,性能可以提升30%以上。一是事务处理优化,引入一阶段本地事务+异步管理,能够提高事务吞吐;二是全局中心时钟优化,实现分布式事务的分布式一致性读,通过使用Batch和Pipeline技术实现更小的SQL时延损耗,实现RC隔离级别。

  在高可用性方面,提供主动+被动探活,协议层和应用层探活,支持熔断机制,不可用节点个数超过设定阈值会停止切换,通过人工介入进行确认,避免高可用服务自身的异常导致大规模切换,影响服务可用性,同时支持“两地三中心”和“三地五中心”的跨地域高可用部署,提供实例级、机房级、地域级的服务高可用保障,可以确保RTO<30秒。

  在易扩展方面,DragonBase能够支持计算节点和存储节点的横向(scale-out)和纵向(scale-up)的扩展能力。Scale-out计算节点具有实现集群的吞吐和性能的水平扩展的能力,Scale-out存储节点支持基于分库分表、按子表自动迁移,并支持按容量按访问热度进行迁移。Scale-up可以实现节点的升配和读写分离能力,能够支持多种读写分离和负载均衡策略,来满足不同业务的需求。

  在高可靠性方面,考虑到不同业务对数据一致性的要求不同,DragonBase支持异步、半同步、强同步三种数据同步模式,业务可按需调配。DragonBase的DTS可以支持数据迁移和跨地域数据同步,能够做到表级别同步,甚至是行级别的,延迟能够在秒级甚至毫秒级。除了在线数据的可靠性以外,DragonBase还做了离线数据可靠性验证。

  在高性能方面,DragonBase通过深度优化数据库内核引擎,包括线程池、异步事务提交和异步死锁检测等多种优化技术。“在高并发的情况下,DragonBase单节点性能比社区版本高40%以上,同时可以实现水平扩展”余邵在表示。

  不仅如此,在实际运维的过程中,DragonBase的智能管控平台提供多维度服务。同时,DragonBase具有完备的管理功能,支持实例创建升级、备份恢复、弹性扩展、数据迁移等,并提供OPENAPI等接口,供应用端进行创建、删除、升级实例等基本操作。

  在互金行业的灾备方案中,DragonBase支持两地三中心,能够实现同城双活、异地灾备和单元化,保证每个AZ里面的应用和数据都是完整的。“在数据层面,我们通过多副本的同步机制,保证数据是一致的。从而保证同地域的RPO趋于0。跨地域则使用DTS异步复制,通过并行复制和灵活任务调度等优化手段,使得RPO可以达到秒级。”余邵在表示。

  从单体式到共享架构再到主流的分布式数据库,金山云正在不断完善并一步步打造更高阶性能的数据库产品,为更多的企业提供更优异的数据计算和存储服务。

相关推荐
热点推荐
贝克汉姆长子在说谎?英国媒体爆料婚纱实情:为妮可拉准备了一年

贝克汉姆长子在说谎?英国媒体爆料婚纱实情:为妮可拉准备了一年

译言
2026-01-20 21:53:55
考古王菲李亚鹏的微博,竟然诡异的磕到了

考古王菲李亚鹏的微博,竟然诡异的磕到了

金牌舆情官
2026-01-20 21:19:04
“邓超瘦成男大了”登热搜,此前孙俪曾透露他腰围小了10厘米

“邓超瘦成男大了”登热搜,此前孙俪曾透露他腰围小了10厘米

红星新闻
2026-01-19 17:57:29
亚洲第一赌场新东泰覆灭记:性交易泛滥,富商疯狂砸钱,挥金如土

亚洲第一赌场新东泰覆灭记:性交易泛滥,富商疯狂砸钱,挥金如土

谈史论天地
2026-01-21 06:10:03
日媒发声:美国这次太大胆了

日媒发声:美国这次太大胆了

陆弃
2026-01-20 10:34:14
湖勇跃跃欲试?记者:34岁前雄鹿冠军前锋米德尔顿有望被奇才买断

湖勇跃跃欲试?记者:34岁前雄鹿冠军前锋米德尔顿有望被奇才买断

懂球帝
2026-01-21 10:50:10
脾脏破裂,多根肋骨骨折:卡德罗夫家族危险驾驶早就劣迹斑斑

脾脏破裂,多根肋骨骨折:卡德罗夫家族危险驾驶早就劣迹斑斑

鹰眼Defence
2026-01-20 18:40:19
嫣然医院已筹满整年预算:多家知名企业慷慨解囊,各界人士晒出“打钱”记录

嫣然医院已筹满整年预算:多家知名企业慷慨解囊,各界人士晒出“打钱”记录

上游新闻
2026-01-20 16:37:06
-7℃,湖北新一轮雨雪即将来袭

-7℃,湖北新一轮雨雪即将来袭

极目新闻
2026-01-21 07:30:22
官方出手了!吴磊床照事件再升级,何猷君被曝出轨,赵露思被牵连

官方出手了!吴磊床照事件再升级,何猷君被曝出轨,赵露思被牵连

查尔菲的笔记
2026-01-20 16:05:51
山东硬汉最爱的啤酒“白月光”,引爆一颗巨雷

山东硬汉最爱的啤酒“白月光”,引爆一颗巨雷

金错刀
2026-01-19 16:14:47
越媒:越南U23队长家邀请全村看球,并准备了100公斤瓜子糖果

越媒:越南U23队长家邀请全村看球,并准备了100公斤瓜子糖果

懂球帝
2026-01-20 21:21:07
美军上将曾警告:中美开战的恐怖场面!11万精兵或难敌神秘力量

美军上将曾警告:中美开战的恐怖场面!11万精兵或难敌神秘力量

文史旺旺旺
2025-11-11 21:18:04
西贝回应人民日报评论,还加了15个感叹号:贾国龙一定对照反思,学习,改进

西贝回应人民日报评论,还加了15个感叹号:贾国龙一定对照反思,学习,改进

每日经济新闻
2026-01-20 10:42:30
刚刚!华为鸿蒙突然大更新,新界面长这样!

刚刚!华为鸿蒙突然大更新,新界面长这样!

科技堡垒
2026-01-20 12:27:42
西班牙两列高铁撞了...道是新的,车是新的,莫名出问题!专家:蹊跷...

西班牙两列高铁撞了...道是新的,车是新的,莫名出问题!专家:蹊跷...

英国那些事儿
2026-01-20 23:34:46
宗庆后母亲去世,享年101岁,晚年瘦了太多,住大房子装修豪华!

宗庆后母亲去世,享年101岁,晚年瘦了太多,住大房子装修豪华!

古希腊掌管松饼的神
2026-01-20 18:24:34
袁和平《镖人》:但凡吴京拉胯一点,都压不住这群王炸配角

袁和平《镖人》:但凡吴京拉胯一点,都压不住这群王炸配角

星宿影视鸭
2026-01-19 18:56:18
因工作变动,郝鹏辞去辽宁省人大常委会主任

因工作变动,郝鹏辞去辽宁省人大常委会主任

新京报政事儿
2026-01-21 07:39:09
田朴珺送书给段永平教他赚钱!王石那个捂脸的动作,胜过千言万语

田朴珺送书给段永平教他赚钱!王石那个捂脸的动作,胜过千言万语

火山诗话
2026-01-19 06:54:12
2026-01-21 11:12:49

科技要闻

中芯国际等巨头集体提价,8英寸芯片最高涨20%

头条要闻

中学食堂承包商举报校领导2年拿走300万现金 官方通报

头条要闻

中学食堂承包商举报校领导2年拿走300万现金 官方通报

体育要闻

如果NBA只剩下最后一个传统中锋

娱乐要闻

李亚鹏2天获1291万网友力挺

财经要闻

拆解涉税黑中介虚开套路

汽车要闻

奇瑞张贵兵:墨甲不做秀技术的企业 只做痛点终结者

态度原创

亲子
本地
旅游
时尚
军事航空

亲子要闻

“全职宝妈群体就这德行”,学校表演让儿子穿女装,心机重得可怕

本地新闻

云游辽宁|漫步千年小城晨昏,“康”复好心情

旅游要闻

山西推出49条冰雪旅游线路 “冷资源”激发“热活力”

告别93岁时尚传奇Valentino:他留下了全世界最美的“红”

军事要闻

德军13人前脚刚走 荷兰2名军人也撤离格陵兰岛

无障碍浏览 进入关怀版
×