网易首页 > 新闻中心 > 新闻 > 正文

TiDB 7.1 LTS 发版:为关键业务提供业务稳定性和多租户场景支持

0
分享至

(原标题:TiDB 7.1 LTS 发版:为关键业务提供业务稳定性和多租户场景支持)

近日,企业级开源分布式数据库厂商 PingCAP 正式发布 TiDB 7.1版本,这也是2023年度发布的首个 LTS(Long Term Support) 版本,汇集了来自20+ 个真实场景带来的功能增强,累计优化和修复140+ 功能,旨在提升关键业务的稳定性和性能,帮助开发人员和数据库管理员提高生产力并进一步降低总体拥有成本(TCO)。用户可在生产环境中使用 TiDB 7.1。

TiDB 半年版本回顾

TiDB 7.1 LTS 距离上一个 LTS 版本6.5已经过去了整半年,在这期间,PingCAP 对产品的关键能力做了大量的增强和优化,其中最重要的特性有:

● TiDB 7.0提供了基于资源组的资源管控(Resource Control) :这使得 TiDB 在针对多租户场景有了很好的应对。事实上,经常有用户希望借助 TiDB 的可伸缩特性将多套业务系统归一到一个集群中,从而使得集群管理、资源利用都能得到有效的改进。资源管控特性提供了对多租户的支持,并解决了不同租户间资源争抢的问题。在新版本中,用户可以很方便地借助这个功能完善数据库整合的使用场景。

● Multi-RocksDB 特性 :借助将单一 TiKV 实例中的 RocksDB 拆成多份,TiKV 的写吞吐提升近三倍;此外,在新架构中数据分片(Region)大小将变得更大,由此减小维护分片所带来的开销,减少单位存储所需的固定 CPU 消耗,更节省成本。这使得大写入吞吐,或者需要大量存放温数据的 Data Serving 场景下,TiDB 的表现得到了本质的提升。

对于这些重要的重量级特性,在新版本中也将持续得到打磨和加强。这半年中,TiDB 在一些关键场景的性能也得到长足提升:

● 数据导入 Lightning 性能提升近30% ;

● 真实业务测试下,Analyze Table 性能提升42%+ ;

● 标准测试 TPC-H 和真实业务测试下,TiDB 分析能力分别提升15% 和25% ;

● TiCDC 针对大型单表复制性能提升可达90%+ 。

TiDB 7.1功能特性

TiDB 7.1是PingCAP 计划在2023年发布的两个长期可支持(LTS)版本中的第一个,它提供了一个面向未来的数据库,可以为各种关键业务应用程序提供动力。TiDB 7.1将为用户带来以下特性:

● 更稳定地支持关键业务负载 ,为 DBA 提供多工作负载稳定性控制,并显著改善尾部延迟;

● 以更少的资源提供更佳的性能 ,通过架构增强实现更高的吞吐以及更快的在线 DDL。

此外,TiDB 7.1企业版增强了数据库审计功能,通过更细粒度的事件过滤控制、更友好的过滤条件设置方式、新增的 JSON 文件输出格式以及审计日志的生命周期管理,大幅提升系统的审计能力。

2.1更稳定地支持关键业务负载

2.1.1通过资源组改进资源管控的用户体验,提供更好的隔离性

PingCAP 在 TiDB 7.0中增加了通过资源组进行资源管控的功能,为 TiDB database consolidation (数据库整合)方案奠定了基础,具有里程碑的意义。多个业务可共享同一个 TiDB 集群,DBA 可为不同的工作负载设置资源配额和优先级,例如为关键业务分配更高的优先级,确保其能够优先获得资源,避免受到其他工作负载的干扰。

在 TiDB 7.1中,资源管控特性正式 GA 了,并加入了两个特性增强:

● 降低了在重写入密集型工作负载中出现的尾延迟:资源组通过资源配额和优先级控制工作负载。优先级由存储级别控制。当工作负载写入繁重时,基于优先级重新调度机制有时会造成更高的尾延迟(Tail Latency)。在7.1版本中,尾延迟被修正到预期水准。

● 增加原生负载校准工具,帮助用户设置更准确的资源资源分配:资源分配的基础是用户对负载的资源使用量有所了解。新增的校准工具将很好的帮助您评估相关信息,以合理配置资源组。最快的方法是从 SQL 接口运行校准命令来估计基准测试(如 TPC-C 和 sysbench)的资源使用情况。

2.1.2多个热点场景下性能和稳定性提升

对 TiDB 的底层行存储 TiKV 有三个关键增强,以降低延迟提升稳定性(通过 p99延迟衡量)。新版本引入了三项优化,分别针对三个级别热点进行处理:Key 级别、分片(Region)级别和节点级别:

● Key 级热点:锁冲突优化

● Region 级热点:TiKV 子任务的批处理化

● 节点级热点:引入了基于负载的副本读取

锁冲突优化(GA)

TiDB 引入了处理 Key 级热点的优化。在遇到许多单点悲观锁冲突的负载中,唤醒等待请求的算法在新版本中将表现得更稳定,最大限度地减少了重试的资源浪费,从而节省了整个集群的资源并降低了尾延迟。测试表明,当启用锁冲突优化时,如果吞吐量相对较小,即使在冲突最严重的工作负载中,新版本的尾延迟也将降低40-60%。

批处理 TiKV 子任务(GA)

选择性较差的查询可能会导致需要读取许多数据。在 TiDB 的分布式存算分离架构中,这样的查询可能会带来数万或数十万个 RPC 请求用于获取数据,如果使用索引读取则将更进一步加重这一负担。

TiDB 服务器作为 TiKV 客户端,现在可以识别针对同一分片的批处理任务,并将这些批量发送到对应的存储节点。这大大减少了网络的 RPC 开销,使得这些查询更稳定。这个增强可以将相应场景中的延迟减少多达50%。

基于负载的副本读取(GA)

这个特性用于优化节点级读热点。当大批量查询以不均匀的方式发起读取,可能会出现节点热点。注入 Index Lookup JOIN 这类常见的事情都可能会导致这种情况。一旦发生,读取请求会排队,当队列塞满时,一些请求可能会等待相当长时间。PingCAP 希望通过更均匀地分配工作来减少延迟。

新版本中,TiDB 引入了基于负载的副本读取来实现这一点。它为队列提供了一个可配置的持续时间阈值,当超过该阈值时,它会告诉 TiDB 开始优先考虑副本读取。在读热点的情况下,与不打散读热点相比,该功能可提高读取吞吐量70%~200%。

2.2更少的资源,更佳的性能

TiDB 7.1提升了 TiDB 读、写以及管理操作的性能,以提供更好的用户体验。新版本中,TiDB 增加了多值索引以提供对 JSON 的查询效率。此外,在写入吞吐、分析查询速度和后台任务效率方面也进行了大量的改进和优化。

2.2.1多值索引(GA)以增加速度和灵活性

多值索引也称为“JSON 索引”,这种新型辅助索引在 TiDB 6.6中引入并在7.1中 GA。多值索引支持索引记录到数据记录的 N:1映射,使得查询可以快速检查存储在 JSON 数组中的特定值。

无论该数据存储为 blob,还是邮政编码直接存储为 zip 数组,用户都可以创建多值索引来定位特定邮政编码存在于哪一行。

索引是使用表达式创建的,该表达式将 JSON 数据逻辑解析为生成列(Generated Column)和该列上的二级索引。如果用户将 JSON 存储为 blob,并且需要支持遍历多层嵌套的查询,只需创建一个索引以检索。

2.2.2更快的 TTL(GA)

TTL (Time to live) 在PingCAP 的 TiDB 6.5中作为一个实验特性进行了介绍,而在7.1中这个特性 GA 了。此外在新版本中,TiDB 节点可以共享 TTL 相关任务并并发执行,从而拥有了更好的性能和资源利用率。

2.2.3延迟物化加速分析查询(GA)

TiFlash 是 TiDB 的列式存储引擎,在7.1版本中延迟物化特性 GA。当表扫描拥有高过滤性的时候,TiDB 优化器可选择让 TiFlash 启用延迟物化。开启该特性后,TiFlash 支持下推部分过滤条件到 TableScan 算子,即先扫描过滤条件相关的列数据,过滤得到符合条件的行后,再扫描这些行的其他列数据,继续后续计算,从而减少 IO 扫描和数据处理的计算量。

此功能的影响取决于实际负载和数据分布。在某些情况下,它可以显著减少延迟(在PingCAP 的测试中延迟最高可降低70%)。TiDB 的查询优化器可以决定是否使用它,默认情况下打开是安全的。

2.2.4 Multi-RocksDB 存储引擎带来巨大性能提升

在 TiDB 6.6中,PingCAP 引入了对 TiKV 存储架构的重大更改。虽然这个架构仍然是实验性的(默认关闭,并且只能在新集群中启用),但在这个 LTS 版本中,该特性获得重大加强,并在预生产环境中收到了很好的测试反馈。

在 TiDB 6.6之前,单一 TiKV 节点所有 Region 共享一个 RockDB 存储引擎。新架构则将不同 Region 分别存放在不同 RocksDB。新架构的好处是显著的:

● 减少 RocksDB 对应的 LSM 负担,增加了吞吐量,测试结果显示写入吞吐量 增加了200% 。

● 使用不同 RocksDB 也会 减少 Compaction 带来的写放大,降低资源消耗。

● 更好的写入吞吐使集群的扩展 速度提高500% 。

● 在测试一些真实的客户工作负载时,PingCAP 观察到尾部延迟 减少了近50% 。

● 更小的单位存储消耗,使得集群可扩展性进一步增强。

在 TiDB 7.1中,PingCAP 进一步提高了该特性的性能和稳定性,并添加了网络带宽优化。当前仍然缺失的是 TiCDC、BR 等生态工具的支持,当这些完成后PingCAP 将宣布这个特性 GA。

2.2.5 Online DDL 的大幅提升(实验特性)

在 TiDB 7.1中,类似于前述 TTL 改进,PingCAP 引入了跨 TiDB 节点分配 DDL 作业的框架,以进一步提高性能。

更多 TiDB 7.1版本新功能,请查阅 TiDB 官网 Release Notes , 立即 下载试用 ,开启 TiDB 体验之旅。

相关推荐
热点推荐
他是湖北省副书记,全国最年轻的副省部级干部,未来可期

他是湖北省副书记,全国最年轻的副省部级干部,未来可期

蹲马桶看历史
2024-04-28 16:59:26
雄鹿1-3众生相:字母哥利拉德满脸绝望 里弗斯脸色铁青提前认输

雄鹿1-3众生相:字母哥利拉德满脸绝望 里弗斯脸色铁青提前认输

追球者
2024-04-29 09:40:01
我不需要老公,山东29岁女孩花50万巨资买英国人的种,生3个混血

我不需要老公,山东29岁女孩花50万巨资买英国人的种,生3个混血

阿七说史
2024-04-28 17:24:14
自家小区停车还要被贴“违停单”?居民吐槽:燃油车主太难了!这里不让停,那里停不了

自家小区停车还要被贴“违停单”?居民吐槽:燃油车主太难了!这里不让停,那里停不了

上观新闻
2024-04-29 11:12:14
绝了!伊能静为秦昊写的小作文堪称顶级宣发,她能不能教教大S?

绝了!伊能静为秦昊写的小作文堪称顶级宣发,她能不能教教大S?

娱乐白名单
2024-04-28 17:29:27
莫名其妙!中航购买国产飞机C919,为何要用美元进行结算?

莫名其妙!中航购买国产飞机C919,为何要用美元进行结算?

吃鱼思故渊
2024-04-27 22:47:12
女子因值机起冲突,被航空公司永久拒载!

女子因值机起冲突,被航空公司永久拒载!

上海一中法院
2024-04-29 09:35:34
开鲁县土地“有偿使用费”再调查:张家兄弟称是招商引资而来,早年平整土地花费巨大

开鲁县土地“有偿使用费”再调查:张家兄弟称是招商引资而来,早年平整土地花费巨大

红星新闻
2024-04-28 23:30:17
A股传来三大重磅消息,其中一条股民惊呆了,明天的行情稳了?

A股传来三大重磅消息,其中一条股民惊呆了,明天的行情稳了?

彩云的夕阳
2024-04-29 12:05:47
塞力斯问界M7声明与博世冲突,谁的谎言如此不堪?谁在玩弄车主?

塞力斯问界M7声明与博世冲突,谁的谎言如此不堪?谁在玩弄车主?

美芳
2024-04-28 22:27:57
76人1-3尼克斯濒临出局 布伦森47+10创6纪录恩比德末节5中0

76人1-3尼克斯濒临出局 布伦森47+10创6纪录恩比德末节5中0

醉卧浮生
2024-04-29 05:20:45
普京还没踏上访华飞机,俄抢先冻结4亿元资产,中方心理发生变化

普京还没踏上访华飞机,俄抢先冻结4亿元资产,中方心理发生变化

听风听你
2024-04-28 11:33:30
后续!穿和服跳日本舞原因找到了,两女子不简单,知情人透露内情

后续!穿和服跳日本舞原因找到了,两女子不简单,知情人透露内情

影孖看世界
2024-04-28 19:44:30
你的老师都做过什么惊为天人的事情?网友:从此全校的人惊为天人

你的老师都做过什么惊为天人的事情?网友:从此全校的人惊为天人

兰妮搞笑分享
2024-04-14 05:44:28
访华结束,布林肯打破惯例,没有直奔机场,去了一个不起眼的地方

访华结束,布林肯打破惯例,没有直奔机场,去了一个不起眼的地方

三分亮剑
2024-04-28 15:56:07
最高年薪120万元!重庆面向全球发布5016个博士后岗位

最高年薪120万元!重庆面向全球发布5016个博士后岗位

上游新闻
2024-04-29 16:38:15
普京为什么不趁机进攻,反而搞起了军队反腐?

普京为什么不趁机进攻,反而搞起了军队反腐?

观察者网
2024-04-29 08:10:16
广厦“超市”开张,孙铭徽欲加盟首钢,辽篮截胡广东抢胡金秋

广厦“超市”开张,孙铭徽欲加盟首钢,辽篮截胡广东抢胡金秋

维世话体坛
2024-04-29 11:45:40
《承欢记》大结局,最好命的不是杨紫,是身在福中不自知的她

《承欢记》大结局,最好命的不是杨紫,是身在福中不自知的她

梨芽
2024-04-28 18:53:09
突发!38岁歌手宋金文因喝酒意外离世,曾登上央视,带独子跑外卖

突发!38岁歌手宋金文因喝酒意外离世,曾登上央视,带独子跑外卖

青芳草
2024-04-29 12:48:06
2024-04-29 18:46:44

头条要闻

专家警告:美若将南海台海联动 或同时"出牌"牵制中国

头条要闻

专家警告:美若将南海台海联动 或同时"出牌"牵制中国

体育要闻

足球童话!执教16年,从业余联赛到德甲

娱乐要闻

田馥甄遭抵制,蔡依林却能稳稳捞金?

财经要闻

牛市,无需多言

科技要闻

马斯克收获大礼,李彦宏梅开二度?

汽车要闻

配置更丰富 静态体验2024款欧拉好猫

态度原创

游戏
健康
旅游
公开课
军事航空

PS2/3档《辐射4》现可免费升级 PS精选集版仍需付费

春天野菜不知不识莫乱吃

旅游要闻

入境游热度持续攀升 “畅游中国”更便捷

公开课

父亲年龄越大孩子越不聪明?

军事要闻

以军轰炸加沙地带南部城市拉法 至少15人死亡

无障碍浏览 进入关怀版
×