引言
TiDB是PingCAP公司研发的开源分布式关系型数据库,具有兼容MySQL协议,易水平扩展、高可用、强一致、HTAP等特性。目前TiDB已在汽车之家论坛,好友粉丝,智能推荐,财务报表,818台网互动等重要业务上应用,本文介绍TiDB数据库在汽车之家的应用与实践实践情况。
1. TiDB介绍
1.1TiDB数据库的发展
移动互联网时代,海量数据及各种应用场景给数据库存储带来诸多挑战,如海量数据的存储扩展,支持新的数据模型,弹性伸缩的需求等等给传统关系型数据(MySQL,SQLServer,Oracle等)带来巨大挑战。在此背景下新型数据库NewSQL层出不穷,TiDB就是其中的佼佼者。
TiDB是 PingCAP研发的开源分布式关系数据库,是一款可同时支持在线事务处理与在线分析处理 (HTAP) 的融合型分布式数据库产品。诞生于2015年,2017年出了1.0版本,2018年发布V2.0,2020年发布V4.0版本,2021年发布5.0版本,目前最新版本是6.1版。
1.2TiDB主要特性
TiDB具有兼容MySQL协议,易水平扩展、高可用、强一致,HTAP等特性。TIDB适用于数据量较大单机存储不足需要拆库拆表,以及需要数据强一致,支持分布式事务,高可用的应用场景。
1.3TiDB架构
TiDB 分布式数据库将整体架构拆分成了多个组件模块,各组件之间互相通信,组成完整的 TiDB 系统。主要可以分为TIDB Server、PDserver,TIKV server组件。
2.之家TiDB发展及应用
2.1之家TiDB发展历程
汽车之家2019年开始对TiDB进行初步尝试,当时使用的TiDB版本是V2.0。2020年TiDB重要版本4.0发布(支持TiFLash)后,TIDB在之家讯速发展应用,目前在粉丝业务,经销商,财务,智能推荐资源池,818台网互动等重要业务上都有应用。2022年我们完成TiDB集群版本升级,以利用V5.x的MPP新特性。
2.2之家TiDB典型应用
► 2.2.1 智能推荐资源池
项目背景
智能推荐资源池业务:是汽车之家核心业务,推荐资源池的数据量巨大,存在10+张亿级大宽表,以前使用2套传统MySQL数据库存储,存在着单机存储空间不足、表结构不能快速变更,及两套MySQL集群数据同步延时严重的痛点。
项目实施
优化前:
方案选型对比:
对DB中间件、ES、TiDB、HBase方案进行对比,综合考虑业务兼容性、扩展性,迁移成本等因素,我们选择了TIDB方案。
架构优化后:
资源池新的后端数据库由MySQL改为TiDB,新架构如图。新存储使用TIDB数据库,解决了原架构单机空间不足,大表变更不便,多套DB同步延时等业务痛点。
► 2.2.2 财务内审及报表业务
项目背景
财务内审报表涉及多种数据源,无法多表join计算,导入数仓计算是隔日出报表不够及时,无法满足更高业务时效需求。
项目实施
► 2.2.3 818台网互动
项目背景
"818全球汽车夜"是由汽车之家打造的汽车行业顶级盛典,其中的台网互动业务包括红包互动,秒杀车等等,数据量大,并需要多机房高可用的高可靠架构。台网互动后端存储,我们选用了TIDB数据库。
项目实施
► 2.2.4 TIDB应用场景总结
3. 之家TiDB运维实践
3.1之家TIDB自动化运维建设
数据库自动化建议需要考虑的工作有:
之家TiDB运维体系建设主要是通过TiDB 原生工具 + 自主研发自动化运维平台来实现。
TiDB自动化产品界面:
3.2遇到问题及解决
4. 结语
本文介绍了TiDB数据库特性及在之家的发展历程,典型业务应用场景,TiDB具有兼容MySQL协议,易水平扩展、高可用、强一致,HTAP等特性,在之家多个重要业务得到应用。另外文章还介绍了之家TIDB自动化运维建设情况及应用实践遇到的问题及解决。
未来之家TiDB计划继续进行TiDB运维体系建设,并重点对TiDB6.0新特性测试应用,另外对TIDB容器化进行尝试。
作者简介
陶会祥
■ C端及中台产研中心,云平台部。
■ 2020 年加入汽车之家,负责之家数据库/缓存的运维及RDS产品研发工作,致力于为公司提供安全,稳定,可靠的数据库/缓存服务。