鸿蒙开发者社区

WOT技术大会

公众号矩阵

移动端

短视频免费课程课程排行直播课软考学堂

全部课程厂商认证 IT技术 25年5月软考 PMP项目管理免费题库

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO软考

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

51CTO软考题库

账号设置退出

数据库

1.6w内容

关注

数据库话题为数据库工程师和数据库管理人员提供数据库相关新闻资讯、前沿技术、管理和开发技巧、使用案例等内容，涉及SQL Server、MySQL、MariaDB、PostgreSQL、Redis、MongoDB等数据库。

文章博文帖子课程

共 1.6w 条

国产数据库：五款国产数据，你知道哪款？

TiDB 是由PingCAP 公司研发设计的开源分布式 HTAP (Hybrid Transactional and Analytical Processing) 数据库，它结合了传统的关系型和非关系型数据库的最佳特性。TiDB 兼容 MySQL，支持无限的水平扩展，具备强一致性和高可用等特性。

2022-10-21 07:07:33

TiDB HTAP 数据库

PostgreSQL 的并行框架

PostgreSQL 提供了一些简单的机制使得编写并行算法更加简单。你可以通过使用 ParallelContext 数据结构去唤起后台工作进程、初始化工作进程的进程状态（以匹配唤起他们的后台进程），使进程通过动态共享内存 (Dynamic Shared Memory) 进行通信和写并不复杂的逻辑且不用意识到并行的存在就可以让代码跑在用户后台进程或者任一并行的工作进程。

2022-10-20 23:15:10

PostgreSQL 算法机制

图解 | 聊聊 MyBatis 缓存

本篇分别介绍了 MyBatis 一级缓存、二级缓存、自定义缓存的原理和使用，其中还穿插了 4 道考题来验证 MyBatis 缓存的功能。不足之处是 MyBatis 缓存源码未分析。

2022-10-20 18:00:00

MyBatis 缓存类型

业务单表读写缓慢如何优化？

关系型数据库目前市面上主流无非三种：MySQL、Oracle、SqlServer，笔者更倾向于MySQL，也是很多新型企业在用的一种数据库，因此本篇文章也将重点围绕MySQL展开。

2022-10-20 09:26:24

MySQL Oracle SqlServer

关于跳表，这么解释你肯定能听懂

跳表中，每一层索引都是一个有序的单链表，单链表删除元素的时间复杂度为 O(1)，最多需要删除 LogN 个元素（索引层数为 LogN），所以删除元素的总时间包 = 查找元素的时间 + 删除 LogN 个元素的时间 = O(LogN ) + O(LogN ) = 2O(LogN )，忽略常数部分，删除元素的时间复杂度为 O(LogN)。

2022-10-20 08:51:40

跳表复杂度索引

为SQLserver增加一只透视眼，你学会了吗？

随着不断积累新的故障模型，优化知识体系，分析诊断的能力也会不断提升。随后我们会在DBAIOPS社区开展SQL SERVER的智能诊断测试工作，也希望有兴趣的朋友参与测试，并给我们反馈测试结果，用于改善知识库。

2022-10-20 07:43:46

SQLserver 故障 SQL

如何在 Oracle 中检查临时表空间

临时表空间用于 Oracle 中的排序操作。这是一个非常重要的表空间，如果管理不当，可能会出现问题。让我们看看临时表空间管理的各种查询。

2022-10-19 21:24:24

临时表空间 Oracle

系统请求1次10s，我被客户爆骂，一怒之下优化数据库提升百倍性能

那么什么时候主库写数据的压力会过大呢？其实我们之前也聊过这个问题，那就是多个业务共用一个物理数据库的，比如商品相关的表、订单相关的表和用户相关的表等，所有表都放到了一个MySQL数据库中。

2022-10-19 17:42:22

数据库 MySQL

聊一聊十个Pandas的小技巧

pandas是数据科学家必备的数据处理库，我们今天总结了10个在实际应用中肯定会用到的技巧。

2022-10-19 15:20:58

pandas 数据处理库技巧

你还不知道怎么做数据库读写分离么，用这个中间件让你性能提10倍

我们以mysql一主两从架构为例，也就是一个master节点下有两个slave节点，在这套架构下，写请求统一交给master节点处理，而读请求交给slave节点处理。

2022-10-18 23:03:53

mysql 架构 slave

数据仓库、数据集市、数据湖、数据中台到底有什么区别？都得做吗？

用了一系列时髦的新技术不见得就是数字化领军企业，不用也不见得就是古典互联网时代的落后作坊。

2022-10-18 10:10:52

JVM & MySQL时区配置问题-两行代码让我们一帮子人熬了一个通宵

通过异常数据中订单ID可以去系统中捞出这个订单从最开始处理到结束之间所有的日志（入参、处理过程中的参数等等），通过日志可以分析出发生问题的机器有哪些，确定了机器就比较有针对性了（该应用在线上有180台ECS），通过日志也可以在线下环境通过模拟回放的方式去尝试复现问题。

2022-10-18 07:30:06

MySQL JVM 日志

温故知新-你好，我是EverDB！

我的诞生正逢其时。在这个金融科技创新的时代，对数据库大并发、高频次的访问和可扩展性需求与日俱增，集中式数据库架构的限制和制约逐渐显现。为满足业务发展需求，G行科技人根据金融业务特点和分布式数据库产品特性采取了双轨并行的策略，在引入了分布式数据库产品的同时，和合作伙伴一起,共同打造自主知识产权的分布式数据库方案，于是我诞生了。

2022-10-18 07:17:31

EverDB 数据库系统

四个提升数据管道的优秀软件工程策略

现状和最佳实践总是在不断的变化之中，这既适用于软件工程，也适用于数据工程。

2022-10-17 14:54:09

基于Spring Cloud+Apache Ignite的Redis备用方案实例教程原创精选

Ignite是一个功能强大的分布式缓存框架，相比Redis更复杂、可阅资料少、学习成本高，本文旨在帮助读者快速入门。

2022-10-17 12:12:07

Redis 分布式缓存

再聊聊数据库国产化替代

实际上，如果真的去做这件事，方案选型也并不是很难的事情，也并非必须经过严格的考虑才不会出错的，有时候你考虑了良久，反而最后的选择不见得最好。而我的观点是，可能会选错数据库但是你的数据库国产化道路不会走错，你会在不断的纠偏过程中不断的完善方案。

2022-10-17 09:03:52

数据库国产化系统

CMU 15445 学习之Hash Table

哈希表是一个高效的数据结构，大多时候能够在 O(1) 的情况下插入和查询数据，在数据库系统中，有很多地方都使用到了哈希表，例如前面提到的 page table，page directory，以及执行 sql 查询时一些用于 join 的临时数据结构。

2022-10-17 08:49:47

数据磁盘管理内存

聊聊SQL中的高级日期函数

细心的同学可能发现DATEPART和DATENAME有很多相似之处，但是请注意他们返回的类型是不同的，DATEPART返回的是数值类型，DATENAME返回的是字符串类型。

2022-10-17 08:22:28

SQL 函数字符串

MySQL 8.0.31并行构建索引特性管窥

利用sysbench构建一个有400万行记录的测试表，只有一个主键索引时，表空间物理文件大小为1044381696 Bytes，添加完测试索引后，表空间物理文件大小涨到1434451968 Bytes，增加了37.35%。

2022-10-17 08:01:55

MySQL sysbench 索引

面试官问我MySQL索引失效怎么排查？懵逼了

索引为什么会失效呢？失效之后会导致什么样的后果呢？这一节，我们利用当下的问题，也就是千万级的订单表查询居然需要耗费3s的时间，通过这个问题我们来一探究竟。

2022-10-17 00:04:30

索引 SQL 订单

SQL优化实战：如何通过缓存给MySQL查询进行流量削峰？

大量请求跑到MySQL这查询数据，此时就会有大量请求密集请求数据库，然后就会导致数据库所在机器的CPU和内存占用率都飙升，最终就会导致MySQL查询效率极速降低。

2022-10-17 00:00:00

SQL MySQL 数据，

数据库已经不是最难国产化的IT基础设施了

数据库已经不算是最难国产化的IT基础设施了，甚至可以说数据库的国产化只等待企业的IT决策者的发令枪了。既然国产化替代不可避免，那么还是早点动手比较好，犹豫什么，干就行了。

2022-10-14 17:38:26

数据库 IT 基础

千万数据量下的真实业务场景SQL性能优化

SQL优化是非常重要，因为即使再好的MySQL设计架构，也扛不住一个频繁查询的垃圾SQL语句。

2022-10-14 17:24:35

MySQL SQL优化

实时推荐场景中的图形数据库用例译文精选

本文在介绍图形数据库和推荐系统的基本概念的基础上，详细讨论了图形分解技术、PageRank算法、以及协同过滤等方法，以及如何使用NebulaGraph图形数据库，去构建实时推荐系统。

2022-10-14 08:03:46

图形数据库系统

系统库-关于SQL Server Model Database探究

模型数据库被用作在实例中创建新数据库的模板。这意味着实例中新创建的数据库会继承模型数据库的选项、恢复模型、数据文件初始大小等。

2022-10-13 21:07:48

数据库 SQL Server

分库分表实战之从根上带你吃透MySQL的索引

在磁盘中，MySQL存放数据的基本单位是数据页，数据是放在数据页中的，每个数据页中都有很多的数据行。

2022-10-13 17:43:10

MySQL 存放数据

全网都在说一个错误的结论，真的错了吗？

联合索引的最左匹配原则，在遇到范围查询（如 >、<）的时候，就会停止匹配，也就是范围查询的字段可以用到联合索引，但是在范围查询字段后面的字段无法用到联合索引。注意，对于 >=、<=、BETWEEN、like 前缀匹配的范围查询，并不会停止匹配。

2022-10-13 09:43:31

MySQL 索引联合索引

企业级数据治理体系建设全面指南

我将结合企业级数据治理经验，详细介绍从0到1搭建数据治理体系全流程，帮你梳理数据治理的主要内容以及过程中会遇到的哪些坑。

2022-10-13 09:38:01

SQL常用脚本整理，你保存了吗？

使用导入导出功能进行全表复制。如果是使用【编写查询以指定要传输的数据】，那么在大数据表的复制就会有问题？因为复制到一定程度就不再动了，内存爆了？它也没有写入到表中。而使用上面3种语法直接执行是会马上刷新到数据库表中的，你刷新一下mdf文件就知道了。

2022-10-13 08:43:24

大数据语法 SQL

MySQL-CommunicationsException异常的三个典型场景及解决方法

客户端发送select语句后，服务端往客户端写大量数据，客户端需要等待超过1分钟才能继续写入，服务端就会把这种写入时超过１分钟（默认值）等待的连接直接关闭。

2022-10-13 07:35:52

数据配置 MySQL

十分钟教你写一个数据库

Calcite 是一个用于优化异构数据源的查询处理的可插拔基础框架（他是一个框架），可以将任意数据（Any data, Anywhere）DML 转换成基于 SQL 的 DML 引擎，并且我们可以选择性的使用它的部分功能。

2022-10-12 23:02:49

Calcite 异构数据框架

深入MySQL查询过程底层原理，我找到了MySQL查询慢的根本原因

其实说白了，就是随着数据表中的数据量，变得越来越大，导致磁盘IO发生的次数也相应变多了，如果我们能把磁盘IO的次数降到常数级别，那么查询速度是非常快的，所以，后边的优化都是以降低磁盘IO次数为目标。

2022-10-12 17:42:54

MySQL 数据表磁盘

使用 PostgreSQL 建立你的数据库

PostgreSQL 是最灵活的数据库之一，并且它是开源的。

2022-10-12 13:33:25

PostgreSQL 数据库

一个数据库故障的表象与机理，你明白了吗？

大部分情况下，我们仅仅是从表象入手，问题暂时不重现就算搞定了。而如果分析这个问题的人缺少对数据库机理的深入理解，是很难从这些表象中发现深层次的问题的。而且实际上，在运维体系中，一线工程师也不可能放置如此高水平的DBA的。

2022-10-12 08:47:55

数据库故障事件

图文结合带你搞定MySQL日志之Undo log(回滚日志)

Undo Log:数据库事务开始之前，会将要修改的记录放到Undo日志里，当事务回滚时或者数据库崩溃时，可以利用UndoLog撤销未提交事务对数据库产生的影响。

2022-10-12 08:01:08

MySQL 日志数据库

MQ-消息堆积-一条SQL阻塞了整个服务线程案例分析

对参数是null的情况进行过滤，不再向Oracle发送这样的SQL语句；同时日志里对这种异常情况进行记录，以便更细致地分析数据为null的产生场景。加强应用可观测性之线程执行耗时监控。

2022-10-12 07:38:24

SQL 语句异常

分库分表实战之流量激增带来的技术挑战

对于数据库中的订单表而言，如果按照一天2万个订单数据量计算，一年也就七八百万的订单量，还是可以轻松hold住的。

2022-10-11 17:51:49

分库分表数据库

Flowable 任务如何认领，回退？

小伙伴们看到，UserTask 中的 flowable:candidateUsers="javaboy,zhangsan,lisi" 就表示这个 UserTask 由 javaboy、zhangsan 和 lisi 三个用户处理，用户名之间用 , 隔开。

2022-10-11 10:47:04

UserTask SQL 查询

搜索引擎之Elastic Search的高级使用

索引别名就像⼀个快捷⽅式或是软连接，可以指向⼀个或多个索引，也可以给任意⼀个需要索引名的API来使⽤。别名的应⽤为程序提供了极⼤地灵活性。

2022-10-11 09:27:45

搜索引擎 es 索引

MySQL监控方式五花八门，这种最朴素的反而真香！

今天介绍一下完全采用 MySQL 自有方式采集获取监控数据，在单体下达到最快速、方便、损耗最小。

2022-10-11 09:00:18

MySQL 监控数据

分库分表实战之订单业务完整梳理

如果你刚入职了这家初创型互联网公司，而你所在的部门又刚好是做外卖APP的订单系统的，那你认为入职之后要干的第一件事是什么呢？

2022-10-10 17:37:59

分库分表订单业务

毫秒间查询千亿级Trace数据，SkyWalking上链路追踪这么强？

SkyWalking的这次实践，截止到现在有一年多的时间，回顾总结一下这段历程中的些许积累和收获。

2022-10-10 09:17:43

聊聊 MySQL 8.0 数据字典表

本文我们就来聊聊 MySQL 8.0 中的数据字典表。

2022-10-10 08:01:08

MySQL 字典表

基于订单系统的分库分表实战，让应用飞起来

基于外卖订单业务，儒猿技术团队开发了一个外卖订单项目，通过该项目逐步分析随着订单数据量逐步增加，系统将遇到什么问题。

2022-10-09 18:14:31

订单系统分库分表

堪称一站式管理平台，同时支持Linux、MySQL、Redis、MongoDB可视化管理！

最近发现一款好用的可视化管理工具mayfly-go，可以通过Web的形式进行Linux系统管理，同时支持MySQL、Redis、MongoDB等数据库的管理，功能非常强大！今天就给大家介绍下这款工具，希望对大家有所帮助！

2022-10-09 09:42:19

可视化管理工具 mayfly-go

CMU 15445 学习之Storage Manager

cpu 寄存器和高速缓存（L1、L2、L3），以及内存是常见的易失性存储，容量小速度快，但是掉电之后无法恢复，不能持久化保存数据。

2022-10-09 08:53:06

存储容量 SSD

聊一聊SQL自定义排序

你有遇到过这样的场景吗？按指定的顺序输出结果，比如按“北京，天津，上海，重庆……”这样的顺序。

2022-10-09 08:35:06

SQL 自定义排序

数据库的等待事件分析接口其实比我们想象的更丰富

今天我就以Oracle、SQL SERVER、openGauss、Polardb四个数据库为例，分析一下这些数据库的等待事件接口的特点，以及如何使用这些接口来进行系统诊断。谈起他数据库之前，我们先来看看等待事件分析的鼻祖Oracle提供了哪些等待事件。

2022-10-08 08:16:32

数据库 Oracle 数据

深入浅出MGR，你明白了吗？

所有表都必须要有主键。同上，能创建没有主键的表，但无法写入数据，在利用Clone构建新节点时也会报错。尽量不要使用大事务，默认地，事务超过150MB会报错，最大可支持2GB的事务（在GreatSQL未来的版本中，会增加对大事务的支持，提高大事务上限，但依然不建议运行大事务）。

2022-10-08 08:09:13

MGR GreatSQL 事务

超实用 Demo：使用 FastAPI、Celery、RabbitMQ 和 MongoDB 实现一个异步任务工作流

今天分享一份代码，使用 Celery、RabbitMQ 和 MongoDB 实现一个异步任务工作流，你可以修改 task.py 来实现你自己的异步任务。

2022-10-08 07:55:33

Demo MongoDB 异步

上一页 1 ··· 50 51 52 53 54 ··· 335 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客鸿蒙开发者社区 AI.x社区

教育

51CTO学堂精培企业培训 CTO训练营