鸿蒙开发者社区

WOT技术大会

公众号矩阵

移动端

短视频免费课程课程排行直播课软考学堂

全部课程厂商认证 IT技术 25年5月软考 PMP项目管理免费题库

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO软考

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

51CTO软考题库

账号设置退出

数据库

1.6w内容

关注

数据库话题为数据库工程师和数据库管理人员提供数据库相关新闻资讯、前沿技术、管理和开发技巧、使用案例等内容，涉及SQL Server、MySQL、MariaDB、PostgreSQL、Redis、MongoDB等数据库。

文章博文帖子课程

共 1.6w 条

Redis基础解析：从原理到实践

Redis作为一款高性能的键值对数据库，凭借其丰富的数据结构、高性能、原子操作等特性，在缓存、计数器、排行榜、消息队列、分布式锁等多种场景中得到了广泛应用。

2024-07-07 21:49:22

Redis 数据库数据结构

MySQL 9.0 GA 来了！

MySQL 官方终于发布了大版本号变更得 9.0 版本，接下来由我给大家介绍 MySQL 在 9.0 版本中有哪些新的变化。

2024-07-05 10:55:19

MySQL 数据库

GreatSQL 中 Insert 慢是什么情况？

导致此次问题的原因是 GAP 锁阻塞了 INSERT_INTENTION 锁；因此建议客户在执行 update 操作时，where 条件用主键列，这样可以避免加 GAP 锁。

2024-07-05 10:19:59

GreatSQL GAP 主键列

MySQL数据库碎片化：隐患与解决策略

我们都了解，InnoDB 使用 B+树索引结构来组织数据，通常按主键顺序存储。然而，当主键不是顺序自增的情况下，比如使用 UUID，新插入的数据行可能会引发页分裂现象。

2024-07-05 09:19:52

InnoDB B+树索引

快手面试：说说MySQL主从复制原理？

MySQL 主从复制用于多个数据库服务器之间的数据同步，它可以提供高可用性、提高数据库整体性能和吞吐量，以及可以进行数据备份和数据库恢复。

2024-07-04 17:22:23

MySQL 主从复制服务器

10亿数据如何最快速插入MySQL

要首先确认约束条件，才能设计方案。确定面试官主要想问的方向，例如1T文件如何切割为小文件，虽是难点，然而可能不是面试官想考察的问题。

2024-07-04 13:42:12

MySQL 方案数据

MySQL日志15连问，你能抗住嘛？

有了 redo log，当数据库发生宕机重启后，可通过 redo log将未落盘的数据（check point之后的数据）恢复，保证已经提交的事务记录不会丢失，这种能力称为crash-safe。

2024-07-04 11:06:47

MySQL 日志数据

Go 语言在 MongoDB 中常用查询与修改的操作，你都会了吗？

通过Query.All()可以获得所有结果，通过Query.One()可以获得一个结果，注意如果没有数据或者数量超过一个，One()会报错。

2024-07-04 09:39:40

Go 语言 MongoDB

MySQL主从复制原理详解

MySQL主从复制是指数据可以从一个MySQL数据库服务器的主节点复制到一个或多个从节点。主节点记录所有的写操作，并将这些操作记录到二进制日志（binary log）中，从节点则通过连接主节点，获取并应用这些二进制日志，从而实现数据的同步。

2024-07-04 08:00:24

MySQL 数据库服务器

数据异常不用怕，GaiaDB有办法

GaiaDB的闪回查询通过一条简单的SQL语句，即可访问历史数据。无论是需要纠正刚刚发生的错误操作，还是进行长期趋势的数据分析，GaiaDB都能提供快速、准确的数据查询服务。本文深入探讨了GaiaDB闪回查询技术，并提供了示例演示。

2024-07-04 07:44:19

GaiaDB 数据库

数据特征采样在 MySQL 同步一致性校验中的实践

本文介绍了当前DTS应用中，MySQL数据同步使用到的数据一致性校验工具，并对它的实现思路进行分享。一、背景在 MySQL 的使用过程中，经常会因为如集群拆分、数据传输、数据聚合等原因产生流动和数据复制。而在通常的数据复制过程中，因为涉及到目标的写入不可控、服务应用的未知问题、人为导致的异常缺陷等，很难保证复制产生的数据与源完全一致。除了通过完善流程与服务应用的能力和可靠性来保障数据一致性外

2024-07-04 07:35:41

服了！DELETE 同一行记录也会造成死锁！！

本文将基于 MySQL 5.7.21 版本进行讨论，该版本使用 InnoDB 存储引擎，并采用 Repeated Read 作为事务隔离级别。

2024-07-04 00:30:17

DELETE MySQL 存储

聊聊SQL单次执行时间毛刺问题的发现与分析

采用v$active_session_history的sample_time和SQL_EXEC_START的时间差来粗略估算某条SQL在某个时间段内每次执行的时间，是一种用来分析SQL执行时长偶发性过大的一种常用方法。

2024-07-03 13:51:02

SQL 毛刺数据库

MySQL用了函数到底会不会导致索引失效

MySQL 8.0 引入了功能索引（Functional Indexes）的新特性，这种索引允许在创建时包含列上的表达式。这意味着可以对数据进行计算或转换，并针对结果建立索引。即使在查询中使用了函数操作，也可以利用这些索引来优化查询性能。

2024-07-03 09:15:33

MySQL 表达式索引

MySQL 数据实时同步到 Elasticsearch 的技术实现

将 MySQL 数据实时同步到 Elasticsearch 可以显著增强数据的实时搜索和分析能力。根据具体需求和环境，可以选择适合的同步方法和技术实现。无论是使用现成的工具如 Logstash 和 Debezium，还是编写自定义程序，都需要仔细考虑性能、可靠性和数据一致性的问题。

2024-07-03 08:02:19

MySQL 数据搜索

SpringBoot+Redis自定义注解实现发布订阅

我们内部组件抽象了两个方法，生产和消费，但这两个方法逻辑截然不同，生产方法是暴露给serverice层接口调用，调用方在调用生产方法后能直接知道生产了几条数据和成功与否。而消费方法是配合Spring生命周期函数服务启动时建立常驻消费线程的。

2024-07-02 11:42:53

Spring Redis 自定义

OpenGauss 510与Oracle的兼容性如何？你试过了吗？

今天简单给大家分享了一下openGauss与Oracle的兼容性的一些统计数据。总体上来说，从Oracle向openGauss迁移还是可行的，不过对于大多数应用来说，不可能简单平替。

2024-07-02 11:20:02

Oracle openGauss ROWID

1.6万字+28张图盘点11种延迟任务的实现方式

Redisson他是Redis的儿子（Redis son），基于Redis实现了非常多的功能，其中最常使用的就是Redis分布式锁的实现，但是除了实现Redis分布式锁之外，它还实现了延迟队列的功能。

2024-07-02 01:06:33

延迟任务 Redis

小米搭载OceanBase，试点业务数据库性能提升2-3倍

小米搭载原生分布式数据库OceanBase进行数据库升级，目前小米已将试点业务系统升级至OceanBase，并稳定运行数月，获得高性能、领先的业务连续性，实现规模化降本。数据显示，数据库性能提高2-3倍，存储成本降低42%。

2024-07-01 11:37:42

OceanBase 小米数据库

MySQL自增ID用完后的技术探讨与应对策略

自增ID用完是数据库设计与管理中需要面对的一个实际问题。通过合理选择主键数据类型、重置自增ID起始值、使用UUID或分布式ID生成器以及数据迁移与分库分表等策略，我们可以有效地应对这一问题。

2024-07-01 09:00:16

MySQL ID 管理

国人开源的Redis客户端ioredis被Redis官方收购：技术背后的故事与启示

对于个人开发者而言，参与开源项目不仅可以提升自身技术能力，积累项目开发经验，还可以建立自己的技术影响力，为未来的职业发展铺平道路。因此，如果精力允许，利用业余时间来参与或维护一些开源项目，无疑是一段难得的经历。

2024-07-01 08:58:40

ioredis 开发者 Redis

解决Redis中的大热Key问题：技术深入与实例解析

大热Key问题是Redis应用中常见的挑战，但通过合理的策略和优化手段，可以有效地缓解这一问题。本文深入探讨了大热Key的成因、影响以及多种解决方案，并提供了相应的例子代码。

2024-07-01 08:04:38

Redis Key 代码

面试问我SQL回表？我瞬间蒙了

虽然最左匹配原则是一个重要的概念，但并不意味着你必须始终遵循它。在实际应用中，你需要根据查询的需求和数据的分布来决定是否使用复合索引以及索引的列顺序。

2024-07-01 00:00:02

SQL 回表应用

分库分表后复杂查询：基于DTS实时性ES宽表构建技术实践

基于公司的中间件DTS构建实时性的ES宽表。所谓的宽表是通过主键将多张表关联成一张表，比如订单维度的宽表字段包含：订单主表，订单明细表，商品表，用户表等表字段。

2024-06-28 14:34:15

从OtterTune的倒下说起

OtterTune的成功崛起当年给了我们带来了相当大的鼓舞，原来在这个领域不仅仅是我们一批人在干，在大洋彼岸也有一批和我们有类似想法的人在干类似的事情。

2024-06-28 09:25:51

OtterTune 数据库工具

C#中使用 Redis 作为缓存系统

通过使用Redis作为缓存系统，C#项目可以显著提高数据访问速度和性能。遵循下面的优秀实践，你可以更好地利用Redis的功能和性能优势。

2024-06-27 12:21:13

C#Redis 数据库

刷盘，还是不刷盘，是一个问题 | 架构师之路重启

本文我们一起来看数据库中一个典型的读写事务的场景，并了解这里面可能涉及的技术问题。

2024-06-27 10:02:14

数据库缓冲池

第一次面百度，你觉得这个难度怎么样？

RDB持久化是指在指定时间间隔内将内存中的数据集快照写入磁盘。实际上fork子线程，先将数据集写入临时文件，写入成功后，在替换之前的文件，用二进制压缩文件，RDB是Redis默认的持久化方式，会在对应目录下生产一个dump.rdb文件，重启会通过加载dump.rdb文件恢复数据。

2024-06-27 07:54:46

百度持久化 Redis

SQL 查询之公用表表达式（CTE）

在关系型数据库中，表示数据层级结构的表很常见，例如，上下级关系、父子组件关系等。为了在这些层级结构中进行从上到下或从下到上的遍历，可以使用递归 CTE。

2024-06-27 00:36:06

关系型数据库 CTE

介绍几种 MySQL 官方高可用方案，你中意哪个？

本篇文章介绍了 MySQL 官方提供的几种高可用方案，除此之外，还有其他借助中间件搭建的高可用方案，例如：MHA、MMM、及借助 Keepalived、ProxySQL、Orchestrator 等工具的其他高可用方案。总而言之，高可用方案虽多，选择时还是要基于实际业务需求出发，综合考虑多种因素。

2024-06-26 13:31:54

MySQL 高可用 MHA

从log file sync问题的根因分析谈起：我们为什么需要了解国产数据库的一些原理性知识

Log File sync等待过大，还和很多BUG有关，这些BUG在MOS上都可以很方便地查到。这就是在使用Oracle数据库时做根因分析相对比较容易的主要原因。

2024-06-26 09:03:24

国产数据库 MOS

MySQL优化查询应该从哪些方面入手？

MySQL使用索引能够显著提高查询速度，主要是通过减少数据扫描量、降低I/O操作、优化排序和分组、提高数据检索效率、支持唯一性约束、利用局部性原理和磁盘预读以及降低查询的复杂度来实现的。

2024-06-26 08:32:13

优化查询 I/O MySQL

我们一起聊聊 DuckDB 是什么及适用场景

官方文档就是一个宝库，有着非常丰富的说明及示例，网址为：https://duckdb.org/docs/index。要想深入理解及掌握 DuckDB，需要多读读官方文档。

2024-06-26 08:14:43

DuckDB 轻量级数据库

如何为数据库中的位图添加动态水印译文

开发人员需要了解如何在不更改数据库或应用程序的情况下使数据库中的位图可跟踪。

2024-06-26 08:00:00

数据库位图过滤器

我们一起聊聊 Aho-Corasick 字符串匹配算法的实现

当预先知道字符串字典（例如计算机病毒数据库）时，自动机的构造可以离线执行一次，编译后的自动机存储起来供以后使用。在这种情况下，它的运行时间与输入的长度加上匹配条目的数量成线性关系。

2024-06-26 07:58:06

字符串数据库存储

BenchmarkSQL 对 MySQL 测试时请注意隔离级别！

在使用 BenchmarkSQL（版本为 5.0）压测一段时间后，会出现卡住的现象，即 tpm TOTAL 的值不再发生变化，但通过 top 命令观测到 MySQL 当前的压力还是很大。

2024-06-26 00:43:54

MySQL 测试 TOTAL

在分库分表中，如何选择合适的分片算法？

选择分片算法和选择 Sharding Key 也有一定的关系，比如前一篇提到的 B 端系统使用创建时间去做分片，那算法就很简单了，就是按照一定的时间范围去做拆分。

2024-06-26 00:34:12

分库分表分片算法

时延降低 50%，小红书图数据库如何实现多跳查询性能大幅提升

多跳查询为企业提供了深入的数据洞察和分析能力，它在小红书众多在线业务中扮演重要的角色。然而，这类查询往往很难满足稳定的 P99 时延要求。小红书基础架构存储团队针对这一挑战，基于大规模并行处理（MPP）的理念，开发了一种图数据库上的分布式并行查询框架，成功将多跳查询的时延降低了 50% 以上...

2024-06-25 10:57:08

难得真实的生产数据库死锁问题排查过程记录

在死锁发生后的一周内，我几乎每天都会抽空进行研究。问题很早就被定位到了，并且修改方案也已经有了，但是其中的原理一直没有搞清楚。

2024-06-24 09:29:15

数据库死锁 SQL

SQL中避免使用1=1的原因及C#中的实践

虽然WHERE 1=1在某些情况下可能看起来是一个方便的技巧，但考虑到可读性、可维护性、性能和安全性等方面的因素，我们应该避免在SQL查询中使用它。

2024-06-24 08:33:06

SQL 技巧参数化

全面透彻，深刻理解MySQL索引

MySQL的索引是提高数据库查询性能的关键工具。通过深入了解不同类型的索引以及如何在C#中使用它们，开发人员可以构建出更高效、更响应迅速的应用程序。在使用索引时，务必权衡其带来的性能提升与额外的存储和维护成本。

2024-06-24 08:31:42

MySQL 索引工具

缓存使用中常见的坑及解决方案

使用缓存并非没有代价，如果不当使用或配置，很容易遇到各种问题。本文将探讨在缓存使用过程中可能遇到的一些常见“坑”以及相应的解决方案。

2024-06-24 00:30:00

缓存缓存击穿数据库

真实线上问题之数据库死锁如何解决？

一般来说，对于数据库的死锁问题，主要是要避免并发修改的冲突。另外一种方法是保证操作的顺序，例如多个事务都先操作资源 A，再操作资源 B，这样可以有效地避免死锁的发生。

2024-06-21 09:37:57

数据库死锁顺序

SQL解析框架比较分析

JSqlParser是一个纯Java编写的SQL解析库，支持多种SQL方言。它能够解析复杂的SQL语句，并提供了一个易于使用的API来访问解析后的SQL结构。

2024-06-21 09:25:34

SQL 解析框架

创建索引时一定会锁表吗？

本文将探讨在创建索引时是否一定会锁表，并提供C#示例代码来说明如何在不影响系统正常使用的情况下进行索引的创建。

2024-06-20 12:38:07

索引 C#数据库

MySQL给数据表增加一列，一定会锁表吗？

在MySQL中，给数据表增加一列并不一定会导致整个表被锁定。具体行为取决于MySQL的版本、存储引擎以及执行的操作类型。

2024-06-20 08:03:35

MySQL 数据表版本

国产 “数据库 RAC”，能否一战？原创精选

随着近些年来国产数据库逐步进入深水区，开始承载核心业务，因此对高可用的要求更高；那么基于共享存储的高可用架构正在被更多关注。本文尝试对共享存储架构特点及国内数据库共享存储架构产品加以阐述，说明下此类架构产品的当前能力，便于用户去选项使用。

2024-06-20 07:38:44

数据库国产数据库存储架构

系统日活递增，如何优化提升大规模的数据库

优化大规模数据库系统需要综合考虑多个方面，并持续进行调整和改进，以达到更高的性能和可用性要求。

2024-06-19 09:34:38

系统数据库内存

SQLCMD完全指南：掌控 SQL Server 译文精选

SQL Server 拥有被广泛认可的一流管理工具——SQL Server Management Studio（简称 SSMS）。它提供了丰富的功能，极大地简化了开发人员和数据库管理员（DBA）的工作。

2024-06-19 08:29:28

SQL Server 数据库 SQLCMD

.NET开源的实时应用监控系统 - WatchDog

SignalR进行实时监控，并使用LiteDB作为无需配置的类似MongoDB的无服务器数据库，同时也支持使用外部数据库（如MSSQL、MySQL、Postgres、MongoDB）。

2024-06-19 08:24:47

LiteDB SignalR 数据库

上一页 1 ··· 10 11 12 13 14 ··· 334 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客鸿蒙开发者社区 AI.x社区

教育

51CTO学堂精培企业培训 CTO训练营