鸿蒙开发者社区

WOT技术大会

公众号矩阵

移动端

短视频免费课程课程排行直播课软考学堂

全部课程厂商认证 IT技术 24年11月软考 PMP项目管理免费题库

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO软考

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

51CTO软考题库

账号设置退出

其他数据库

1877内容

关注

其他数据库话题涵盖其他数据库相关研究热点、技术难点与应用场景，帮助用户在实际应用中选型。

文章博文课程

共 1877 条

分库分表的理解与实践

分库分表是应对大数据量和高并发访问的有效手段。通过合理的分库分表策略和实践建议，可以提升数据库的性能和扩展性，为业务的快速发展提供有力支撑。

2024-07-26 00:16:11

分库分表高并发大数据

面试官：聊聊你对分库分表的理解？

分库分表技术不但是日常工作中用于解决数据库中的数据量会急剧增长，解决单库单表性能瓶颈的一种方案，更是面试中的高频知识点。

2024-07-25 18:20:03

分库分表 MySQL 数据库

一亿数据大表的分页技术实践

处理包含一亿条记录的大表时，分页查询的性能优化是一个复杂而重要的任务。通过选择合适的分页策略、优化数据库查询、使用缓存系统和实施分库分表等操作，可以显著提高分页查询的性能和用户体验。

2024-07-25 09:15:39

数据大表优化

数据库性能优化：提升系统响应速度的关键策略

数据库性能优化是一个持续的过程，需要开发者和运维人员共同努力。通过合理设计数据库表结构、优化查询语句、建立索引、分库分表、定期清理垃圾数据等策略，可以显著提升数据库的查询速度和事务处理能力，减少系统响应时间，提高用户体验。

2024-07-23 08:08:18

数据库性能优化

多款OLAP数据库大比拼，谁更胜一筹？

昨天又使用最新版本作了对比，这次chdb卡在了Query08和Query09上，为了确认Query09很耗时，我在我的笔记本（mac M2Max 32GB内存）上做了测试，耗时158s多。

2024-07-19 08:33:56

OLAP 数据库 Query09

数据库技术演进之路

规范化有第一范式（1NF）：确保每列都是原子的，不可再分；第二范式（2NF）：消除非主属性对主键部分依赖，确保每列都依赖于整个主键；第三范式（3NF）：消除传递依赖，确保每列都直接依赖于主键。

2024-07-17 11:40:58

数据库技术演进

国产数据库替代策略的探讨

大家要注意的是，在选型决策时，要考虑这个清单的有效期是三年。因此不排除两三年后清单会发生变化。一些企业甚至可能会离开商用数据库产业，因此并不是简单的从中选择某个数据库产品就可以了。

2024-07-16 08:22:09

国产数据库策略

GreatSQL 构建高效 HTAP 服务架构指南

从 GreatSQL 8.0.32-25 版本开始，新增Rapid存储引擎，该引擎使得 GreatSQL 能满足联机分析（OLAP）查询请求。GreatSQL Rapid引擎性能表现优异，在32C64G测试机环境下，TPC-H 100G测试中22条SQL总耗时仅需不到80秒。

2024-07-12 12:43:51

GreatSQL Rapid 引擎性

巧用Lock解决缓存击穿的解决方案

缓存击穿是指缓存中没有但数据库中有的数据（一般是缓存时间到期），这时由于并发用户特别多，同时读缓存没读到数据，又同时去数据库去取数据，引起数据库压力瞬间增大，造成过大压力。

2024-07-12 08:48:50

缓存数据库数据

数据库系统中何时使用预写式日志和逻辑复制

预写日志 (WAL) 和逻辑复制在实现数据库系统中的可用性、灾难恢复和可扩展性方面发挥着作用。WAL非常适合优先考虑数据一致性且对性能有影响的场景，例如灾难恢复设置。另一方面，逻辑复制提供了对复制行为的灵活性与控制，使其非常适合具有不同需求的复杂环境。

2024-07-11 11:08:54

数据库系统 WAL

我们一起聊聊 SQL 性能优化神器

rows显示了检查的估计行数，rows× filtered显示了与下表连接的行数。例如，如果 rows为1000且 filtered为50.00（50％），则与下表连接的行数为1000×50％= 500。

2024-07-11 08:26:00

SQL 性能优化

长文：国产数据库兼容性一览原创

近期又接触到部分兼容性工作，特收集整理了部分国产数据库的兼容情况，整体感觉国内产品这部分做的差异还是蛮大的。本文将从一张对比表入手，谈谈国内产品的兼容性问题，并简单介绍下各家的兼容性情况。

2024-07-11 08:00:42

兼容性工作国产数据库

面试官：你们的项目中竟然还在用多表关联！

可用性提升，如果驱动表有10万条数据，而被驱动表也有10万条，哪怕在QPS为个位数的情况下，都可能将数据库的网卡打满，从而出现系统不可用的情况。

2024-07-10 10:08:36

项目多表关联哈希

提升SQL查询效率的终极指南

在某些情况下，索引的有效性并不完全取决于字段的区分度。例如，如果一个表中包含性别字段，仅有两个可能的取值：男和女，那么通常情况下这个字段的区分度较低，使用该字段进行查询可能无法有效地过滤大量数据，从而无法充分发挥索引的优势。

2024-07-10 09:07:09

SQL 查询字段

实战：Springboot3+ShardingSphere5.2.1生产级分库分表实现

我们完成了在DailyMart中集成分库分表功能的实践，大家在实施分库分表过程中一定要结合自己的业务实际选择合理的分片键，分片键的好坏决定了你分库分表架构方案的好坏。

2024-07-10 08:42:39

分库分表分片键

EF Core下按年分库按月分表的优雅实现，你学会了吗？

本文探讨了如何在EF Core中实现按年分库按月分表的策略，并提供了相应的C#示例代码。通过分库分表，我们可以将大量的数据分散到多个数据库和表中，以提高系统的查询效率和扩展性。

2024-07-10 08:15:40

数据库 Core 代码

Db2是一个故事，尽管IBM不愿提及原创精选

PostgreSQL不仅自身取得了成功，还成为了大型云供应商和其他数据库服务（如CockroachDB和Yugabyte）的前端。一些评论人士认为，它将成为实际上的标准前端，而供应商则在后端进行创新。但Db2可能已经错过了这艘船，IBM可能会后悔让其他人来讲述它的故事。

2024-07-09 13:34:51

Db2 IBM PostgreSQL

分布式数据库很香吗？可能还比不上普通的分区表

如果在执行器启动期间进行了修剪，因为未初始化被消除的分区，映射表会更新，并更改保留分区的子计划索引。这是必要的，以让映射表对执行器稍后要完成的修剪有效。

2024-07-09 09:42:38

分布式数据库初始化

详解 pypika 模块：SQL 语句生成器，让你再也不用为拼接 SQL 语句而发愁

不同数据库的 SQL 语法会有略微不同，最大的一个不同就是包裹字段所用的符号，MySQL 用的是反引号、PostgreSQL 用的是双引号。而 pypika 不知道你的数据库种类，所以默认用的是双引号。如果想适配 MySQL 的话，那么应该告诉 pypika，我们要适配 MySQL。

2024-07-09 08:49:56

语句生成器 SQL

如何选择开源数据库？

开源数据库是现代软件开发中的关键组成部分，提供了强大、可扩展和灵活的数据存储和管理解决方案。以下是十个流行的开源数据库的详细概述，突出其主要特点和使用场景。

2024-07-09 08:27:30

开源数据库数据

深入理解InnoDB中的页分裂与页合并

调整这些参数需要根据具体的数据库工作负载和硬件环境进行评估和实验，以达到最佳的性能和稳定性。通常建议在进行参数调整前，先备份数据库，并在生产环境中谨慎测试和验证配置的效果。

2024-07-08 09:29:07

InnoDB 分裂合并

GreatSQL 中 Insert 慢是什么情况？

导致此次问题的原因是 GAP 锁阻塞了 INSERT_INTENTION 锁；因此建议客户在执行 update 操作时，where 条件用主键列，这样可以避免加 GAP 锁。

2024-07-05 10:19:59

GreatSQL GAP 主键列

聊聊SQL单次执行时间毛刺问题的发现与分析

采用v$active_session_history的sample_time和SQL_EXEC_START的时间差来粗略估算某条SQL在某个时间段内每次执行的时间，是一种用来分析SQL执行时长偶发性过大的一种常用方法。

2024-07-03 13:51:02

SQL 毛刺数据库

分库分表后复杂查询：基于DTS实时性ES宽表构建技术实践

基于公司的中间件DTS构建实时性的ES宽表。所谓的宽表是通过主键将多张表关联成一张表，比如订单维度的宽表字段包含：订单主表，订单明细表，商品表，用户表等表字段。

2024-06-28 14:34:15

事务块中出现语句错误，不是所有数据库都跟 Oracle 表现一样！

失败的 SQL 语句只会导致丢失它自己执行的任何工作；它不会导致在当前事务中丢失之前的任何工作。如果该语句是 DDL 语句，则不会撤消紧接在它前面的隐式提交。

2024-06-28 09:34:02

从OtterTune的倒下说起

OtterTune的成功崛起当年给了我们带来了相当大的鼓舞，原来在这个领域不仅仅是我们一批人在干，在大洋彼岸也有一批和我们有类似想法的人在干类似的事情。

2024-06-28 09:25:51

OtterTune 数据库工具

SQL 查询之公用表表达式（CTE）

在关系型数据库中，表示数据层级结构的表很常见，例如，上下级关系、父子组件关系等。为了在这些层级结构中进行从上到下或从下到上的遍历，可以使用递归 CTE。

2024-06-27 00:36:06

关系型数据库 CTE

从log file sync问题的根因分析谈起：我们为什么需要了解国产数据库的一些原理性知识

Log File sync等待过大，还和很多BUG有关，这些BUG在MOS上都可以很方便地查到。这就是在使用Oracle数据库时做根因分析相对比较容易的主要原因。

2024-06-26 09:03:24

国产数据库 MOS

我们一起聊聊 DuckDB 是什么及适用场景

官方文档就是一个宝库，有着非常丰富的说明及示例，网址为：https://duckdb.org/docs/index。要想深入理解及掌握 DuckDB，需要多读读官方文档。

2024-06-26 08:14:43

DuckDB 轻量级数据库

我们一起聊聊 Aho-Corasick 字符串匹配算法的实现

当预先知道字符串字典（例如计算机病毒数据库）时，自动机的构造可以离线执行一次，编译后的自动机存储起来供以后使用。在这种情况下，它的运行时间与输入的长度加上匹配条目的数量成线性关系。

2024-06-26 07:58:06

字符串数据库存储

在分库分表中，如何选择合适的分片算法？

选择分片算法和选择 Sharding Key 也有一定的关系，比如前一篇提到的 B 端系统使用创建时间去做分片，那算法就很简单了，就是按照一定的时间范围去做拆分。

2024-06-26 00:34:12

分库分表分片算法

难得真实的生产数据库死锁问题排查过程记录

在死锁发生后的一周内，我几乎每天都会抽空进行研究。问题很早就被定位到了，并且修改方案也已经有了，但是其中的原理一直没有搞清楚。

2024-06-24 09:29:15

数据库死锁 SQL

真实线上问题之数据库死锁如何解决？

一般来说，对于数据库的死锁问题，主要是要避免并发修改的冲突。另外一种方法是保证操作的顺序，例如多个事务都先操作资源 A，再操作资源 B，这样可以有效地避免死锁的发生。

2024-06-21 09:37:57

数据库死锁顺序

国产 “数据库 RAC”，能否一战？原创精选

随着近些年来国产数据库逐步进入深水区，开始承载核心业务，因此对高可用的要求更高；那么基于共享存储的高可用架构正在被更多关注。本文尝试对共享存储架构特点及国内数据库共享存储架构产品加以阐述，说明下此类架构产品的当前能力，便于用户去选项使用。

2024-06-20 07:38:44

数据库国产数据库存储架构

系统日活递增，如何优化提升大规模的数据库

优化大规模数据库系统需要综合考虑多个方面，并持续进行调整和改进，以达到更高的性能和可用性要求。

2024-06-19 09:34:38

系统数据库内存

.NET开源的实时应用监控系统 - WatchDog

SignalR进行实时监控，并使用LiteDB作为无需配置的类似MongoDB的无服务器数据库，同时也支持使用外部数据库（如MSSQL、MySQL、Postgres、MongoDB）。

2024-06-19 08:24:47

LiteDB SignalR 数据库

小红书图数据库在分布式并行查询上的探索

小红书作为一个社区属性为主的产品，涵盖了各个领域的生活社区，并存储海量的社交网络关系。为了解决社交场景下的应用痛点以及分布式并行查询实现中的问题，我们自研了面向超大规模社交网络的图数据库系统 REDgraph，大大提高了系统的查询效率和性能。

2024-06-19 07:45:20

图数据库 REDgraph 关系型数据库

Select...For Update：行锁还是表锁？

SELECT...FOR UPDATE语句在大多数情况下实现的是行锁，而非表锁。这种细粒度的锁定机制有助于提高数据库的并发性能，但同时也需要开发者谨慎使用，以避免潜在的性能问题和死锁风险。

2024-06-14 09:27:00

行锁表锁细粒度

字节面试：MySQL自增ID用完会怎样？

如果表没有设置主键，InnoDB 会自动创建一个全局隐藏的 row_id，其长度为 6 个字节，当 row_id 达到上限后，它的执行流程和主键 ID 不同，它是再次归零，然后重新递增，如果出现相同的 row_id，后面的数据会覆盖之前的数据。

2024-06-14 08:34:36

MySQL InnoDB ID

分析SQL执行计划，需要关注哪些重要信息

type = index，key = idx_abc，extra = 使用 where；使用 index。这表明查询利用了 idx_abc 的联合索引，但未严格遵守最左前缀匹配，或者虽然遵守了最左前缀，但在 a 字段上进行了范围查询。因此，实际上仍需扫描索引树，效率并不理想。

2024-06-12 09:23:37

SQL 索引树索引

Elasticsearch index 设置 False，为什么还可以被检索到？

列式存储使得对特定字段的聚合和排序操作更加高效，但对于未被索引的字段，查询效率较低，因为需要遍历整个列的数据来匹配查询条件。

2024-06-07 15:22:17

False 聚合排序

EF Core优化技巧之预热处理

EF Core的预热问题是由于模型构建、元数据加载、数据库连接建立和查询计划生成等操作导致的。为了提高应用程序的性能，我们可以采取上述解决方案来优化EF Core的预热问题。

2024-06-07 09:03:00

EF Core .NET 数据库

SQL教程：流程控制

WHILE是循环控制，当满足WHILE后面的条件后，就可以循环执行WHILE下面的语句。通常与CONTINUE和BREAK一起使用，Break命令让程序完全跳出循环语句，结束WHILE命令，CONTINUE是让命令继续返回执行。

2024-06-06 09:09:41

SQL 循环控制命令

停止在你的数据库中使用UUID

本文将讨论在使用UUID作为数据库表中的键时可能出现的两个性能问题。UUID是确保表中记录唯一性的好方法。然而，这些问题在大规模使用时尤为明显，因此对于大多数人来说，UUID实际上不会导致明显的性能下降。

2024-06-05 10:21:30

UUID 数据库 UUIDv4

MOS中上千万BUG报告不是O记的污点，而是它最好的勋章

国产数据库就特别怕有人知道自己的产品存在BUG或者缺陷。数据库这种复杂度软件系统是成千上万人协同开发出来的，肯定是存在BUG的。没有任何BUG的国产数据库反而显得那么不真实，让人更加不敢相信了。

2024-06-04 08:28:56

MOS 国产数据库

SpringBoot与本地数据库存储和检索人脸数据

本文详细讲解了如何使用SpringBoot与本地数据库（如MySQL）实现人脸数据的存储和检索。通过SpringBoot项目的搭建、数据库配置、人脸数据的存储和检索API实现，结合数据安全和隐私保护策略，为大家提供了一整套完整的解决方案。希望大家能从中有所收获，并应用于实际项目中。

2024-06-03 08:29:20

Spring 数据库人脸数据

大数据实时分析：Flink 连接 Kafka 和 Flink SQL

Flink 就会从 Kafka 的 input_topic 主题中读取数据，每隔五分钟按定义的 SQL 查询进行处理，并将结果写入 output_topic 主题。

2024-06-03 08:26:35

Flink Kafka SQL

读写分离最全详解(图文全面总结)

读写分离是提升数据库性能和扩展性的有效手段，通过将读操作分散到多个从数据库上，可以显著提高系统的并发处理能力、和响应速度。

2024-05-31 13:34:57

读写分离数据库

OB 运维 | 一文讲透 OceanBase 单机版

主集群和备集群。主集群下面所有用户租户都是主租户；备集群下面所有用户租户都是备租户，备集群会自动同步主集群的租户变更操作。

2024-05-31 13:23:19

OceanBase 单机版架构

星环科技推出知识平台TKH，全面统筹算力、语料、模型与应用，构建可信赖的AI大模型

星环科技的定位从Data Infra进一步延伸到AI Infra，为企业客户打造AI基础设施，打造从语料处理、模型训练、知识库建设等的一整套的工具链，帮助企业快速建立行业大模型，快速使用AIGC。

2024-05-31 11:28:42

上一页 1 2 3 4 5 6 ··· 38 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客鸿蒙开发者社区 AI.x社区

教育

51CTO学堂精培企业培训 CTO训练营