鸿蒙开发者社区

WOT技术大会

公众号矩阵

移动端

短视频免费课程课程排行直播课软考学堂

全部课程厂商认证 IT技术 25年5月软考 PMP项目管理免费题库

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO软考

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

51CTO软考题库

账号设置退出

数据库

1.6w内容

关注

数据库话题为数据库工程师和数据库管理人员提供数据库相关新闻资讯、前沿技术、管理和开发技巧、使用案例等内容，涉及SQL Server、MySQL、MariaDB、PostgreSQL、Redis、MongoDB等数据库。

文章博文帖子课程

共 1.6w 条

被问傻了：从MySQL读取100w数据进行处理，怎么做？

默认情况下，完整的检索结果集会将其存储在内存中。在大多数情况下，这是最有效的操作方式，并且由于 MySQL 网络协议的设计，因此更易于实现。

2024-08-12 09:43:42

MySQL 数据 OOM

MySQL 数据被误删除drop！无备份，如何恢复？

undrop-for-innodb 是针对 MySQL innodb 的数据恢复工具，本文主要介绍在无备份、无binlog等场景下，如何恢复drop table的表数据。

2024-08-09 10:06:09

MySQL drop 工具

选型避坑-数据库品牌和数据库产品是不同的

数据库国产化替代工作中有很多坑，如果策略不得当可能会引发一系列的问题。目前已经有些企业因为初期替代策略不谨慎而出现了二次迁移的问题。

2024-08-09 08:28:14

品牌数据库产品

MySQL优化秘籍：征服面试官的关键技巧！

MySQL 作为关系型数据库的典型代表，其流行程度超越于任何数据库，因此在 Java 面试中，MySQL 是一定会被问到的重要知识点。而在 MySQL 中有一道极其常见的面试题，我们这里系统的来看一下，这就是我们今天要讨论的 MySQL 调优问题。

2024-08-08 16:53:17

MySQL 数据库 Java

十个著名的开源嵌入式单文件数据库

单文件数据库比较适用于轻量级客户端程序、IoT应用、移动应用和嵌入式系统，因为这类系统对数据库的简单性和易用性要求更多，具有较好的可靠性，性能，并且开箱即用。

2024-08-08 15:03:00

单文件数据库数据库

一个拉取订单功能N个BUG

拉取订单功能虽然看似简单，但在实际开发过程中却可能遇到各种意想不到的BUG和挑战。通过本次的BUG之旅，我们不仅学会了如何定位和解决问题，还更加深刻地理解了软件开发中的复杂性和不确定性。

2024-08-08 08:09:38

拉取订单开发

MySQL 5.7 DDL 与 GH-OST 对比分析

本文首先介绍MySQL 5.7 DDL以及GH-OST的原理，然后从效率、空间占用、锁阻塞、binlog日志产生量、主备延时等方面，对比GH-OST和MySQL5.7 DDL的差异。

2024-08-08 07:38:42

MySQL 核心模块揭秘 — 什么时候释放锁？

事务执行过程中加的表锁，都要等到提交或者回滚即将完成时才释放（手动加的表锁除外）。事务执行过程中加的行锁，根据事务隔离级别的不同，释放时机不同。

2024-08-07 14:58:00

MySQL 释放锁核心模块

MySQL 常见日志清理策略

本篇文章简单介绍了 MySQL 中六种常见日志及其清理策略，不同环境可以采用不同的清理策略，本文只是提供一种思路，方法各种各样，重要的是要根据实际情况制定合理的日志保留策略，并确保不会影响到数据库的正常运行和备份需求。

2024-08-07 10:54:27

MySQL 日志策略

别再分库分表了，试试TiDB！

NewSQL 提供了与 noSQL 相同的可扩展性，而且仍基于关系模型，还保留了极其成熟的 SQL 作为查询语言，保证了ACID事务特性。

2024-08-07 10:34:46

分库分表 NewSQL noSQL

Go-sqlbuilder：灵活强大的Go语言SQL语句构建库，兼具零配置ORM功能

go-sqlbuilder库提供了一种灵活、高效且易于使用的SQL语句构建方案，它可以帮助Go语言开发者们更轻松地处理数据库操作。它既可以作为纯粹的SQL语句构建工具，也可以充当轻量级的ORM框架，满足不同场景下的需求。

2024-08-07 09:51:51

Go 语言 SQL语句

MySQL in 太多过慢的三种解决方案

JOIN操作通常比IN语句更高效，特别是在处理大数据集时。JOIN操作可以利用索引来提高查询性能，而IN语句在参数过多时可能导致性能瓶颈。

2024-08-07 08:21:05

MySQL 数据库 JOIN

MySQL大表深度优化实战策略

select arrival_record操作记录的慢查询数量最多有4万多次，平均响应时间为4s，delete arrival_record记录了6次，平均响应时间258s。

2024-08-06 10:02:42

MySQL 大表优化

美团二面：Redis与MySQL双写一致性如何保证？

Read/Write-Through模式中，服务端把缓存作为主要数据存储。应用程序跟数据库缓存交互，都是通过抽象缓存层完成的。

2024-08-06 09:42:23

Redis MySQL 存储

从微软蓝屏事件聊到数据库系统中的纸牌屋，你明白了些什么？

2024 年 7 月 19 日，全球约有 850 万台 Windows 电脑崩溃，无法重启，陷入蓝屏死机状态。这次故障影响了全球各地的企业和政府，波及运输、金融服务、医疗保健等绝大多数行业。

2024-08-06 08:52:23

微软蓝屏数据库

五招提升SQL Query性能译文精选

如果从事数据工作，你会一直编写SQL查询。那么，如何编写针对性能进行优化的高效SQL查询呢？

2024-08-06 08:00:00

SQL Query 数据库

为什么会有“建议MySQL单表数据控制在2000W”的说法？

“建议MySQL单表数据控制在2000W”是根据每行记录大小为1KB估算的，并非一个标准，还是要根据实际情况去决定单表的数据量。

2024-08-05 10:44:32

MySQL 磁盘 I/O

Java内存泄漏最全详解(六大原因及解决方案)

在对数据库进行操作的过程中，首先需要建立与数据库的连接，当不再使用时，需要调用close方法来释放与数据库的连接。

2024-08-05 10:40:58

数据库 Null IO连接

对线面试官：MySQL 给数据表增加一列，一定会锁表吗？

MySQL 8.0 在处理大数据表增加字段的情况下进行了一些优化，进一步优化了减少对表的锁定时间和降低性能影响。在MySQL8.0中，还引入了Invisible Indexes、Instant DDL和In-Place Alter升级等新功能，可以进一步提高MySQL的性能和可维护性。

2024-08-05 10:13:59

MySQL 大数据优化

Python SQLAlchemy 完整指南

SQLAlchemy是一个功能强大的Python库，可用于简化数据库操作。本教程提供了SQLAlchemy基本用法示例，包括连接数据库、创建表、以及查询、插入、更新和删除数据。

2024-08-05 09:58:24

SQLAlchemy Python 数据库

DTS数据传输同步MySQL至Elasticsearch实战

本章节通过RDS MySQL中的生产数据实时同步到阿里云Elasticsearch中进行搜索查询，通过数据传输服务DTS（Data Transmission Service）进行数据同步操作。

2024-08-05 09:31:00

MySQL DTS 数据

苏炳添开启“涡轮增压”震惊老外，Redis 这么快又是为什么？

不过Redis从 6.0 版本开始支持多线程模型，需要注意的是，Redis 多 I/O 线程模型只用来处理网络读/写请求，Redis 的读/写命令依然是单线程处理的。

2024-08-05 08:30:46

Redis 多线程模型

我说数据分页用Limit，面试官直接让我回去等消息

虽然LIMIT是实现数据分页的一种简单方式，但在面对大规模数据或高并发场景时，它可能不是最优选择。理解不同分页策略的优缺点，并根据实际应用场景选择合适的分页方法，对于开发高性能、高可用性的系统至关重要。

2024-08-05 01:26:54

数据分页 LIMIT

MySQL的 where 1=1 会不会影响性能？看完官方文档就悟了！

WHERE 1=1在MySQL查询中虽然看起来多余，但在动态构建SQL语句时却非常有用。从性能角度来看，由于MySQL查询优化器的智能处理，WHERE 1=1对查询性能的影响几乎可以忽略不计。因此，开发者在编写动态SQL时，可以放心地使用WHERE 1=1来简化代码逻辑，而无需担心其对性能造成负面影响。

2024-08-05 01:23:41

SQL 语句 MySQL

到底什么时候该用MongoDB

MongoDB在处理大数据量、高并发访问、灵活多变的数据结构以及地理位置数据处理等方面表现出色。然而，在选择数据库技术时，应充分考虑应用的具体需求，权衡MongoDB的优势与限制，以做出最为合适的技术选型。

2024-08-05 01:22:16

MongoDB 大数据数据结构

基于MySQL内核的SQL限流设计与实现

本文详细描述了基于MySQL内核的SQL限流功能的整体架构、主要功能模块等关键要素。SQL限流的设计与实现基于原生MySQL的执行原理与字符串匹配规则实现。

2024-08-02 19:49:41

MySQL 架构 SQL

Oracle数据库内存耗尽，大页惹的祸？

使用HugePages时，操作系统页表(虚拟内存到物理内存的映射)变小，可以减少访问页表条目所需的系统资源量，从而提高系统性能。HugePage的大小从2MB到256MB不等，这取决于内核版本和硬件体系结构。

2024-08-02 16:25:10

Oracle 数据库内存

数据库分库分表最详解

跨库、或跨表的事务处理，难度陡增，还会需要分布式事务管理....等等，因为数据已经分布到：不同的环境、和服务器上了。

2024-08-02 15:47:28

数据库分库分表

五大金刚-Redis的五种数据类型设计灵活，组合用满足复杂的应用

可以使用哈希存储用户信息，再使用有序集合来维护用户的游戏得分排名。通过合理利用这些数据类型，可以构建高性能、低延迟的应用。

2024-08-02 13:10:25

Redis 数据类型延迟

MySQL数据实时同步到Elasticsearch解决方案

随着数据量的急剧增长和查询复杂度的不断提升，单一依赖 MySQL 进行高效的数据检索显得日益吃力，尤其是在面对海量数据的复杂查询场景时，性能瓶颈愈发凸显。为了有效缓解这一挑战，我们通常采用读写分离的策略，将 Elasticsearch（简称 ES）引入作为专门的查询数据库。

2024-08-02 09:36:03

MySQL 同步数据

使用Langchain构建简单的数据库Agent

如果对内容有什么疑问和建议可以私信和留言，也可以添加我加入大模型交流群，一起讨论大模型在创作、RAG和agent中的应用。

2024-08-01 13:12:57

Langchain 数据库 Agent

从零开始学PostgreSQL：任务进度报告

PostgreSQL 提供了一套强大的工具集，允许数据库管理员监控多种维护操作的进度。通过这些视图，管理员可以更好地管理数据库维护活动，从而提高数据库的整体性能和可靠性。

2024-08-01 11:21:52

PostgreSQL 任务进度

何时使用Elasticsearch而不是MySQL

选择Elasticsearch还是MySQL，取决于应用程序的具体需求和场景。Elasticsearch在全文搜索、实时数据处理和分析、可伸缩性以及灵活的文档模型等方面具有显著优势，适用于处理大量非结构化或半结构化文本数据的场景。

2024-08-01 10:10:24

MySQL 场景搜索

服了！DELETE 同一行记录也会造成死锁！

DELETE同一行记录引发死锁是一个复杂的问题，需要从多个角度进行考虑和解决。通过优化事务设计、调整隔离级别、使用锁超时和重试机制、利用监控和诊断工具以及代码层面的优化，我们可以有效地降低死锁的风险，提高数据库的性能和稳定性。

2024-08-01 09:57:17

DELETE 死锁工具

Java许可再变更！Oracle将于今年9月“调整”Oracle JDK 17，用户：不如迁移到替代方案原创精选

Oracle有很大可能在平衡 Java 的开放性和商业收益之间继续踩着用户的底线不断试探，以期找到合适的定位。随着时间的推移，这种平衡可能会继续发生变化，影响着 Java 社区和企业的决策。

2024-07-31 15:52:38

Java Oracle 开放

Redis 架构详解，值得收藏！

Forking 是操作系统通过创建自身副本来创建新进程的一种方式。这样，你将获得一个新的进程 ID 和一些其他信息和句柄，因此新 forking 的进程（子进程）可以与原始进程父进程通信。

2024-07-31 08:33:17

Redis 架构系统

当你的PG数据库慢慢变大，你会怎么办？

如果你们企业规模不大，从Oracle迁移到PG后DBA的工作量不够饱满，干这些工作有助于让你的工作量饱满起来，那么你承接这些SQL优化的工作也是可以的。

2024-07-31 08:21:53

PG 数据库 DBA

我用两个方法就将接口响应时间从2s优化到了100ms

在本文中，我们深入探讨了接口性能优化的多种策略，从技术细节到实践应用，讲解了接口优化的j九种方式。

2024-07-30 14:26:52

接口数据库

NoSQL vs SQL，究竟如何选择？

SQL 和 NoSQL是日常开发中经常使用的两种数据库，具体如何选择需要根据业务需求而定。

2024-07-30 11:40:00

数据库 NoSQL SQL

从零开始学PostgreSQL：监控数据库动态

PostgreSQL的统计信息收集和报告机制提供了深入的数据库性能洞察，同时考虑了实时性、一致性和安全性。通过合理配置和使用这些工具，数据库管理员可以有效地监控和优化数据库性能。

2024-07-30 09:22:44

PostgreSQL 数据库工具

你是如何用 Go 语言配置高性能 SQL.DB 的？

Go 的 database/sql 包提供了连接池的功能，您可以通过设置最大空闲连接、最大打开连接数和连接的最大生命周期来优化连接池。

2024-07-30 09:02:15

Go 语言连接数

SQL 中的高级字符处理函数

以端到端的方式返回从串联或联接的两个或更多字符串值生成的字符串。它会用第一个函数参数中指定的分隔符分隔连接的字符串值。（CONCAT_WS 指示使用分隔符连接。）

2024-07-29 10:46:50

SQL 字符函数

MySQL 分布式锁：设计与实现

如果想锁住多份数据该怎么实现？比如说，某个库存操作，既要修改物理库存，又要修改虚拟库存，想锁住物理库存的同时，又锁住虚拟库存。

2024-07-29 09:57:47

MySQL 分布式锁

图解MySQL执行一条SQL的过程

更新SQL在MySQL中的执行过程，因为过程涉及到不同情况的分支流程，我用一张活动图把整个过程串了起来，方便大家理解。

2024-07-29 09:49:00

SQL MySQL 执行

SQLite这么小众的数据库，到底是什么人在用？

WebAssembly (WASM) 是一种低级字节码格式，能够在现代浏览器中高效运行。它被设计为一个可移植的目标，可以被多种编程语言编译成它。它有接近原生的性能，同时可以安全地运行在浏览器的沙箱环境中。

2024-07-26 08:34:25

SQLite 数据库字节码

分库分表的理解与实践

分库分表是应对大数据量和高并发访问的有效手段。通过合理的分库分表策略和实践建议，可以提升数据库的性能和扩展性，为业务的快速发展提供有力支撑。

2024-07-26 00:16:11

分库分表高并发大数据

面试官：聊聊你对分库分表的理解？

分库分表技术不但是日常工作中用于解决数据库中的数据量会急剧增长，解决单库单表性能瓶颈的一种方案，更是面试中的高频知识点。

2024-07-25 18:20:03

分库分表 MySQL 数据库

一亿数据大表的分页技术实践

处理包含一亿条记录的大表时，分页查询的性能优化是一个复杂而重要的任务。通过选择合适的分页策略、优化数据库查询、使用缓存系统和实施分库分表等操作，可以显著提高分页查询的性能和用户体验。

2024-07-25 09:15:39

数据大表优化

MySQL中的悲观锁与乐观锁：理解与应用

在实际应用中，可以根据具体的业务场景和需求来选择合适的锁策略。有时候，也可以结合使用悲观锁和乐观锁，以达到更好的并发控制和系统性能。

2024-07-25 09:01:22

MySQL 业务场景乐观锁

MySQL与MongoDB的技术选型指南

无论是MySQL还是MongoDB，都是优秀的数据库系统，选择适合项目需求的数据库，将有助于提高开发效率，降低维护成本，保证系统的稳定性和可靠性。

2024-07-25 08:52:13

MySQL MongoDB 技术

上一页 1 ··· 8 9 10 11 12 ··· 334 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客鸿蒙开发者社区 AI.x社区

教育

51CTO学堂精培企业培训 CTO训练营