鸿蒙开发者社区

WOT技术大会

公众号矩阵

移动端

短视频免费课程课程排行直播课软考学堂

全部课程厂商认证 IT技术 24年11月软考 PMP项目管理免费题库

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO软考

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

51CTO软考题库

账号设置退出

数据库

1.6w内容

关注

数据库话题为数据库工程师和数据库管理人员提供数据库相关新闻资讯、前沿技术、管理和开发技巧、使用案例等内容，涉及SQL Server、MySQL、MariaDB、PostgreSQL、Redis、MongoDB等数据库。

文章博文帖子课程

共 1.6w 条

为什么会有“建议MySQL单表数据控制在2000W”的说法？

“建议MySQL单表数据控制在2000W”是根据每行记录大小为1KB估算的，并非一个标准，还是要根据实际情况去决定单表的数据量。

2024-08-05 10:44:32

MySQL 磁盘 I/O

Java内存泄漏最全详解(六大原因及解决方案)

在对数据库进行操作的过程中，首先需要建立与数据库的连接，当不再使用时，需要调用close方法来释放与数据库的连接。

2024-08-05 10:40:58

数据库 Null IO连接

对线面试官：MySQL 给数据表增加一列，一定会锁表吗？

MySQL 8.0 在处理大数据表增加字段的情况下进行了一些优化，进一步优化了减少对表的锁定时间和降低性能影响。在MySQL8.0中，还引入了Invisible Indexes、Instant DDL和In-Place Alter升级等新功能，可以进一步提高MySQL的性能和可维护性。

2024-08-05 10:13:59

MySQL 大数据优化

Python SQLAlchemy 完整指南

SQLAlchemy是一个功能强大的Python库，可用于简化数据库操作。本教程提供了SQLAlchemy基本用法示例，包括连接数据库、创建表、以及查询、插入、更新和删除数据。

2024-08-05 09:58:24

SQLAlchemy Python 数据库

DTS数据传输同步MySQL至Elasticsearch实战

本章节通过RDS MySQL中的生产数据实时同步到阿里云Elasticsearch中进行搜索查询，通过数据传输服务DTS（Data Transmission Service）进行数据同步操作。

2024-08-05 09:31:00

MySQL DTS 数据

苏炳添开启“涡轮增压”震惊老外，Redis 这么快又是为什么？

不过Redis从 6.0 版本开始支持多线程模型，需要注意的是，Redis 多 I/O 线程模型只用来处理网络读/写请求，Redis 的读/写命令依然是单线程处理的。

2024-08-05 08:30:46

Redis 多线程模型

我说数据分页用Limit，面试官直接让我回去等消息

虽然LIMIT是实现数据分页的一种简单方式，但在面对大规模数据或高并发场景时，它可能不是最优选择。理解不同分页策略的优缺点，并根据实际应用场景选择合适的分页方法，对于开发高性能、高可用性的系统至关重要。

2024-08-05 01:26:54

数据分页 LIMIT

MySQL的 where 1=1 会不会影响性能？看完官方文档就悟了！

WHERE 1=1在MySQL查询中虽然看起来多余，但在动态构建SQL语句时却非常有用。从性能角度来看，由于MySQL查询优化器的智能处理，WHERE 1=1对查询性能的影响几乎可以忽略不计。因此，开发者在编写动态SQL时，可以放心地使用WHERE 1=1来简化代码逻辑，而无需担心其对性能造成负面影响。

2024-08-05 01:23:41

SQL 语句 MySQL

到底什么时候该用MongoDB

MongoDB在处理大数据量、高并发访问、灵活多变的数据结构以及地理位置数据处理等方面表现出色。然而，在选择数据库技术时，应充分考虑应用的具体需求，权衡MongoDB的优势与限制，以做出最为合适的技术选型。

2024-08-05 01:22:16

MongoDB 大数据数据结构

基于MySQL内核的SQL限流设计与实现

本文详细描述了基于MySQL内核的SQL限流功能的整体架构、主要功能模块等关键要素。SQL限流的设计与实现基于原生MySQL的执行原理与字符串匹配规则实现。

2024-08-02 19:49:41

MySQL 架构 SQL

Oracle数据库内存耗尽，大页惹的祸？

使用HugePages时，操作系统页表(虚拟内存到物理内存的映射)变小，可以减少访问页表条目所需的系统资源量，从而提高系统性能。HugePage的大小从2MB到256MB不等，这取决于内核版本和硬件体系结构。

2024-08-02 16:25:10

Oracle 数据库内存

数据库分库分表最详解

跨库、或跨表的事务处理，难度陡增，还会需要分布式事务管理....等等，因为数据已经分布到：不同的环境、和服务器上了。

2024-08-02 15:47:28

数据库分库分表

五大金刚-Redis的五种数据类型设计灵活，组合用满足复杂的应用

可以使用哈希存储用户信息，再使用有序集合来维护用户的游戏得分排名。通过合理利用这些数据类型，可以构建高性能、低延迟的应用。

2024-08-02 13:10:25

Redis 数据类型延迟

想用 PostgreSQL 热备进行只读查询？请先做好恢复冲突检查

统计信息视图 pg_stat_database_conflicts 包含了，自上次统计信息重置以来，发生的所有恢复冲突的详细说明。您必须在备用服务器（而不是主服务器）上查看该视图，因为只有那里才会发生恢复冲突。

2024-08-02 09:46:22

PostgreSQ 服务器统计

MySQL数据实时同步到Elasticsearch解决方案

随着数据量的急剧增长和查询复杂度的不断提升，单一依赖 MySQL 进行高效的数据检索显得日益吃力，尤其是在面对海量数据的复杂查询场景时，性能瓶颈愈发凸显。为了有效缓解这一挑战，我们通常采用读写分离的策略，将 Elasticsearch（简称 ES）引入作为专门的查询数据库。

2024-08-02 09:36:03

MySQL 同步数据

使用Langchain构建简单的数据库Agent

如果对内容有什么疑问和建议可以私信和留言，也可以添加我加入大模型交流群，一起讨论大模型在创作、RAG和agent中的应用。

2024-08-01 13:12:57

Langchain 数据库 Agent

从零开始学PostgreSQL：任务进度报告

PostgreSQL 提供了一套强大的工具集，允许数据库管理员监控多种维护操作的进度。通过这些视图，管理员可以更好地管理数据库维护活动，从而提高数据库的整体性能和可靠性。

2024-08-01 11:21:52

PostgreSQL 任务进度

何时使用Elasticsearch而不是MySQL

选择Elasticsearch还是MySQL，取决于应用程序的具体需求和场景。Elasticsearch在全文搜索、实时数据处理和分析、可伸缩性以及灵活的文档模型等方面具有显著优势，适用于处理大量非结构化或半结构化文本数据的场景。

2024-08-01 10:10:24

MySQL 场景搜索

服了！DELETE 同一行记录也会造成死锁！

DELETE同一行记录引发死锁是一个复杂的问题，需要从多个角度进行考虑和解决。通过优化事务设计、调整隔离级别、使用锁超时和重试机制、利用监控和诊断工具以及代码层面的优化，我们可以有效地降低死锁的风险，提高数据库的性能和稳定性。

2024-08-01 09:57:17

DELETE 死锁工具

PG 死锁监控很简单，风险排除要趁早

死锁是一个重要的问题，每个数据库都可能发生死锁。基本上，如果两个事务必须相互等待，就会发生死锁。死锁通常与阻塞的查询有关，但也略有不同，它会导致查询被取消，因为它给另一个查询造成了死锁。

2024-08-01 08:36:06

PG 死锁监控

Java许可再变更！Oracle将于今年9月“调整”Oracle JDK 17，用户：不如迁移到替代方案原创精选

Oracle有很大可能在平衡 Java 的开放性和商业收益之间继续踩着用户的底线不断试探，以期找到合适的定位。随着时间的推移，这种平衡可能会继续发生变化，影响着 Java 社区和企业的决策。

2024-07-31 15:52:38

Java Oracle 开放

监控好临时文件的使用，让数据库运行更高效

由于 work_mem 限制，当 PostgreSQL 后端执行的操作，需要使用比其可以使用的内存更多的内存时，就会创建这些文件。排序操作用于ORDER BY、DISTINCT和合并连接。

2024-07-31 11:29:11

监控数据库 PostgreSQL

Redis 架构详解，值得收藏！

Forking 是操作系统通过创建自身副本来创建新进程的一种方式。这样，你将获得一个新的进程 ID 和一些其他信息和句柄，因此新 forking 的进程（子进程）可以与原始进程父进程通信。

2024-07-31 08:33:17

Redis 架构系统

当你的PG数据库慢慢变大，你会怎么办？

如果你们企业规模不大，从Oracle迁移到PG后DBA的工作量不够饱满，干这些工作有助于让你的工作量饱满起来，那么你承接这些SQL优化的工作也是可以的。

2024-07-31 08:21:53

PG 数据库 DBA

我用两个方法就将接口响应时间从2s优化到了100ms

在本文中，我们深入探讨了接口性能优化的多种策略，从技术细节到实践应用，讲解了接口优化的j九种方式。

2024-07-30 14:26:52

接口数据库

NoSQL vs SQL，究竟如何选择？

SQL 和 NoSQL是日常开发中经常使用的两种数据库，具体如何选择需要根据业务需求而定。

2024-07-30 11:40:00

数据库 NoSQL SQL

从零开始学PostgreSQL：监控数据库动态

PostgreSQL的统计信息收集和报告机制提供了深入的数据库性能洞察，同时考虑了实时性、一致性和安全性。通过合理配置和使用这些工具，数据库管理员可以有效地监控和优化数据库性能。

2024-07-30 09:22:44

PostgreSQL 数据库工具

你是如何用 Go 语言配置高性能 SQL.DB 的？

Go 的 database/sql 包提供了连接池的功能，您可以通过设置最大空闲连接、最大打开连接数和连接的最大生命周期来优化连接池。

2024-07-30 09:02:15

Go 语言连接数

SQL 中的高级字符处理函数

以端到端的方式返回从串联或联接的两个或更多字符串值生成的字符串。它会用第一个函数参数中指定的分隔符分隔连接的字符串值。（CONCAT_WS 指示使用分隔符连接。）

2024-07-29 10:46:50

SQL 字符函数

MySQL 分布式锁：设计与实现

如果想锁住多份数据该怎么实现？比如说，某个库存操作，既要修改物理库存，又要修改虚拟库存，想锁住物理库存的同时，又锁住虚拟库存。

2024-07-29 09:57:47

MySQL 分布式锁

图解MySQL执行一条SQL的过程

更新SQL在MySQL中的执行过程，因为过程涉及到不同情况的分支流程，我用一张活动图把整个过程串了起来，方便大家理解。

2024-07-29 09:49:00

SQL MySQL 执行

富二代实习生碰到 PostgreSQL 死锁了：那就干脆跳过不锁呗！

在设计实现事务和监控应用程序性能时，通过应用最佳实践，您可以避免和解决 PostgreSQL 数据库中的死锁。在使用诸如 “SELECT ... FOR UPDATE SKIP LOCKED“ 这类技术时，请务必谨慎使用它，并严谨地测试您的应用程序。

2024-07-29 09:35:33

PostgreSQL 死锁技术

SQLite这么小众的数据库，到底是什么人在用？

WebAssembly (WASM) 是一种低级字节码格式，能够在现代浏览器中高效运行。它被设计为一个可移植的目标，可以被多种编程语言编译成它。它有接近原生的性能，同时可以安全地运行在浏览器的沙箱环境中。

2024-07-26 08:34:25

SQLite 数据库字节码

分库分表的理解与实践

分库分表是应对大数据量和高并发访问的有效手段。通过合理的分库分表策略和实践建议，可以提升数据库的性能和扩展性，为业务的快速发展提供有力支撑。

2024-07-26 00:16:11

分库分表高并发大数据

面试官：聊聊你对分库分表的理解？

分库分表技术不但是日常工作中用于解决数据库中的数据量会急剧增长，解决单库单表性能瓶颈的一种方案，更是面试中的高频知识点。

2024-07-25 18:20:03

分库分表 MySQL 数据库

一亿数据大表的分页技术实践

处理包含一亿条记录的大表时，分页查询的性能优化是一个复杂而重要的任务。通过选择合适的分页策略、优化数据库查询、使用缓存系统和实施分库分表等操作，可以显著提高分页查询的性能和用户体验。

2024-07-25 09:15:39

数据大表优化

MySQL中的悲观锁与乐观锁：理解与应用

在实际应用中，可以根据具体的业务场景和需求来选择合适的锁策略。有时候，也可以结合使用悲观锁和乐观锁，以达到更好的并发控制和系统性能。

2024-07-25 09:01:22

MySQL 业务场景乐观锁

MySQL与MongoDB的技术选型指南

无论是MySQL还是MongoDB，都是优秀的数据库系统，选择适合项目需求的数据库，将有助于提高开发效率，降低维护成本，保证系统的稳定性和可靠性。

2024-07-25 08:52:13

MySQL MongoDB 技术

聊聊 Redis 的高可用

使用 Redis Cluster 集群，主要解决了大数据量存储导致的各种慢问题，同时也便于横向拓展。在面对千万级甚至亿级别的流量的时候，很多是在千百台的实例节点组成的集群上进行流量调度、服务治理的。

2024-07-25 08:39:48

Redis 高可用系统

金融行业分布式数据库应用观察原创

金融行业，具有对数据库最为严苛和复杂的要求与调整。分布式事务型数据库，经过多年发展，也成功验证其可行性与实用性，可以在金融行业核心场景中稳定运行。在这一过程中，厂商也积累了丰富的实践经验，为未来更大规模的使用打下坚实基础。

2024-07-25 07:55:37

金融行业数据库分布式事务型数据库

为什么 MySQL 单表不能超过 2000 万行？

互联网江湖上的确流传着一个说法：单表数据量超过 500 万行时就要进行分表分库，已经超过 2000 万行时 MySQL 的性能就会急剧下降。

2024-07-24 16:25:02

MySQL 数据库

数据库连接数太多报错？应该这样避免

在使用 MySQL 数据库时，尤其是在高并发的场景下，数据库连接数过多会导致连接池耗尽，进而影响应用程序的正常运行。本文将介绍几种防止 MySQL 数据库连接过多的方法，来优化数据库性能并提高应用程序的稳定性。

2024-07-24 11:25:43

MySQL 数据库

经典面试题：Redis为什么这么快？

Redis的多线程网络模型通过将读取和写回数据的任务异步化，以及更好地利用多核CPU，从而提高了Redis在处理大量在线流量时的性能表现。

2024-07-24 08:38:07

Redis 多线程网络模型

数据库性能优化：提升系统响应速度的关键策略

数据库性能优化是一个持续的过程，需要开发者和运维人员共同努力。通过合理设计数据库表结构、优化查询语句、建立索引、分库分表、定期清理垃圾数据等策略，可以显著提升数据库的查询速度和事务处理能力，减少系统响应时间，提高用户体验。

2024-07-23 08:08:18

数据库性能优化

提升性能与一致性：MySQL 5.7中的组提交与两阶段提交机制解析

用于将缓冲区内容持久化到磁盘的 fsync 步骤被延迟了。它会等待一个组中的多个事务都处于 Prepare 阶段后，再进行一次组提交，即将日志一次性持久化到磁盘中。

2024-07-22 08:57:58

MySQL 缓冲区磁盘

探索MySQL的高效数据同步：并行复制原理

WriteSet 通过检测两个事务是否更新了相同的记录来判断事务能否并行回放，因此需要在运行时保存已提交的事务信息以记录历史事务更新了哪些行。

2024-07-19 09:10:37

MySQL WriteSet 并行回放

多款OLAP数据库大比拼，谁更胜一筹？

昨天又使用最新版本作了对比，这次chdb卡在了Query08和Query09上，为了确认Query09很耗时，我在我的笔记本（mac M2Max 32GB内存）上做了测试，耗时158s多。

2024-07-19 08:33:56

OLAP 数据库 Query09

字节图数据库架构论文入选数据库顶会SIGMOD 2024

ByteGraph 是字节自研的支持万亿级图数据库，目前 ByteGraph 已部署超过 1000+ 集群，支持今日头条，抖音，西瓜视频，火山，广告，风控等全系产品。

2024-07-18 21:21:29

转转上门履约服务拆分库表迁移实践

本文主要介绍两个数据迁移方案，一个是大家耳熟能详的数据双写，另一个是以短暂写入失败为代价的开关控制迁移方案。

2024-07-17 21:02:42

数据迁移数据库

麻省理工研究人员引入新的人工智能驱动的SQL数据库分析

在当今数据驱动的世界中，对表格数据进行复杂统计分析的能力对于从原始数据中获得有意义的见解至关重要。然而，数据的复杂性和庞大量使得个人和组织越来越难以有效地处理和解释信息。

2024-07-17 13:47:53

人工智能 SQL 数据库

上一页 1 ··· 7 8 9 10 11 ··· 333 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客鸿蒙开发者社区 AI.x社区

教育

51CTO学堂精培企业培训 CTO训练营