鸿蒙开发者社区

WOT技术大会

公众号矩阵

移动端

短视频免费课程课程排行直播课软考学堂

全部课程厂商认证 IT技术 24年11月软考 PMP项目管理免费题库

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO软考

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

51CTO软考题库

账号设置退出

数据库运维

1517内容

关注

数据库运维话题针对数据库的软件安装、配置优化、备份策略选择及实施、数据恢复、数据迁移、故障排除、预防性巡检等多个话题，分享使用技巧以及实践应用等内容。

共 1517 条

6亿数据秒级查询，ClickHouse太快了！

ClickHouse 在数据分析技术领域早已声名远扬，最近由于项目需求使用到了 ClickHouse 做分析数据库，于是用测试环境做了一个单表 6 亿数据量的性能测试。

2021-03-26 07:58:34

数据秒级查询

SpringCloud Alibaba实战之SpringCloud Gateway 请求响应日志

请求响应日志是日常开发调试定位问题的重要手段，在微服务中引入SpringCloud Gateway后我们希望在网关层统一进行日志的收集。

2021-03-26 06:01:45

日志 MongoDB 存储

全程干货分享：四个方法学会高效率配置管理！

好的配置管理是部署的第一步，通常，应用的配置在不同部署 (预发布、生产环境、开发环境等等)间会有很大差异。

2021-03-25 09:49:05

数据库工具技术

盘点一下数据库的误操作有哪些后悔药？

无论是开发、测试，还是DBA，都难免会涉及到数据库的操作，比如：创建某张表，添加某个字段、添加数据、更新数据、删除数据、查询数据等等。

2021-03-19 08:16:03

Prometheus时序数据库-数据的查询

Promql是非常强大的，可以满足我们的各种需求。其运行原理自然也激起了笔者的好奇心，本篇文章虽然只分析了一条简单的Promql,但万变不离其宗,任何Promql都是类似的运行逻辑。希望本文对读者能有所帮助。

2021-03-15 10:10:29

数据库数据查询

如何把MongoDB作为循环队列

我们在使用MongoDB的时候，一个集合里面能放多少数据，一般取决于硬盘大小，只要硬盘足够大，那么我们可以无休止地往里面添加数据。

2021-03-14 22:00:17

MongoDB 循环队列

如何使用DNS构建无成本的区块链数据库

区块链不仅是一个流行词。它也不限于加密货币和比特币。凭借其创造透明度和公平性的能力，这项技术正在革新各个领域。应用范围从跟踪系统到保护数据，再到执行在线投票系统。

2021-03-14 10:21:36

数据库区块链 DNS

从零搭建开发脚手架 Spring Boot集成Flyway实现数据库版本管理

Flyway是一款数据库版本控制管理工具，支持数据库版本自动升级。项目初始化的时候，往往都是要先手动执行数据库脚本。

2021-03-09 17:11:09

数据库脚手架开发

Prometheus时序数据库-数据的插入

笔者详细的阐述了Prometheus时序数据库在内存和磁盘中的存储结构。有了前面的铺垫，笔者就可以在本篇文章阐述下数据的插入过程。

2021-03-08 10:18:55

数据库数据 Prometheus

企业应该考虑的图形数据库五大优势

近年来，人们对图形数据库的兴趣日益浓厚，分析家预测，在2021年及以后，企业对该技术的使用将继续增加。

2021-03-07 16:35:37

图形数据库数据库

为什么Delete表数据，磁盘空间却还是被占用

最近有个上位机获取下位机上报数据的项目，由于上报频率比较频繁且数据量大，导致数据增长过快，磁盘占用多。为了节约成本，定期进行数据备份，并通过delete删除表记录。

2021-03-05 08:29:20

Delete Mysql 数据结构

适合Web开发者的十大数据库优化实践译文

数据库优化是一个漫长的调试过程，需要Web应用开发和测试人员的协同努力。本文给出十项优化建议，以便您能改善用户体验和资源管理。

2021-03-01 09:00:00

数据库 Web 开发

我嘞个去，慢查询竟把系统搞崩了

通常情况下，SQL 慢查询一般只会导致应用服务响应变慢，但在去年双十一活动时，我碰到了一个慢查询把整个网站搞崩溃的问题。

2021-03-01 08:05:09

项目中数据库密码没有加密导致了数据泄露！！

作者个人研发的在高并发场景下，提供的简单、稳定、可扩展的延迟消息队列框架，具有精准的定时任务和延迟队列处理功能。自开源半年多以来，已成功为十几家中小型企业提供了精准定时调度方案，经受住了生产环境的考验。

2021-02-28 07:47:41

数据库密码加密

98%的DBA不知道的数据库内存知识点

在日常工作中，时不时会收到内存使用率高的告警，那么我们应该如何处理呢？本文将从Linux和MySQL两个层面，介绍内存管理的相关知识点，希望能给大家带来一些帮助，以便更好地应对内存问题。

2021-02-24 09:45:21

数据库工具技术

一个迟来的赞，送给JPA。AbstractEntity需要准备些什么？

关系型数据库其实很讨人厌，尤其是在你使用数据库驱动的开发模式时。需要首先把表给创建好了，然后再使用代码生成器反向生成一堆几乎无法可读的代码。当字段有变更的时候，又是一番折腾。

2021-02-22 21:20:43

AbstractEnt 关系型数据库

了解数据库测试的主要类型

数据库可靠性测试并不只有大多数软件专业人员所知道的ACID测试，数据库测试分为功能测试、ACID验证和性能测试。

2021-02-21 22:26:15

数据库测试数据库

Hive动态分区详解，你知道吗？

Hive根据select语句中最后两列来确定分区字段country和state的值，这里刻意使用了不同的命名，就是为了强调源表字段和输出分区值之间的关系是根据位置而不是根据命名来匹配的。

2021-02-20 08:21:18

Hive 动态分区

如何将元素插入数组的指定索引？

数组是一种线性数据结构，可以说是编程中最常用的数据结构之一。修改数组是一种常见的操作，这里，我们来讨论如何在 JS 中数组的任何位置添加元素。

2021-02-20 08:01:48

索引数组元素

CMU15445 数据库系统实验一：Buffer Pool Manager

本篇是实验一，管理文件系统的页在内存中的缓存 —— buffer pool manager。实验的目标系统 BusTub 是一个面向磁盘的 DBMS，但磁盘上的数据不支持字节粒度的访问。

2021-02-19 22:18:11

数据库系统管理

如何使用IndexedDB —浏览器上的NoSQL数据库

IndexedDB是大型NoSQL存储系统。它使你几乎可以将任何内容存储在用户的浏览器中。除了通常的搜索，获取和放置操作外，IndexedDB还支持事务。

2021-02-19 18:05:23

数据库 NoSQL IndexedDB

教你用SQL生成一张带「农历」的日期维度表

有不少同学留言该如何解决农历的问题，今天就告诉大家具体操作方法。农历与世界通用的日历有所区别，是科学家演算出来的，目前为止只有到2049年的，以后的有了还可以加入!

2021-02-19 08:13:44

SQL 日期维度表

什么是数据库分区？为什么要使用它？

分区意味着您将把它们组织在那个大仓库内的不同房间中。它们仍然属于一个仓库，但是现在您根据数据库分区策略在逻辑级别上对它们进行分组。

2021-02-18 09:23:47

数据库分区数据库仓库

大数据和开源查询和分析框架

Apache Hive是基于Hadoop生态系统的旗舰数据仓库工具。它不仅将结构化的数据文件映射到数据库表，而且还提供SQL（HQL）查询功能（例如SQL语句）并将SQL语句转换为MapReduce任务以供执行。

2021-02-10 16:03:19

大数据开源框架

惊呆，一条SQL竟然让Oracle奔溃了

一条sql就能让oracle挂了，真的是不敢相信啊，前几天生产上确实出现了这样一个故障，我们来一起做一个事件回放。

2021-02-09 09:50:21

SQL Oracle 应用

值得推荐的60种不同功能的PostgreSQL工具译文

为了方便您迅速向Postgres中添加各种新的工具和插件，也为了让您能够扩展现有的Postgres数据库系统功能，本文为您总结了六十款工具、插件和附加组件，以协助您快速、有效地改善现有Postgres的运维方式和服务性能。

2021-02-07 09:00:00

PostgreSQL 数据库工具

SQL注入竟然把我们的系统搞挂了

最近我在整理安全漏洞相关问题，准备在公司做一次分享。恰好，这段时间团队发现了一个sql注入漏洞：在一个公共的分页功能中，排序字段作为入参，前端页面可以自定义。

2021-02-06 13:11:28

SQL 系统数据库

关于随机恢复性能优化的小结

最近在进一步优化随机恢复的成功率问题，本来预计是2周内能够快速结束，从1个9的恢复能力快速提升到2个9，结果这个Flag立下了，但是最终的结果和付出的努力远比想象中要高。

2021-02-05 05:28:31

恢复性能优化

老铁，索引别想乱用

在web开发中，使用记录id获得详情信息是一个比较频繁的操作，所有必须具有很高的查询速度，这时，很多小伙伴就会想到使用索引，在id字段上添加索引。且慢!!! 接下来让阿都告诉你，为什么拦着你了。

2021-02-04 22:29:20

索引 web 开发

解惑SQL Server中LIKE使用变量类型不同输出结果不一致

一同事在写脚本时，遇到一个关于LIKE里面使用不同的变量类型导致查询结果不一致的问题，因为这个问题被不同的人问过好几次，索性总结一下，免得每次都要解释一遍，直接丢一篇博客岂不是更方便!其实看似有点让人不解的现象背后实质跟数据类型的实现有关。

2021-02-03 08:01:35

SQL Server LIKE

DDD里面的CQRS到底是什么？

随着业务不断发展，软件系统的架构也越来越复杂，但无论多复杂的业务最终在系统中实现的时候，无非是读写操作。

2021-02-02 09:37:20

CQRS 系统数据库

线上又炸了，原来是索引的“锅”

最近在线上环境遇到了一次 SQL 慢查询引发的数据库故障，影响线上业务。

2021-02-02 09:13:11

索引 SQL 数据库

聊聊TiDB的分布式事务模型

务场景的复杂化，必然导致乐观事务冲突变多，这也是TiDB后续版本转向悲观事务的重要原因。TiDB中乐观事务和悲观事务可以共存。

2021-02-01 09:35:53

关系型数据库模型

数据库查询性能优化指南

数据库查询性能优化一直是程序员绕不开的话题，当我们遇到业务刷新报表缓慢或者查询获取结果延迟太大，可以采用提问法来思考如何进行优化。

2021-01-31 17:50:41

数据库查询程序员

阿里一面，给了几条SQL，问需要执行几次树搜索操作？

有位朋友去阿里面试，他说面试官给了几条查询SQL，问:需要执行几次树搜索操作?我朋友当时是有点懵的，后来冷静思考，才发现就是考索引的几个基础知识点~~ 本文我们分九个索引知识点，一起来探讨一下。

2021-01-31 13:39:22

SQL 树搜索操作

如何将SQL数据库迁移到NoSQL 译文

本文首先比较了关系型数据库和NoSQL数据库的各种特点和适用场景，然后介绍了如何使用云服务提供商提供的各种工具，将SQL数据库迁移到NoSQL。

2021-01-28 09:00:00

SQL 数据库 NoSQL

SQL Server序列的监控

如果DBA不去监控序列的话，极有可能当用户报告/反馈这个问题的时候，才发现序列的值已经被耗尽用完了，此时救火式处理的话，略显仓促和尴尬。

2021-01-27 05:39:53

SQL Server 监控

我们为什么要分库分表？

从机器的角度看，性能瓶颈无非就是CPU、内存、磁盘、网络这些，要解决性能瓶颈最简单粗暴的办法就是提升机器性能，但是通过这种方法成本和收益投入比往往又太高了，不划算，所以重点还是要从软件角度入手。

2021-01-26 05:37:08

分库分表内存

52条实用经验，SQL优化不再难！

不论是面试还是实际开发(后端)，SQL 优化一直是绕不开的一个话题，本文会提到 52 条 SQL 语句性能优化策略。

2021-01-19 08:56:06

SQL 优化后端

SQL Server解惑——查询条件IN中能否使用变量

在SQL Server的查询条件中，能否在IN里面使用变量呢?如果可以的话，有没有需要注意的地方或一些限制呢?

2021-01-19 05:39:17

SQL Server 变量

一文搞懂Undo Log版本链与ReadView机制如何让事务读取到该读的数据

在 MySQL 的数据表中，存储着一行行的数据记录，对每行数据而言，不仅仅记录着我们定义的字段值，还会隐藏两个字段：row_trx_id 和 roll_pointer，前者表示更新本行数据的事务 id，后者表示的是回滚指针，它指向的是该行数据上一个版本的 undo log(如果不明白这是什么，可以先继续往后看)。

2021-01-15 07:40:16

Undo Log 版本链机制

聊聊分布式数据库对2PC的优化

在单体数据库时代，数据库本身就支持ACID事务，开发人员甚至只要在方法上加一个@Transactional注解就可以搞定事务了，非常简单。

2021-01-13 08:49:36

数据库 2PC 优化

高并发场景下，到底先更新缓存还是先更新数据库？

在大型系统中，为了减少数据库压力通常会引入缓存机制，一旦引入缓存又很容易造成缓存和数据库数据不一致，导致用户看到的是旧数据。

2021-01-13 05:23:27

缓存数据库高并发

记一次生产线MySQL库Binlog日志占满磁盘的故障处理

今天早上监控平台邮件通知生产某业务系统的MySQL数据库存储空间达到了90%，赶紧爬起来远程连上数据库主机，发现Master双主MySQL数据库10.5.11.105、和10.5.11.106数据目录/var/lib/mysql空间使用率达到了97%和96%。

2021-01-12 07:57:36

MySQL Binlog 故障处理

从0到1部署一套TiDB本地集群

TiDB 是 PingCAP 公司自主设计、研发的开源分布式关系型数据库，是一款同时支持在线事务处理与在线分析处理 (Hybrid Transactional and Analytical Processing, HTAP)的融合型分布式数据库产品，具备水平扩容或者缩容、金融级高可用、实时 HTAP、云原生的分布式数据库、兼容 MySQL 5.7 协议和 MySQL 生态等重要特性。

2021-01-08 08:19:36

数据库 TiDB 集群

MySQL表空间回收的正确姿势

为了缩小磁盘上表数据文件占用的空间，我们在最大的一张业务表中用delete命令删除了一半儿的旧数据，删除之后，磁盘上表数据文件并没有缩小，即使删除整张表的数据，文件依然没有变小，这是为什么呢?

2021-01-08 08:10:34

MySQL 表空间回收

深渊之刃-Greenplum数据库之拉链表的实现

历史拉链表是一种数据模型，主要是针对数据仓库设计中表存储数据的方式而定义的;顾名思义，所谓历史拉链表，就是记录一个事务从开始一直到当前状态的所有变化的信息，拉链表可以避免按每一天存储所有记录造成的海量存储问题，同事也是处理缓慢变化数据的一种常见方式。

2021-01-08 05:27:49

数据库拉链表存储

SQL Server解惑——为什么ORDER BY改变了变量的字符串拼接结果

简单来说，这样拼接字符串，虽然在语法上支持，但是却不能保证这样的结果正确性，聚合串联查询的行为是不确定的。

2021-01-07 09:20:08

SQL 字符串 Server

炸！使用 MyBatis 查询千万数据量？

由于现在 ORM 框架的成熟运用，很多小伙伴对于 JDBC 的概念有些薄弱，ORM 框架底层其实是通过 JDBC 操作的 DB。

2021-01-07 07:46:34

MyBatis 数据量 JDBC

如何定位哪些SQL产生了大量的Redo日志

在ORACLE数据库的管理、维护过程中，偶尔会遇到归档日志暴增的情况,也就是说一些SQL语句产生了大量的redo log，那么如何跟踪、定位哪些SQL语句生成了大量的redo log日志呢?

2021-01-06 08:41:03

SQL Redo 日志

上一页 1 ··· 4 5 6 7 8 ··· 31 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客鸿蒙开发者社区 AI.x社区

教育

51CTO学堂精培企业培训 CTO训练营