鸿蒙开发者社区

WOT技术大会

公众号矩阵

移动端

短视频免费课程课程排行直播课软考学堂

全部课程厂商认证 IT技术 24年11月软考 PMP项目管理免费题库

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO软考

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

51CTO软考题库

账号设置退出

数据库运维

1517内容

关注

数据库运维话题针对数据库的软件安装、配置优化、备份策略选择及实施、数据恢复、数据迁移、故障排除、预防性巡检等多个话题，分享使用技巧以及实践应用等内容。

共 1517 条

数仓建模—宽表的设计

宽表主要出现在dwd 层和报表层，当然有的人说dws 层也有，宽表，从字面意义上讲就是字段比较多的数据库表，通常情况下是将很多相关的数据包括维度表、实时、已有的指标或者是dws/dwd 表关联在一起形成的一张数据表。

2021-12-02 08:41:30

数仓建模设计

实践了五千万的数据表和重建索引，学到了！

项目中有一张历史记录表，主要用于记录一些接口调用流水，因为该表的地位不是那么重要，当初的创建者并未对核心字段创建索引。

2021-12-02 07:01:46

索引数据表系统

数据库开发环境的治理方案设计

我们一般涉及测试环境，预发布环境和线上等环境的管理，而开发环境的管理相对松散，为此我整理了一下开发环境的使用现状。

2021-11-30 23:53:28

数据库理方案

Flink SQL 知其所以然之维表 Join 的性能优化之路（上）附源码

维表作为 sql 任务中一种常见表的类型，其本质就是关联表数据的额外数据属性，通常在 join 语句中进行使用。比如源数据有人的 id，你现在想要得到人的性别、年龄，那么可以通过用户 id 去关联人的性别、年龄，就可以得到更全的数据。

2021-11-30 23:30:45

sql 性能异步

数据库索引技术之B树索引

跟我们在 LSM树一节中提到的 SSTable 一样，B树也是将数据组织成有序形式，因此支持范围查询。尽管如此，它们的底层结构却完全不同，B树有自己独特的设计哲学。

2021-11-30 21:10:19

数据库 B树索引

SQL中删除重复数据问题

我们数据库中最后要保留的结果就是第二步中查询出来的数据，我们把其他的数据删除即可。怎么删除呢?我们使用ID来排除。

2021-11-30 10:00:01

SQL 数据重复

几个SQL查询小技巧，你会吗？

sql是一个大家都比较关注的热门话题，无论你在面试，还是工作中，都很有可能会遇到。以下的小技巧能帮助大家！

2021-11-29 11:11:45

SQL 查询技巧

Flink SQL 知其所以然之流 Join 很难嘛？？？（下）

本文主要介绍了 flink sql interval 是怎么避免出现 flink regular join 存在的 retract 问题的，并通过解析其实现说明了运行原理。

2021-11-28 11:36:08

浅谈数据库管理系统

目前，常见的数据库管理系统主要有 Oracle、MySQL、 SQL Server，， Mongodb等，这些数据库中，前三种均为关系型数据库，而 Mongodb是非关系型的数据库。

2021-11-26 22:07:57

数据库管理 Mongodb

MYSQL 中锁的各种模式与类型

在MySQL中，其实将锁分成了两类：锁类型（lock_type）和锁模式（lock_mode）。锁类型描述的锁的粒度，也就是把锁具体加在什么地方；而锁模式描述的是到底加的是什么锁，是读锁还是写锁。

2021-11-26 09:53:55

MYSQL 开发数据库

何时使用反向ETL以及何时使用反模式译文

大多数企业如今将大量事务和分析的数据静态存储在数据仓库或数据湖中，而企业的销售、营销和客户团队需要访问这些数据集。反向ETL是一个流行术语，它定义了从现有数据平台中收集数据的概念，以便为业务团队提供方便快捷的服务。

2021-11-26 09:00:00

数据库数据集工具

网络服务在数据库层的支持问题

目前两种方式各有利弊，如果是基于纯粹IP的方式，在一定程度上能够做到隔离，即业务服务器访问一个指定的IP,可能ping就不通，但是这些权限是可以通过防火墙来控制的。所以在这个方向上是否有更好的方案？

2021-11-26 07:37:14

数据库支持网络

数据库时间慢了14个小时，Mybatis说，这个锅我不背！

大家都知道，对于这类Bug本人是很感兴趣的。直觉告诉我，应该不是Mybatis的Bug，很可能是时区的问题。很好，今天又可以带大家一起来排查Bug了，看看从这次的Bug排查中你能Get什么技能。

2021-11-26 07:02:37

如何掌握 OpenGauss 数据库核心技术？秘诀之一：拿捏SQL引擎

数据库的SQL引擎是数据库重要的子系统之一，它对上负责承接应用程序发送过来的SQL语句，对下则负责指挥执行器运行执行计划。其中优化器作为SQL引擎中最重要、最复杂的模块，被称为数据库的“大脑”，优化器产生的执行计划的优劣直接决定数据库的性能。

2021-11-26 00:02:12

OpenGauss 数据库 SQL

Flink SQL 知其所以然之去重不仅仅有 Count Distinct 还有强大的 Deduplication

熟悉离线计算的小伙伴可能很快就能给出答案。没错，hive sql 中的 row_number = 1。flink sql 中也是提供了一模一样的功能，xdm，完美的解决这个问题。

2021-11-25 07:01:57

SQL 应用场景

支持无代码的事务API 译文

事务的目的是保护数据不会受到数据库无法完成部分更新的影响。事务API现在可用于无代码应用程序。

2021-11-23 09:00:00

数据库事务API 无代码

一日一技：如果你非要把HTML到数据库，那么你应该…

在粉丝群里面，我多次强调爬虫不要把网页源代码存入数据库，但还是有很多同学这样做。源代码动辄几十 KB 甚至几 MB，存放到数据库里面会严重拖慢性能。

2021-11-20 05:00:12

SQL中的时间重叠问题

时间重叠指上下两行数据的时间段有重叠部分，现在要找出这些在时间上有重叠的记录。

2021-11-19 08:12:45

SQL 重叠数据

数据库技术创新保障数据安全

随着数据安全法、个人信息保护法的颁布实施，数据安全成为各行业数字化转型的重要一环，通过数据库技术创新助力数据安全成为业内热点。

2021-11-18 23:10:38

数据库安全网络安全

不知道 Insert Buffer 的请举手

在讲插入缓冲这个振奋人心的 InnoDB 新特性之前，我们有必要先来回顾下 Buffer Pool（缓存池）的概念。

2021-11-15 07:47:39

InnoDB 缓存池磁盘

数据库索引技术之Lsm树

由于数据在写入时，自动切分成一个个文件。数据库需要在后台对文件进行合并，以减少文件数，进而加快查询。如果待合并文件里的数据是有序的，我们就可以采用归并排序算法来提高合并效率。

2021-11-12 05:00:00

数据库索引技术

数据库索引，小白连环十六问

这段时间一直在面试，问了很多候选人数据库索引相关的知识，能答好的不是很多，令人惋惜啊，我也想留你啊……

2021-11-11 17:34:54

数据库索引面试

一篇文章彻底掌握 Hive 中的 Order/Sort/Cluster/Distribute by和 Bucket 桶表

本篇文章，我们来总结下，HIVE 中的 order/sort/cluster/distribute by 和 BUCKET 桶表。

2021-11-11 12:02:17

Hive Order Sort

聊聊 SQL 优化的 15 个小技巧

如果某天你负责的某个线上接口，出现了性能问题，需要做优化。那么你首先想到的很有可能是优化sql语句，因为它的改造成本相对于代码来说也要小得多。

2021-11-10 18:52:42

SQL 技巧优化

2021年程序员们都在用的神级数据库

最近，猿妹在Github热榜上发现了一个时序数据库性能QuestDB脱颖而出。查了一下才知道，questdb还上榜了StackShare网站2020年神级开发工具Top50。

2021-11-10 09:19:42

数据库程序员性能

公司同事用 Float 和 Double ，结果导致..

BigDecimal 阿粉相信大家对这个肯定不陌生，只要你公司的业务中涉及到一些比较精确的数字的时候，都会使用 BigDecimal,而不会去使用 Float 和 double，并且在数据库做设计的时候，如果是小数类型，也是会让你使用 BigDecimal 而不是 float 和 double。

2021-11-10 06:38:01

Float Double 数据库

MySQL 索引创建和优化实践

本文以 employees 表为例子，结合具体的索引运用实践案例，通过分析 EXPLAIN 关键字获取执行计划，来验证我们这些索引实践。如果是执行计划相关的详细信息，大家可以参考 mysql 官网 explain 介绍。

2021-11-09 07:59:50

聊聊 SQL 中的排名问题

今天给大家介绍一下SQL Server排名中经常用到的ROW_NUMBER()，RANK()，DENSE_RANK()，NTILE()这四个好兄弟。

2021-11-09 06:55:03

SQL Server 排序

禁用 SQL 游标，告诉你外面听不到的原因

索引是用到了，但是每次更新，更新的那行跑到 IDX_SALES_AMT_QUTA 索引后面去了，导致无限在更新 SalesAmountQuota 的值，直到大于 50万”L 觉得平时太强调 seek 索引了，但没有全面透彻的讲解索引其实也有好心办坏事儿的时候。

2021-11-08 13:05:54

数据库为何走向分布式？又如何走向分布式？

数据库领域图灵奖获得者 Jim Gray 说过：“所有的存储系统最终都会演变成数据库系统。

2021-11-08 10:52:02

数据库分布式技术

如何使用 Go 语言写出面向对象风格的代码

Go语言本身就不是一个面向对象的编程语言，所以Go语言中没有类的概念，但是他是支持类型的，因此我们可以使用struct类型来提供类似于java中的类的服务，可以定义属性、方法、还能定义构造器。

2021-11-08 07:48:48

Go 语言对象

Edg ！动态 SQL！牛！

“开发人员在使用JDBC或其他类似的框架进行数据库开发时，通常都要根据需求去手动拼装SQL，这是一个非常麻烦且痛苦的工作，而MyBatis提供的对SQL语句动态组装的功能，恰能很好的解决这一麻烦工作。

2021-11-07 14:36:01

SQL JDBC MyBatis

数据库索引技术之哈希索引

我们都知道，想要提升数据库的查询速度，索引必不可少。那么，索引的底层结构都是怎样的呢？它们又是如何工作的呢？

2021-11-01 23:57:03

数据库哈希索引

数据库安全优秀实践：基本指南

数据库安全在2021年很重要。但是如何改善安全状况以提高网络弹性?以下是您可以开始使用的10个数据库安全优秀实践。

2021-11-01 05:54:01

数据库安全信息安全网络攻击

分库分表有哪些思路和技巧？

在系统的研发过程中，随着数据量的不断增长，单库单表已无法满足数据的存储需求，此时，我们就需要对数据库进行分库分表操作。

2021-10-29 07:25:32

分库分表技巧

企业可通过四个方法提高数据库安全

企业的数据库内，不仅存储着企业的数据，甚至还加载着大量的用户信息，这些信息还包含着敏感信息。

2021-10-28 22:29:33

数据库安全工具

SQL 如何实现 Excel 的分列功能？

我们在处理SQL里的数据时候，时不时会遇到对字符串进行分割的情况。类似Excel中按指定字符进行分列，今天给大家介绍两种处理方法。

2021-10-28 19:36:20

SQL Excel 功能

聊聊 Spring 数据库开发

Spring的JDBC模块负责数据库资源管理和错误处理，大大简化了开发人员对数据库的操作，使得开发人员可以从繁琐的数据库操作中解脱出来，从而将更多的精力投入到编写业务逻辑当中。

2021-10-28 19:28:04

数据库开发 Spring

如何迁移到PlanetScale的无服务器数据库？译文

作为一名开发者，我一直尝试通过试验和构建来学习新技术。我最近对无服务器数据库颇感兴趣，该技术有望加快部署、增强可扩展性及改善开发者体验。

2021-10-28 08:00:00

数据库 SQL 技术

阿里二面：为什么要分库分表？

在高并发系统当中，分库分表是必不可少的技术手段之一，同时也是BAT等大厂面试时，经常考的热门考题。

2021-10-27 20:54:24

分库分表高并发

数据库：评估安全风险四个要点

互联网时代，不论是个人还是组织，都将数据视为一项重要的资产。为了便于存储、管理，企业常常会为各项数据建立一个数据库，如果没有做好安全风险防护，一旦数据库被攻占，企业将迎来很大的打击。为此，对数据库进行安全风险评估，对保护数据至关重要。

2021-10-26 22:43:05

数据库安全存储

基于MySQL复制的业务需求分析和改进

今天和同事聊起了一个问题，主要背景是有2个数据库需要数据流转至数仓系统，虽然数据库的存储容量很大，但是需要流转的数据量不大。

2021-10-26 09:34:42

数据库工具技术

分布式数据库系统面临的问题和挑战

分布式数据库系统在逻辑上可以看作一个完整的系统，用户如同在使用单机数据库系统；但是，从物理角度看，其为一个网络系统，包含若干个物理意义上的分散的节点，而节点之间通过网络进行连接，通过网络协议进行数据交换。

2021-10-26 00:33:00

分布式数据库系统

分库分表，我再讲最后一次！

提起分库分表，对于大部分服务器开发来说，其实并不是一个新鲜的名词。随着业务的发展，我们表中的数据量会变的越来越大，字段也可能随着业务复杂度的升高而逐渐增多，我们为了解决单表的查询性能问题，一般会进行分表操作。

2021-10-25 09:16:27

MySQL 分库分表

面试官问我索引为什么这快？我好像解释不清楚了

在数据库中加一定量的索引，会让你的查询语句，从原来的 3 秒缩短到零点几秒的程度，但是很多人都不知道为什么要加索引，为什么加了索引之后，你的查询语句就会起飞呢?今天阿粉来聊一下索引。

2021-10-25 08:49:32

索引数据库 MySQL

我让数据库锁表！差点被开除！

前段时间阿粉在公司开发的时候，不慎导致了数据库产生了锁表的操作，于是阿粉为了解决问题，研究了一下这一部分的内容，于是决定把这一块的知识分享给大家。

2021-10-22 05:56:31

数据库锁表锁定机制

为什么数据库调整大小如此困难？

如果有人曾经尝试规划数据库容量，就会知道这有多难。即使是做出粗略的估计也很具挑战性。那么为什么这么难?

2021-10-22 05:52:27

数据库调整大小容量

我们真的用好 SQL 数据库了吗？

一个程序员对芯片生产，能有多少理解？想当然的就认为，它的生产就是一个有序的事件流，步骤1，2，3，4 ……按部就班的走下去。

2021-10-20 06:58:11

SQL 数据库程序员

5000 行的 SQL 源代码，怎么读？

今天的小 C 很不在状态。昔日的她，一大早肯定不会愁容满面，似乎像是星巴巴没有喝够的样子，兴奋不起来!11:30 了，很少听到她 HHKB 落键的清脆声，一定是遇到难题了!

2021-10-18 11:05:51

SQL 源代码 AddUpdate

仅用几行代码就撸了个数据库！

数据库通常不会默认建好索引，需要开发人员或数据库管理员自行选择。想要以最小的代价换取最大收益，不仅需要对应用的查询模式有准确把握，还需要对数据库内部索引技术有一定了解。

2021-10-18 09:09:16

上一页 1 2 3 4 5 6 ··· 31 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客鸿蒙开发者社区 AI.x社区

教育

51CTO学堂精培企业培训 CTO训练营