51CTO首页
AI.x社区
博客
学堂
精品班
软考社区
免费课
企业培训
鸿蒙开发者社区
WOT技术大会
IT证书
公众号矩阵
移动端
短视频免费课程课程排行直播课软考学堂
全部课程厂商认证IT技术25年5月软考PMP项目管理免费题库
在线学习
文章资源问答课堂专栏直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO软考
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
51CTO软考题库
账号设置 退出

其他数据库

1914内容  
其他数据库话题涵盖其他数据库相关研究热点、技术难点与应用场景，帮助用户在实际应用中选型。
文章 博文课程
共 1914 条
解密数据清洗，SQL中如何准备数据以进行分析
希望你理解了相关的数据清洗任务如何提高数据质量并促进更相关的分析。同时已经学会了如何检查缺失值、重复记录、不一致的格式、异常值等。

2024-01-29 18:06:39

SQL数据格式
“分布式透明化”在杭州银行核心上线之思考 原创
笔者有幸受邀对项目实施方做了专访，了解项目实施中的一些细节。作为用户的行方从开始就秉承着应用与基础设施解耦架构思想、分布式透明化的设计开发理念，通过与国产分布式数据库TiDB的通力合作，完成此次核心系统的成功上线。这为国内广大同类型银行升级，带来积极参考意义；其背后的实践过程也很值得思考。

2024-01-26 10:24:24

分布式数据库TiDB银行核心系统
深入浅出快手图数据库：看架构如何让推荐召回更高效
本文将从工程的角度，分享快手图数据库存算分离架构及其在实时推荐召回的应用。

2024-01-25 08:30:03

图数据库存算分离架构快手
不要分库分表了，快试试 TiDB 吧，兼容MySQL，1500 家企业都在用
如果贵司的数据量比较大，正在考虑要分库分表，那么完全可以使用它，来避免分库分表，分库分表是一个过渡方案，使用分布式数据库才是终极方案。

2024-01-23 13:20:00

分库分表分布式
PolarDB 开发者大会归来... 原创
作为国内最早定义的一款“云原生”数据库，PolarDB 发展已历经十五年，从早期基于开源数据库的深度优化，到结合云原生技术并形成独立品牌对外发布，到提供多种版本形成品牌矩阵，再到率先提出 Serverless 化并再次开源。

2024-01-23 07:33:12

PolarDB开源数据库云原生
使用双异步后，如何保证数据一致性？
AbstractQueuedSynchronizer简称AQS，它是一个同步框架，它提供通用机制来原子性管理同步状态、阻塞和唤醒线程，以及 维护被阻塞线程的队列。基于 AQS 实现的同步器包括：ReentrantLock、Semaphore、ReentrantReadWriteLock、 CountDownLatch 和 FutureTask。

2024-01-22 08:52:00

AQS双异步数据一致性
Spring Boot和MyBatis框架实现返回数据的脱敏处理
本文将详细介绍如何在 Spring Boot 和 MyBatis 中实现数据脱敏，并使用 Hutool 工具库来简化脱敏处理，并提供示例代码。

2024-01-22 08:46:37

MyBatis数据脱敏Spring
蚂蚁 TuGraph-DB 数据库查询引擎技术
本文详细介绍了 TuGraph-DB 数据库查询引擎。大致可以分为三个阶段：图数据库起步、图查询语言起步和图查询语言迭代。

2024-01-19 08:01:08

TuGraph-DB数据库查询引擎
Apple 如何构建 iCloud 来存储数十亿个数据库 译文 精选
Record Layer采用了这一策略来高效地管理其排名索引系统中的一部分结构——跳表（skip list）。然而，手动设置这些冲突范围可能较为复杂，并且可能导致难以识别的错误，特别是当它们与应用程序的主要逻辑混合在一起时。因此，建议构建于FoundationDB之上的系统创建更高级别的工具，如自定义索引，以处理这些模式。

2024-01-18 17:39:00

数据库存储索引
面试官：分库分表后如何生成全局ID？
数据库自增 ID 只适用于单机数据库环境，而对于分库、分表、数据分片来说，自增 ID 不具备唯一性，所以要要使用雪花 ID 来替代数据库自增 ID。但雪花算法依然存在一些问题，例如时间回拨的问题。

2024-01-17 14:42:24

分库分表数据库数据分片
如何使用 JIT 技术实现高效的数据库表达式求值
本文将分享如何使用 JIT 技术高效优化数据库表达式求值。JIT 即时编译技术，又称为动态翻译，或运行时编译。其核心在于将程序在运行过程中转换为机器代码，而非在执行前预先编译为机器代码。

2024-01-17 07:00:56

JIT 技术数据库表达式求值
面试官：如何保证本地缓存的一致性？
在多级缓存中，本地缓存是不可或缺的组成部分，而想要保证本地缓存的数据一致性，可能采用：设置较短的本地缓存过期时间、通过配置中心来协调和同步本地缓存，以及使用本地缓存框架的自动更新功能保证数据的一致性等解决方案，而不同的业务场景，选择的解决方案也是不同的。

2024-01-15 10:38:20

多级缓存数据一致性分布式缓存
性能优化2.0，新增缓存后，程序的秒开率不升反降
缓存就是把访问量较高的热点数据从传统的关系型数据库中加载到内存中，当用户再次访问热点数据时，是从内存中加载，减少了对数据库的访问量，解决了高并发场景下容易造成数据库宕机的问题。

2024-01-15 08:13:47

缓存数据库性能优化
八个使用SQL处理日期和时间的小技巧
在处理日期间隔时，尤其是在需要精确计算的情况下，要考虑闰年的存在。数据库通常处理闰年，但需要注意跨多年进行计算时可能存在的问题。

2024-01-11 18:04:53

SQL数据库
世界上最流行的数据库，竟然是套壳的 ！
SQLite的源代码使用Fossil来管理，而Fossil又依赖SQLite来存储代码仓库的信息，这就产生了一个在后人看来类似先有鸡还是先有蛋的问题。

2024-01-11 09:11:08

数据库SQLite管理
Spring Boot 如何整合高性能数据库连接池 HikariCP
HikariCP是一个高性能的数据库连接池，与Spring Boot集成非常容易。通过配置连接池的属性，您可以根据应用程序的性能需求进行调整。整合HikariCP和Spring Boot有助于提高数据库连接性能，特别是在高负载的应用程序中。

2024-01-10 08:17:50

HikariCP数据库Spring
数据库半年度盘点：20+国内外数据库重大更新及技术精要
2023年下半年，MySQL版本发行迎来了重要的变化，开启了稳定版和创新版同时发行的新阶段。8.0发布了两个版本，8.0.34和8.0.35，还发布了8.1和8.2的创新版。

2024-01-10 07:35:38

数据库半年度技术
LiteDB：由C#代码构建轻量级、快速且简单易用嵌入式文档型数据库
LiteDB适用于小型项目或者单用户应用程序，特别适合需要使用嵌入式数据库来存储数据的应用程序，例如桌面应用程序、移动应用程序和IoT设备等。它具有很小的安装脚本、低资源占用，同时提供了简单易用的API和交互式查询语言。

2024-01-09 08:50:32

LiteDB数据库NoSQL
增加索引 + 异步 + 不落地后，从 12h 优化到 15 min
Hashtable的synchronized是针对整张Hash表的，即每次锁住整张表让线程独占，ConcurrentHashMap允许多个修改操作并发进行，其关键在于使用了锁分离技术。

2024-01-08 08:17:45

数据库索引异步
详解数据库分片，大幅提升Spring Boot查询MySQL性能
我们既使用了表分片又使用了数据库分片。除此以外，我们可以进一步提高性能，方法是在单个服务器中增加更多的数据库，可能总共有1000个表的副本。

2024-01-07 18:02:21

数据库分片副本
关系型数据库的时代一去不返？25年老兵开炮：该放弃80年代的产物了！
随着数据库系统、键值和对象存储、搜索引擎技术和编程语言的广泛应用，几十年来一直使用一种数据库的时代已经一去不复返了。再也不会有项目无休止地争论 MySQL、MSSQL、Oracle 或 Postgres 是否是正确的选择。如今，数据库和存储是根据具体情况决定的。很多时候，我发现自己正在编写一个基于对象或键值存储的小型自定义存储策略。

2024-01-05 07:35:00

关系型数据库存储
大家都需要什么样的数据库运维工具
不管怎么样，我们还是会沿着心中的梦想走下去，D-SMART社区版上开放自定义工具、自定义基线、自定义故障模型、健康模型等已经在我们的考虑中，甚至全功能社区版也在我的考虑之中，也许不久后大家可以在3.0的社区版中体验到。

2024-01-04 08:06:28

数据库运维工具
Prometheus 与 VictoriaMetrics 优缺点对比
我们总结Prometheus与VictoriaMetrics的各个方面的对比，虽然VictoriaMetrics在某些方面可能比Prometheus更强大，比如在处理大规模数据和高并发负载时的性能表现，完全可以替换Prometheus，但它相对来说是相对较新的项目，尚未达到Prometheus在用户社区和广泛采用方面的水平。

2024-01-04 08:00:22

时序数据库项目
OLAP 的技术研发与思考--ClickHouse 2023 总结和 2024 展望
ClickHouse 是一个用于联机分析(OLAP)的列式数据库管理系统(DBMS)，主要用于线上分析处理。本文会介绍 ClickHouse 2024 核心新功能和产品研发方向。

2024-01-04 07:40:52

ClickHouse数据库DBMS
MyCat分库分表实时同步到GreatSQL
1. 本方案中，业务访问MyCat的表名字，和server后端的表名字完全一致，只是库名字不相同，然后MyCat代理表名和实际server的表名字可以不相同，这种情况下，暂时无法映射处理。

2024-01-03 08:14:33

GreatSQLMyCat库名字
六个提升SQL查询性能的核心技巧
使用SELECT *​ 是一个常见的错误，这可能会严重影响查询性能。当使用SELECT * 时，数据库会返回所有列的数据，包括那些我们不需要使用的列。相反，我们应该明确列出真正需要的列，这样可以减少数据传输量和处理的工作量，从而提高查询的效率和性能。

2024-01-02 18:01:12

SQLSELECT查询
国产优秀ORM框架SqlSugar的使用方法，实例解析
以下是对SqlSugar的详细介绍及其相比其他ORM框架的优点。通过使用SqlSugar，可以简化数据库操作，提高开发效率。希望以上内容对您有所帮助。

2024-01-02 09:21:18

SqlSugar数据库ORM框架
在 Golang 应用程序中管理多个数据库
在这篇详细的文章中，我们涵盖了在Golang应用程序中处理多个数据库的基本知识。现在，您已经掌握了处理复杂数据场景的基本技能，从设置多个数据库到完成事务。

2023-12-29 22:39:25

Golang应用程序数据库
平台数据激增破千万下的SQL优化
利用Explain，可以快速的分析出缺失的索引，比如检查Join或者Order by中使用的字段，对于大表，有无索引会有几十甚至上百倍的效率差异。但索引也并非越多越好，过多的索引会对插入及更新造成比较大的影响。

2023-12-29 08:12:58

Explain索引SQL优化
在PG数据库中 shared_buffers会影响DROP TABLE的性能吗
数据库就是这样一点点的在用户场景中完善起来的，商用数据库厂商十分注重收集这方面的需求，而开源数据库因为用户群体十分庞大，需求更为庞大，因此在实现某些功能的时候，选择比较困难，无法像商用数据库那么迅速的响应。

2023-12-28 07:35:44

数据库场景Object
并发环境下，先操作数据库还是先操作缓存？
在分布式系统中，缓存和数据库同时存在时，如果有写操作的时候，先操作数据库，再操作缓存。

2023-12-27 13:44:00

数据库系统分布式
面试官：系统有万亿条消息怎么存储？
2015 年，Discord 的第一个版本建立在单个 MongoDB 之上。2015 年 11 月左右，MongoDB 存储了 1 亿条消息，其内存无法再容纳数据和索引。延迟变得不可预测。消息存储需要转移到另一个数据库。这时 Cassandra 被选中。

2023-12-26 09:34:47

系统MongoDB存储
从一道PG知识的选择题谈起，你悟到了些什么？
稍微懂点PG数据库的人不难回答，答案是A、B、C。一些Oracle DBA可能会觉得这个答案有点出乎意料。因为在Oracle数据库中，回写DB CACHE脏数据的只有DBWR。

2023-12-26 08:10:18

Postgresql数据库Oracle
使用双异步后，从 191s 优化到 2s
访问之后，感觉没什么反应，实际上已经在读取 + 入库了，只是比较慢而已。读取一个10万行的Excel，居然用了191s，我还以为它卡死了呢！

2023-12-25 08:24:03

双异步数据库Excel
DDIA：批处理和 MPP 数据库千丝万缕
如果在执行查询请求时节点崩溃，大多数 MPP 数据库会中止整个查询，并让用户进行重试或自动重试。由于查询运行时通常会持续数秒或数分钟，这种简单粗暴的重试的处理错误的方式还可以接受，毕竟成本不算太高。

2023-12-21 08:26:54

MPP数据库查询
ES索引误删的名场面
虽然版本发布，有严谨的执行步骤，依然避不开个别老六灵光乍现的骚操作；结果就是，和手搓的BUG正面对线。

2023-12-20 08:18:34

ES索引误删
开源数据库 MatrixOne 的 HTAP 分布式架构演进
本文将介绍开源分布式数据库 MatrixOne，从 NewSQL 到现在新的 HTAP 架构的演进。NewSQL 是当年谷歌的几篇论文衍生出来的分布式数据库的一套理论体系。其中最重要的一点就是分布式架构，解决的是传统数据库的高可用以及水平扩展的难题。另外一点就是多引擎，用不同的引擎来做不同的事情。

2023-12-18 09:03:53

MatrixOneNewSQL数据库
深入实例，掌握SQL子查询
通过了解子查询的类型和实际应用，数据库开发人员能够掌握这种高级 SQL 技术并优化其数据库交互。

2023-12-16 13:14:00

SQL子查询技术
数据结构：软件系统核心部件哈希表，内存如何布局？
Rust的HashMap是一种高效且内存安全的数据结构，适用于多种场景，如缓存、数据库索引和快速查找表。通过对其内部机制和布局的了解，我们可以更好地利用这一工具，优化我们的软件应用。

2023-12-16 10:40:58

数据结构场景
对不起，必须放弃SQL！ 译文 精选
多年来，开发人员一直在为SQL添加新特性，其中一些功能非常酷。但不得不提的是，这些花哨的功能通常是附加的，可能会导致性能问题。

2023-12-14 17:31:10

SQL表格模型功能
多租户SaaS平台的数据库方案详解
随着云计算和SaaS（Software as a Service）模型的兴起，多租户系统成为了构建灵活、高效应用的重要架构。在构建多租户SaaS平台时，数据库方案的选择直接关系到数据隔离、性能和可扩展性。本文将详细介绍几种常见的多租户数据库方案以及它们的优缺点。

2023-12-14 12:26:16

SaaS数据库方案
银行业使用国产数据库现状：痛难点分析及破解对策
国产数据库在银行业推广中，已经取得了显著进展，但仍面临一系列挑战。银行重要敏感系统作为关键信息基础设施，对安全性、技术成熟度、生态系统建设、技术支持与服务、数据迁移与升级以及高可用性等方面有着极高要求。

2023-12-14 07:33:15

国产数据库现状
为什么云数据库性能总是很差？ 译文 精选
云架构师和数据库工程师需要在数据库性能方面做得更好。在某些情况下，这意味着回到良好的数据库设计、配置和部署的基础知识。这正在成为一门失传的艺术，因为那些负责云系统的人似乎更喜欢在这个问题上砸钱。这不是解决问题的方式。

2023-12-13 21:56:14

云数据库性能云架构师
数据库的 ACID 属性是什么意思？
事务提交后，即使系统发生故障，数据也会被持久化。数据库会使用预写日志（Write-Ahead Log）或类似机制来确保持久化。在分布式系统中，持久化意味着数据会复制到其他节点。

2023-12-13 10:11:14

数据库ACID数据
聊聊SQLite-轻量级关系型数据库
SQLite是一种轻量级的关系型数据库管理系统，它被设计为嵌入式数据库，可以在各种操作系统上运行。SQLite的特点包括零配置、无服务器、支持事务等。它通常用于移动设备、嵌入式系统以及小型应用程序中。

2023-12-13 08:22:45

SQLite关系型数据库
Express-Session：SessionId 机制驱动的一个 Express 会话数据存储库
express-session 是用来为 express 框架提供会话缓存支持的一个中间件。技术上是通过使用 sessionId 机制提供会话记忆支持的。

2023-12-12 09:58:08

express框架机制
高并发系统的设计思路、关键点和注意事项
设计高并发系统需要综合考虑系统的可扩展性、性能、安全性、灵活性等因素，结合实际需求和技术选型，合理设计系统架构和实现方案，提高系统的并发处理能力和可用性。

2023-12-12 09:06:06

高并发系统架构设计数据库设计
OLAP技术的选择，进化和思考
炎凰数据的核心创始团队均来源于全球大数据分析引擎领军企业Splunk，吴立也不例外，“Splunk成立的时间比较早，在大约二十年前，Splunk的产品在业内是非常先进的，但他们实际上采用了行存的存储形式，在当时还是可以解决用户问题的，比如日志索引、搜索等。”

2023-12-12 07:34:54

炎凰数据大数据分析数据库开发
再有人问你数据库连接池 Druid 的原理，这篇文章甩给他！
配置连接池参数时，和 DBA、架构师做好提前沟通，每个公司的数据库配置策略并不相同，假如数据库配置连接存活时间很短，那么就需要适当减少空闲连接检测间隔，并调低最大和最小空闲时间。

2023-12-11 08:32:58

数据库DruidDBA
不要让Apache Kafka成为你的数据库 译文 精选
Kafka在支持数据聚合和实时指标等用例方面提供了最大的价值。使用Kafka和Apache生态系统工具(如Spark、Flink或KStreams)，开发人员可以对流数据进行聚合和转换，然后将这些数据推送到所需的数据库。

2023-12-10 20:37:48

Kafka数据库工具
上一页 1 ··· 56789 ··· 39
点赞

51CTO技术栈公众号

业务
速览
在线客服