鸿蒙开发者社区

WOT技术大会

公众号矩阵

移动端

短视频免费课程课程排行直播课软考学堂

全部课程厂商认证 IT技术 24年11月软考 PMP项目管理免费题库

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO软考

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

51CTO软考题库

账号设置退出

存储软件

2179内容

关注

内容覆盖存储系统、存储组件、存储虚拟化、对象存储等相关软件产品，为用户提供存储软件行业的业界动态、产品资讯、前沿技术、应用案例等内容，帮助用户构建高性能、高可用、高安全的存储系统，提高存储性能和利用率，简化存储管理。

共 2179 条

Redis哨兵原理，我忍你很久了！原创

Redis 主从复制的作用中有这么一句话“主从复制是高可用的基石”，那什么是高可用呢?高可用就是减少系统不能提供的时间，也就是常听到的以 6 个 9 为基准。实现高可用必不可少的就是哨兵和集群。

2020-06-08 08:20:11

Redis 高可用集群

Ceph如何扩展到超过十亿个对象？

越来越多的组织被要求管理数十亿个文件和几百上千PB的数据。无论是在公共云还是本地环境中，Ceph对象存储都是值得考虑的一个选项。本篇文章将通过七部分的精选内容为下面这些问题提供答案。

2020-06-05 14:30:03

Ceph CPU 线程

记一次接口性能优化实践总结：优化接口性能的八个建议

最近对外接口偶现504超时问题，原因是代码执行时间过长，超过nginx配置的15秒，然后真枪实弹搞了一次接口性能优化。在这里结合优化过程，总结了接口优化的八个要点，希望对大家有帮助呀~

2020-06-05 08:53:31

接口性能实践

下一站“内存”：成为《黑客帝国》中的尼奥并不难

Swift是一种内存安全语言。它限制用户直接访问内存，确保用户在使用内存前已初始化所有内容。不安全的Swift API允许用户通过指示器直接访问内存。

2020-06-03 09:19:24

内存Swift API

缓存同步、如何保证缓存一致性、缓存误用

缓存，是互联网分层架构中，非常重要的一个部分，通常用它来降低数据库压力，提升系统整体性能，缩短访问时间。

2020-06-01 22:09:48

缓存缓存同步缓存误用

深入理解C11/C++11内存模型

现代计算机体系结构上，CPU执行指令的速度远远大于CPU访问内存的速度，于是引入Cache机制来加速内存访问速度。

2020-06-01 21:07:33

C11 C++11 内存

「内存抖动」？别再吓唬面试者们了行吗

看起来很酷的词总是容易吸引眼球，比如「双亲委托」，比如「责任链」，比如——「内存抖动」。

2020-06-01 20:48:36

内存面试者流量

看完了这篇实时数仓建设，才发现以前的都白看了（内有美团案例）

看来大家还是对数据仓库和大数据平台比较感兴趣，今天就和大家再聊聊怎么做实时数仓吧。实时数仓可谓是决定性的东西，能决定什么?决定你的报表和BI到底能不能实时展现数据。

2020-05-28 11:36:13

数据仓库大数据架构

存储管理和AIOps

随着人们向基于服务的基础设施部署和自动化程度的提高，存储管理员的角色正在发生变化。智能运维(AIOps)提供了一个框架，既可以减轻资源管理中繁琐任务的负担，同时也解决了通过扩展人力资源无法解决的挑战。以下将探讨AIOps的内容以及供应商如何满足客户的需求。

2020-05-28 10:53:32

存储数据框架

深入理解Java的栈与堆及JVM之内存分配与图解

在堆中分配的内存，由Java虚拟机的自动垃圾回收器来管理。在堆中产生了一个数组或对象后，还可以在栈中定义一个特殊的变量，让栈中这个变量的取值等于数组或对象在堆内存中的首地址，栈中的这个变量就成了数组或对象的引用变量。

2020-05-27 21:13:27

Java JVM 内存

Redis热点之底层实现篇

Redis提供了Java、C/C++、C#、 PHP 、JavaScript、 Perl 、Object-C、Python、Ruby、Erlang、Golang等多种主流语言的客户端，因此无论使用者是什么语言栈总会找到属于自己的那款客户端，受众非常广。

2020-05-27 20:45:31

Redis 底层数据

借来的资源，如何还的潇洒？

本文的内容将专门对付内存管理，培养起有借有还的好习惯，方可消除资源管理的问题。

2020-05-21 11:22:10

资源内存管理

Redis 6.0之前为什么一直不使用多线程？

Redis 6.0在5.2号这个美好的日子里悄无声息的发布了，这次发布在IT圈犹如一颗惊雷一般，因为这是redis最大的一次改版，首次加入了多线程。

2020-05-20 14:40:15

Redis 多线程单线程

要及时「缓存」你们的珍贵时光

在很久很久以前人类和洪水作斗争的过程中，水库发挥了至关重要的作用 : 在发洪水时可以蓄水，缓解洪水对下游的冲击;在干旱时可以把库存的水释放出来以供人们使用。这里的水库就起着缓存的作用。

2020-05-20 11:17:29

缓存服务器地址

大数据云存储提供商有哪些？译文

如今云服务用于数据存储以及日益用于分析和计算，这意味着你实际上在“外包”存储和管理大量数据带来的许多麻烦。场地、能耗、网络基础架构和安全等问题已成为云服务提供商操心的问题，而提供商通常完全有能力处理这些问题。

2020-05-19 10:09:52

大数据云存储提供商

Redis为什么不直接使用C字符串，而要自定义简单动态字符串？

Redis (一个使用ANSI C编写的开源、支持网络、基于内存、可选持久性的键值对存储数据库。)没有直接使用 C 语言传统的字符串表示redis中的字符串，而是使用了一种名为简单动态字符串(simple dynamic string，SDS)的抽象类型，并将 SDS 用作 Redis 的默认字符串。

2020-05-13 12:17:33

Redis C字符 C语言

关于Redis、ZooKeeper等分布式锁原理的一些思考

首先分布式锁和我们平常讲到的锁原理基本一样，目的就是确保，在多个线程并发时，只有一个线程在同一刻操作这个业务或者说方法、变量。

2020-05-12 14:03:51

Redis ZooKeeper 分布式锁

一文看懂分布式存储架构，这篇分析值得收藏

在这个存储系统中包含很多组件，除了核心的机头(控制器)、磁盘阵列( JBOD )和交换机等设备外，还有管理设备等辅助设备。

2020-05-12 11:38:08

存储架构分布式

3种堆内缓存算法，赠源码和设计思路

要说计算机系统里，什么技术把tradeoff体现的淋漓尽致，那肯定是缓存无疑。为了协调高速部件和低速部件的速度差异，加入一个中间缓存层，是解决这种冲突最有效的方案。

2020-05-12 10:00:14

缓存算法赠源码

带你100% 地了解 Redis 6.0 的客户端缓存

近日 Redis 6.0.0 GA 版本发布，这是 Redis 历史上最大的一次版本更新，包括了客户端缓存 (Client side caching)、ACL、Threaded I/O 和 Redis Cluster Proxy 等诸多更新。

2020-05-11 21:31:02

Redis 6.0 缓存客户端

我为什么用ES做Redis监控，不用Prometheus或Zabbix？

Redis当下很流行，也很好用，无论是在业务应用系统，还是在大数据领域都有重要的地位;但Redis也很脆弱，用不好，问题多多。

2020-05-11 09:00:57

Redis 监控 Zabbix

聊聊怎么排查堆内存溢出

年轻代是所有新对象产生的地方。当年轻代内存空间被用完时，就会触发垃圾回收。这个垃圾回收叫做Minor GC。

2020-05-09 13:49:00

内存空间垃圾

详解Linux系统架构之内核（内存、进程、设备、文件系统和网络）

Linux系统一般有4个主要部分组成，内核、shell、文件系统和应用程序。内核、shell和文件系统一起形成了基本的操作系统结构，它们使得用户可以运行程序、管理文件并使用系统。因为内容比较多，所以这里单独挑内核这个分类做一下简单介绍。

2020-05-08 16:39:01

内存系统架构 Linux

联合索引在B+树上的存储结构

MySQL索引及知识非常广泛，本文只是涉及到其中一部分。如与排序(ORDER BY)相关的索引优化及覆盖索引(Covering index)的话题本文并未涉及，同时除B-Tree索引外MySQL还根据不同引擎支持的哈希索引、全文索引等等本文也并未涉及。

2020-05-08 16:09:23

索引 B+树存储

支持多线程的Redis 6.0终于发布了！

支持多线程的 Redis 6.0 版本于 2020-05-02 终于发布了，为什么 Redis 忽然要支持多线程?如何开启多线程?开启后性能提升效果如何?线程数量该如何设置?开启多线程后会不会有线程安全问题?多线程的实现原理是怎样的?带着这些疑问，我们来开启 Redis 新特性-多线程连环 13 问。

2020-05-08 08:01:11

多线程 Redis 处理

一碰就头疼的缓存热点Key问题，阿里的Tair是如何解决的？

首先需要说明的是，HotRing是阿里核心缓存系统Tair的一个子组件。Tair是阿里一个NoSQL内存数据库(Tair在阿里云上称为企业版Redis)。HotRing是Tair用来解决冲突链表长度导致性能衰减问题的一个子组件。

2020-05-06 17:08:40

缓存 Key 集群

说说高并发IO原理及模型，结果没结果了

read调用，并不是直接从物理磁盘读取，同样，write调用也不是直接把数据写进物理磁盘，在他们中间还有一层，就是缓冲区，而缓冲区又包括：内核(kernel)缓冲区和用户进程缓冲区。

2020-04-28 14:50:44

IO 原理模型

分布式数据之缓存技术，揭开其神秘面纱

在这一讲，我将为你讲解分布式存储中“货架”的关键技术——缓存技术。在计算机领域的各个方面，缓存都非常重要，是提升访问性能的一个重要技术。为什么这么说呢?

2020-04-28 14:25:14

缓存分布式数据

三年之久的 etcd3 数据不一致 bug 分析

etcd 作为 Kubernetes 集群的元数据存储，是被业界广泛使用的强一致性 KV 存储，但近日被挖掘出一个存在 3 年之久的数据不一致 bug——client 写入后无法在异常节点读取到数据，即数据丢失。

2020-04-26 21:57:46

etcd3 元数据存储

聊聊主流分布式存储技术的对比分析与应用

Ceph最早起源于Sage就读博士期间的工作、成果于2004年发表，并随后贡献给开源社区。经过多年的发展之后，已得到众多云计算和存储厂商的支持，成为应用最广泛的开源分布式存储平台。

2020-04-24 16:00:58

存储分析应用

闪存存储分解：NVMe / TCP能否更有效地利用？

部署了闪存(存储)的目的是为了在数据中心为应用程序提供高输入/输出速率。但是，它的容量和带宽经常没有得到充分利用，因为服务器不容易设计成随时间推移以及跨多个应用程序来容纳Flash，内存和CPU。

2020-04-24 14:00:21

NVMe TCP 存储

Redis 分布式锁的 5个坑，真是又大又深

最近项目上线的频率颇高，连着几天加班熬夜，身体有点吃不消精神也有些萎靡，无奈业务方催的紧，工期就在眼前只能硬着头皮上了。脑子浑浑噩噩的时候，写的就不能叫代码，可以直接叫做Bug。我就熬夜写了一个bug被骂惨了。

2020-04-23 11:18:14

Redis 分布式锁

聊聊Redis集群搭建及选举原理

哨兵模式中如果主从中 master宕机了，是通过哨兵来选举出新的master，在这个选举切换主从的过程，整个redis服务是不可用的。而且哨兵模式中只有一个主节点对外提供服务，因此没法支持更高的并发。

2020-04-21 22:59:50

Redis 搭建选举

并发原理之MESI与内存屏障

现代的CPU比内存系统快很多，2006年的cpu可以在一纳秒之内执行10条指令，但是需要多个十纳秒去从内存读取一个数据，这里面产生了至少两个数量级的速度差距。

2020-04-21 22:18:20

MESI 内存 CPU

十年难得一遇！从数据误删到全量恢复的惊险记录

线上的数据库服务我们有完善的备份策略和恢复预案，数据即使被误删除了也是能够恢复的，误删除的数据量恢复只是时间问题。但各位同学自己部署的测试环境或者是在自己电脑中的开发环境的数据库就没有同级别的资源保障了。如果恰好你又把一些不能丢失的数据放到了这种环境中，那么建议要做定期备份，有备才能无患。

2020-04-20 09:51:10

数据恢复备份

MySQL的Server层和存储引擎层是如何交互的

SQL的全称是Structured Query Language，翻译成中国话就是结构化查询语言。这是一种声明式的语法，何为声明式?

2020-04-15 11:40:33

MySQlL Server 存储

Linux下 Redis集群搭建详解（主从+哨兵）

由于项目需要，搭建了一个 Redis 服务器集群，实现了主从配置和容灾部署，使得主机出现故障时，可自动进行容灾切换，下面就详细讲解一下如何利用 Redis 来实现。

2020-04-14 21:12:42

Redis 集群 Linux

一篇文章看懂Git的内部存储结构

大多数人在使用git时，大多数都是使用IDE封装好的GUI界面操作，少量使用者也是git add，git commit，git pull几个常用的命令。对于git的用户来说，这些都足够了。

2020-04-14 20:40:58

Git 内部存储

手机内存都已经16GB了 PC的8GB内存真的还够用吗？

4年前也就是2016年的时候，旗舰款的智能手机在内存容量上也就是刚刚迈入了4GB的阶段，而那个时候的PC平台已经进入了DDR4的时候，主流级平台的内存容量也已经基本从4GB开始向8GB迈进，而且基本从2017年开始，8GB内存已经算是主流级PC的标配，更不用说是对性能要求更高的游戏型PC了。

2020-04-13 19:13:23

手机内存 PC

逻辑架构图解和InnoDB存储引擎详解

MySQL数据库存储引擎是数据库底层的架构组件，数据库管理系统使用数据引擎进行创建、查询、更新和删除数据操作。不同的存储引擎提供不同的存储机制、索引技巧、锁定水平等功能，使用不同的存储引擎还具有不同的特点功能，以满足不同场景下的业务需求。

2020-04-10 12:12:13

InnoDB 存储架构

针对存储替换迁移中风险点的关键策略分析

随着企业业务应用的拓展和业务数据不断增长，作为 IT 基础架构的重要组成，存储系统不仅面临着存储容量与性能提升的需求，还需要适应系统架构的变化。

2020-04-08 09:12:29

存储风险点策略

扛并发主力军，引入应用层缓存

缓存的使用一定是今后开发中100%会用到的技术，尤其是Redis相关的问题，如果面试官不问我我几个缓存相关的问题，那我觉得我可能是去了个假的互联网公司。

2020-04-07 11:49:48

应用层缓存 CPU

可轻松管理大内存，JDK14外部内存访问API探秘

外部内存访问 API 是 Project Panama (1) 的一部分，是对 ByteBuffer 的替代，而 ByteBuffer 之前是用于堆外内存。对于任何低级的 I/O 来说，堆外内存是需要的，因为它避免了 GC，从而比堆内内存访问更快、更可靠。

2020-04-07 11:25:24

JDK14 内存 API

不懂Redis Cluster原理，我被同事diss了！原创

Redis 缓存作为使用最多的缓存工具被各大厂商争相使用。通常我们会使用单体的 Redis 应用作为缓存服务，为了保证其高可用还会使用主从模式(Master-Slave)，又或者是读写分离的设计。

2020-04-07 08:00:02

Redis 缓存数据

如何在Hadoop上建立数据仓库

大数据平台上的数据仓库是许多组织正在探索的标准用例。采用这种方法的原因可能是大数据平台提供的许多灵活性之一。

2020-04-06 13:52:45

数据仓库大数据平台 Hadoop

完美解密Redis与秒杀系统！！！

秒杀活动是绝大部分电商选择的低价促销、推广品牌的方式。不仅可以给平台带来用户量，还可以提高平台知名度。一个好的秒杀系统，可以提高平台系统的稳定性和公平性，获得更好的用户体验，提升平台的口碑，从而提升秒杀活动的最大价值。

2020-04-01 17:31:03

Redis 系统秒杀

微信基于时间序的海量存储扩展性与多机容灾能力提升

作为以手机为主要平台的移动社交应用，微信内大部分业务生成的数据是有共性可言的:数据键值带有时间戳信息，并且单用户数据随着时间在不断的生成,我们将这类数据称为基于时间序的数据。

2020-04-01 09:41:49

微信存储容灾

新名词｜什么是「电源」程序员？

计算机系统(A computer system) 是由硬件和软件组成的，它们协同工作运行程序。不同的系统可能会有不同实现，但是核心概念是一样的，通用的。

2020-04-01 08:33:51

程序员语言系统

如何快速定位 Redis 热 key?

在 Redis 中，热key指的是那些在一段时间内访问频次比较高的键值，具体到业务上，商品的限时抢购、瞬时的新闻热点或某个全局性的资源，都极有可能产生热点key。如何应对热点Key也是解决高并发的必备技能，本文作者条分缕析为你解答这个问题。

2020-03-31 17:05:39

Redis 热 key 代理

为什么128KB的魂斗罗可以实现那么长的剧情？

程序员要仔细研究文档，在硬件框架下思考问题，比如如何显示图片、如何卷动屏幕等等；而且还要非常熟悉硬件底层和汇编，不要浪费代码空间。

2020-03-30 09:00:56

128KB 魂斗罗剧情

上一页 1 ··· 9 10 11 12 13 ··· 44 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客鸿蒙开发者社区 AI.x社区

教育

51CTO学堂精培企业培训 CTO训练营