鸿蒙开发者社区

WOT技术大会

公众号矩阵

移动端

短视频免费课程课程排行直播课软考学堂

全部课程厂商认证 IT技术 24年11月软考 PMP项目管理免费题库

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO软考

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

51CTO软考题库

账号设置退出

存储软件

2179内容

关注

内容覆盖存储系统、存储组件、存储虚拟化、对象存储等相关软件产品，为用户提供存储软件行业的业界动态、产品资讯、前沿技术、应用案例等内容，帮助用户构建高性能、高可用、高安全的存储系统，提高存储性能和利用率，简化存储管理。

共 2179 条

因为不会Redis的scan命令，我被开除了

那个深夜，我登上了公司的服务器，在 Redis 命令行里敲入 keys* 后，线上开始报警，服务瞬间被卡死。

2019-12-16 08:47:04

Redis 设计算法

架构：缓存设计你懂吗？

缓存在架构设计中占有重要地位。缓存在提升性能中也扮演重要的角色。常见的有对资源的缓存，比如数据库连接池、http连接池，还有对数据的缓存等。缓存的设计可复杂也可简单，但是需要考虑的点却很多。

2019-12-11 10:07:02

缓存架构数据库

无服务器备份是企业可行的数据保护方式译文

数据备份、灾难恢复和数据保护的成本是非常昂贵的，尤其是涉及物理备份和灾难恢复服务器和硬件时。那么，预算有限的中小型企业(SMB)如何保护它们的基本数据呢?答案是无服务器备份。

2019-12-11 08:00:02

无服务器备份数据

关于Kata容器的那些事译文

我们开始努力将Oracle Linux云原生环境与Kata容器(Kata Containers)整合起来时，Kata容器对容器的安全边界带来的变化立即给我留下了印象深刻，我只想知道它是如何工作的。

2019-12-10 08:00:46

Kata 容器 Linux

升级vSphere 6.7前应考虑计算和存储

升级是IT管理员工作的一部分。软件版本发生变化;你需要修复、更新再继续前行。VMware软件是数据中心的基础，因此vSphere 6.7升级将会对你的资源和底层基础架构产生巨大影响。

2019-12-09 16:01:26

vSphere 6.7 计算存储

担忧非结构化数据存储问题？并非只有你如此

存储非结构化数据是存储面临的主要挑战之一。当你知道很多现代化技术进步在创建海量数据，而你必须管理、存储和分析这些数据时，你很难去欣赏这些技术。

2019-12-09 15:47:14

数据存储非结构

响应速度不给力？解锁正确缓存姿势

缓存穿透、缓存击穿以及缓存雪崩这三个术语很容易弄混，也是读缓存中典型的三个场景问题，做一下简单的总结是很有必要的。

2019-12-09 09:34:47

缓存响应数据

那些奇奇怪怪的缓冲问题

今天我们看看如何修改这些默认的缓冲类型，以及在实际中可能遇到哪些问题。

2019-12-06 10:14:31

缓冲函数日志

浅谈集群版Redis和Gossip协议

集群版的Redis听起来很高大上，确实相比单实例一主一从或者一主多从模式来说复杂了许多，互联网的架构总是随着业务的发展不断演进的。

2019-12-05 10:54:34

集群 Redis Gossip

分布式缓存的高可用方案，我们都是这么做的

我们讲到了当我们的系统面临持续增加的并发给我们的数据库磁盘IO带了了性能瓶颈，特此为我们的系统引入了缓存，并且学习了我们在开发中该怎么去正确的使用缓存的读写策略，同时结合案例给出一些建议防止数据不一致的情况，那我们的系统现在就是这样的架构了。

2019-12-04 14:59:01

分布式缓存高可用

HBase内存管理之MemStore的实现原理和优化

Java工程中内存管理总是一个绕不过去的知识模块，无论HBase、Flink还是Spark等，如果使用的JVM堆比较大同时对读写延迟等性能有较高要求，一般都会选择自己管理内存，而且一般都会选择使用部分堆外内存。

2019-12-04 10:23:33

HBase 内存 MemStore

深入浅出聊聊Kubernetes存储

如今，世界范围内的公有云巨头(谷歌、亚马逊、微软、华为云、阿里云等等)都在其传统的公共云服务之上提供托管的Kubernetes服务。

2019-12-04 10:13:58

Kubernetes 存储 Docker

什么鬼，面试官竟然让我用Redis实现一个消息队列！！？

众所周知，redis是一个高性能的分布式key-value存储系统，在NoSQL数据库市场上，redis自己就占据了将近半壁江山，足以见到其强大之处。同时，由于redis的单线程特性，我们可以将其用作为一个消息队列。

2019-12-02 10:51:11

Redis 存储系统

虚拟存储：选择SAN还是超融合？

现在市面上有很多虚拟存储选项可供IT管理员选择，而管理员在选择产品时，最重要的是产品功能与成本。很多管理员都依靠共享存储，这是大多数生产级虚拟环境的关键组成部分。

2019-12-02 09:41:05

存储数据 IT

互联网架构模板：“存储层”技术

抛开 BAT 各自差异很大的业务，站在技术的角度来看，其实 BAT 的技术架构基本是一样的。再将视角放大，你会发现整个互联网行业的技术发展，最后都是殊途同归。

2019-11-28 16:09:29

架构模板存储

iSCSI环境部署高可用集群配置实例

2019-11-27 16:34:00

浅谈分布式存储系统的数据分布算法，来了解一下吧！

无论上层接口是 KV 存储、对象存储、块存储、亦或是列存储，在这个问题上大体是一致的。本文将介绍如何分布式存储系统中做数据分布目标及可选的方案，并试着总结和权衡他们之间的关系及。

2019-11-27 11:27:52

分布式存储系统

掐指算算：你的CDN多花了几百万？

CDN (Content delivery network) 就是一个典型的符合zipf分布的缓存系统: 将缓存服务部署在距离用户最近的上百个地区(CDN边缘机房)，当用户需要访问热门内容时，只需在边缘机房读取，以此达到性能优化。

2019-11-27 10:29:40

CDN zipf 缓存

数据存储检索之B+树和LSM-Tree

作为一名应用系统开发人员，为什么要关注数据内部的存储和检索呢?首先，你不太可能从头开始实现一套自己的存储引擎，往往需要从众多现有的存储引擎中选择一个适合自己应用的存储引擎。

2019-11-26 15:12:08

数据存储 B+树

Python的小数据存储，用什么格式更有逼格？

我们在编写代码的时候，经常会涉及到数据存储的情况，如果是爬虫得到的大数据，我们会选择使用数据库，或者excel存储。但如果只是一些小数据，或者说关联性较强且存在存储后复用的数据，我们该如何存储呢？

2019-11-26 09:56:48

Python 数据存储

Redis 单线程还高并发？不冲突吗？

最近在看 UNIX 网络编程并研究了一下 Redis 的实现，感觉 Redis 的源代码十分适合阅读和分析，其中 I/O 多路复用(mutiplexing)部分的实现非常干净和优雅，在这里想对这部分的内容进行简单的整理。

2019-11-25 10:13:52

Redis 单线程 I

假如有人炸了支付宝的存储服务器...

外行人问题。网站都是有服务器的，服务器都是有实体的。那么支付宝的实体服务器所在地假如被一颗核弹/导弹等等炸了，那么大众存支付宝里的钱是不是也灰飞烟灭了呢?服务器实体的焚毁，数据也会消失不是么?

2019-11-22 10:41:13

支付宝存储服务器

如何找到系统里的重复文件，快速释放磁盘空间？

不管是 Windows 电脑还是 Linux 电脑，在使用的过程中，或多或少都会留下很多重复的文件。这些文件不仅会占用我们的磁盘，还会拖累我们的系统，所以，很有必要干掉这些重复的文件。

2019-11-20 10:23:51

磁盘 Windows Linux

Kafka文件存储机制那些事

Kafka是最初由Linkedin公司开发，是一个分布式、分区的、多副本的、多订阅者，基于zookeeper协调的分布式日志系统，常见可以用于web/nginx日志、访问日志，消息服务等等，Linkedin于2010年贡献给了Apache基金会并成为顶级开源项目。

2019-11-19 14:48:00

Kafka 文件存储

看大数据大佬手把手带你实现基于Zookeeper、Redis的分布式锁

在分布式系统中，分布式锁是为了解决多实例之间的同步问题。例如master选举，能够获取分布式锁的就是master，获取失败的就是slave。又或者能够获取锁的实例能够完成特定的操作。

2019-11-18 14:16:10

Zookeeper Redis 大数据

详解 Redis 内存淘汰机制和持久化机制原理剖析Redis必备！

假设生产环境里面MySQL 数据库有 1000w 数据，Redis 中只存 10w 的数据，如何保证 Redis 中的数据都是热点数据?

2019-11-12 14:15:07

Redis 内存持久化

如何实现超高并发的无锁缓存？

有一类写多读少的业务场景：大部分请求是对数据进行修改，少部分请求对数据进行读取。

2019-11-11 15:33:34

高并发缓存数据

灾难恢复测试策略是成功进行灾难恢复的关键

唯一确定灾难恢复计划是否有效的方法是灾难来临时对其进行测试。而企业需要确保其计划不会因频繁测试而变得乏味。

2019-11-06 11:20:39

灾难恢复策略测试

缓存穿透、缓存击穿和缓存雪崩实践

我们使用缓存的主要目是提升查询速度和保护数据库等稀缺资源不被占满。而缓存最常见的问题是缓存穿透、击穿和雪崩，在高并发下这三种情况都会有大量请求落到数据库，导致数据库资源占满，引起数据库故障。

2019-11-05 14:24:31

缓存雪崩框架

你居然还不知道MySQL存储引擎InnoDB分为内存架构、磁盘架构？

关于MySQL对于后端程序员的重要性不言而喻，而InnoDB也已经是MySQL默认的存储引擎。作为我们每天打交道的存储引擎，我们对它可能需要对它有更多的了解。这样对于很多灵异事件，才能从容应对。

2019-11-04 15:57:29

MySQL InnoDB 内存

架构师必备，了解分层架构中缓存那点事儿

无论是CDN缓存加速，还是CPU的三级缓存，又或者是在如今互联网时代流量红利所带来的高并发结构客户端，而不得不使用缓存架构。

2019-10-30 16:24:34

分层架构缓存

聊聊原子变量、锁、内存屏障那点事

突然想聊聊这个话题，是因为知乎上的一个问题多次出现在了我的Timeline里：请问，多个线程可以读一个变量，只有一个线程可以对这个变量进行写，到底要不要加锁?可惜的是很多高票答案语焉不详，甚至有所错漏。

2019-10-30 09:56:56

内存屏障变量

Redis中8种数据结构的底层数据结构源码详解

Redis中的Key与Value在表层都是一个redisObject实例, 所以该结构有所谓的"类型", 即是ValueType. 对于每一种Value Type类型的redisObject;其底层至少支持两种不同的底层数据结构来实现. 以应对在不同的应用场景中, Redis的运行效率, 或内存占用等。

2019-10-29 08:59:16

Redis 底层数据

聊聊关于Redis中16个默认数据库的知识

Redis是一个字典结构的存储服务器，一个Redis实例提供了多个用来存储数据的字典，客户端可以指定将数据存储在哪个字典中。

2019-10-28 10:29:49

Redis 数据库分布式锁

Redis内存爆炸增长？你需要知道这一套Redis内存分析方法

Redis是当前比较热门的NOSQL数据库之一，和Memcache一样，数据都是缓存在计算机内存中。完全开源免费，遵守BSD协议，是一个高性能的key-value数据库。通过在内存中读写数据，大大提高了数据读写速度，可以说Redis是实现网站高并发不可或缺的一部分。

2019-10-24 08:43:46

Redis 内存 NOSQL

稳了！用Redis实现“附近的人”功能

针对“附近的人”这一位置服务领域的应用场景，常见的可使用 PG、MySQL 和 MongoDB 等多种 DB 的空间索引进行实现。

2019-10-23 09:48:46

Redis MySQL MongoDB

Redis集群都有哪些模式

Sentinel(哨兵)进程是用于监控redis集群中Master主服务器工作的状态，在Master主服务器发生故障的时候，可以实现Master和Slave服务器的切换，保证系统的高可用。

2019-10-23 09:20:11

Redis 集群主从复制

Redis集群的5种使用方式，各自优缺点分析

Redis 多副本，采用主从(replication)部署结构，相较于单副本而言最大的特点就是主从实例间数据实时同步，并且提供数据持久化和备份策略。

2019-10-22 10:48:48

Redis 集群架构

资深架构师分享：大型网站多级缓存的分层架构

这种说法带有片面性，甚至是一知半解，但是作为专业人士的我们，需要对缓存有更深、更广的了解。

2019-10-21 09:32:48

缓存架构分层

6个常见的高并发缓存问题，你知道几个？

一般来说，现在的互联网应用网站或者APP，它的整体流程可以用我们这个图里展示的来表示，用户请求开始，从这个界面是最里面的浏览器和APP，到网络转发，再到应用服务，最后到存储，这纯属可能是数据库文件系统，然后再返回到界面呈现内容。

2019-10-17 16:02:44

高并发缓存浏览器

支撑现代分布式存储系统的算法

随着应用程序处理的数据量不断增长，扩展存储变得愈发具有挑战性。每个数据库系统都有自己的方案。为了从这些方案中做出正确的选择，了解它们是至关重要的。

2019-10-15 10:59:43

分布式存储系统

KeyDB——据说是比Redis快5倍的中间件，为啥这么快？

KeyDB项目是从redis fork出来的分支。众所周知redis是一个单线程的kv内存存储系统，而KeyDB在100%兼容redis API的情况下将redis改造成多线程。

2019-10-14 09:50:52

KeyDB Redis 中间件

万万没想到，Redis多线程版本竟然比原生版本快那么多

如果我告诉您有一个 Redis 的分支版本，它的性能比原生的 Redis 快 5 倍，而且延迟却降低近 5 倍，你会不会想了解一下这个项目?

2019-10-12 08:53:26

Redis 多线程版本

从源码解密Spark内存管理

我们都知道spark之所以比mapreduce计算的快，是因为他是基于内存的，不用每次计算完都写磁盘，再读取出来进行下一次计算，spark直接把内存作为数据的临时储存介质。所以mapreduce就没有强调内存管理，而spark需要管理内存。

2019-10-10 16:20:23

spark 内存管理

搞懂高可用缓存架构，总结五大缓存问题解决方案

缓存雪崩指的是由于数据没有被加载到缓存中，或者缓存数据在同一时间大面积失效(过期)，又或者缓存服务器宕机，导致大量的请求都到达数据库。

2019-10-09 16:18:36

缓存架构雪崩

Redis读写分离难以理解？一文解析Redis读写分离技术

云数据库Redis版不管主从版还是集群规格，replica作为备库不对外提供服务，只有在发生HA的时候，replica提升为master后才承担读写流量。

2019-09-30 09:19:54

Redis 分离云数据库

微服务架构中缓存模式

有许多方法可以配置系统中的缓存，缓冲应该被放在系统的哪个层上?根据以往成功经验，系统中您应该只在一个地方使用缓存。

2019-09-29 10:29:02

缓存模式微服务架构

Redis内存回收机制，把我整懵了...

之前看到过一道面试题：Redis 的过期策略都有哪些?内存淘汰机制都有哪些?手写一下 LRU 代码实现?

2019-09-27 09:13:55

Redis 内存机制

你知道 Redis数据结构底层实现吗？一文详解，彻底弄懂

我们在面试时，常常可以遇到的面试题是关于redis，这是很多面试官都喜欢的一个部分。而今天要讲的，是redis的底层数据结构，并非是我们所理解中的五大数据结构。

2019-09-27 08:53:47

Redis 数据 C语言

选择正确AI数据存储的6条标准

人工智能和机器学习已成为两个最重要的工具，它们可帮助企业利用其核心数字资产创造竞争优势。但是在购买AI数据存储之前，企业必须考虑各种需求–基于机器学习平台如何获取、处理和保留数据。

2019-09-26 10:25:32

AI 数据存储

上一页 1 ··· 11 12 13 14 15 ··· 44 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客鸿蒙开发者社区 AI.x社区

教育

51CTO学堂精培企业培训 CTO训练营