鸿蒙开发者社区

WOT技术大会

公众号矩阵

移动端

短视频免费课程课程排行直播课软考学堂

全部课程厂商认证 IT技术 24年11月软考 PMP项目管理免费题库

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO软考

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

51CTO软考题库

账号设置退出

存储软件

2179内容

关注

内容覆盖存储系统、存储组件、存储虚拟化、对象存储等相关软件产品，为用户提供存储软件行业的业界动态、产品资讯、前沿技术、应用案例等内容，帮助用户构建高性能、高可用、高安全的存储系统，提高存储性能和利用率，简化存储管理。

共 2179 条

从源码解密Spark内存管理

我们都知道spark之所以比mapreduce计算的快，是因为他是基于内存的，不用每次计算完都写磁盘，再读取出来进行下一次计算，spark直接把内存作为数据的临时储存介质。所以mapreduce就没有强调内存管理，而spark需要管理内存。

2019-04-17 14:44:42

Spark 内存源码

数据库系统实现-存储管理(CheckSum&RAID)

磁盘并不是万无一失的，也可能发生故障和损坏。磁盘发生故障是灾难性的，存储介质的损坏如果在没备份的情况下，基本是100%丢失数据，比rm -rf 还严重，那么磁盘的故障有那么些?

2019-04-16 15:43:21

CheckSum RAID 存储

每一个Web开发者需要掌握的HTTP缓存知识

我们每时每刻使用的互联网、移动手机APK，都是由各种各样的资源拼成的HTML(JS、CSS)页面。

2019-04-16 08:50:56

Web HTTP 缓存

数据存储技术的重大颠覆对于企业意味着什么

Keeper Technology公司创始人兼首席执行官Dave Donald表示，人们将在2019年看到数据存储领域的一些颠覆性技术，其中包括：软件定义存储(SDS)、NVMe、超融合设施、边缘计算和便携式存储架构。

2019-04-11 11:16:38

数据存储 IoT

Redis内存淘汰策略，看这一篇就够了！

Redis作为当前最常用的开源内存数据库，性能十分高，据官方数据表示Redis读的速度是110000次/s,写的速度是81000次/s 。而且Redis支持数据持久化，众多数据结构存储，master-slave模式数据备份等多种功能。

2019-04-10 10:43:15

Redis 内存淘汰策略

Redis 这么火，它都解决了哪些问题？

Redis是一个基于BSD开源的项目，是一个把结构化的数据放在内存中的一个存储系统，你可以把它作为数据库，缓存和消息中间件来使用。

2019-04-09 09:22:32

Redis 内存缓存

Redis你可能不了解的那些事

Redis 是一个高性能分布式的key-value数据库。它支持多种数据结构，并可应用于缓存、队列等多种场景下。使用过Redis的小伙伴们可能对这些已经非常熟知了，下面我想来谈谈Redis也许并不被每个人了解的那点事。

2019-04-03 09:10:35

Redis key-value 数据库

Redis为什么是单线程及高并发快的3大原因详解

因为Redis是基于内存的操作，CPU不是Redis的瓶颈，Redis的瓶颈最有可能是机器内存的大小或者网络带宽。既然单线程容易实现，而且CPU不会成为瓶颈，那就顺理成章地采用单线程的方案了。

2019-04-02 11:20:48

Redis 高并发单线程

打造大规模共享闪存基础架构译文

机架级集成（RSI）有望为企业数据中心带来云经济性，但存储是个棘手问题。新的软件架构使远程闪存几乎等同于本地闪存。以下是你需要知道的几个方面。

2019-04-02 08:00:39

闪存架构共享

Node.js 应用故障排查手册 —— 冗余配置传递引发的内存溢出

本节将以一个开发者容易忽略的生产内存溢出案例，来展示如何借助于性能平台实现对线上应用 Node.js 应用出现内存泄漏时的发现、分析、定位问题代码以及修复的过程，希望能对大家有所启发。

2019-04-01 14:39:32

Node.js 故障排查

Spring Boot中，Redis缓存还能这么用！

经过Spring Boot的整合封装与自动化配置，在Spring Boot中整合Redis已经变得非常容易了，开发者只需要引入Spring Data Redis依赖，然后简单配下redis的基本信息，系统就会提供一个RedisTemplate供开发者使用，但是今天松哥想和大伙聊的不是这种用法，而是结合Cache的用法。

2019-03-28 11:07:56

Spring Boot Redis 缓存

假如我是一条内存

耳边传来了风扇卖力干活的嗡嗡声，估计就是他把我吵醒的。这时候 CPU阿甘现身了：“兄弟，快醒醒，开机了，要干活了，我要把程序和数据从硬盘读取到你这里来了!”

2019-03-28 10:09:49

内存 CPU 硬盘

缓存一致性策略以及雪崩、穿透问题

高并发情境下首先考虑到的第一层优化方案就是增加缓存，尤其是通过Redis将原本在数据库中的数据复制一份放到内存中，可以减少对数据库的读操作，数据库的压力降低，同时也会加快系统的响应速度，但是同样的也会带来其他的问题，比如需要考虑数据的一致性、还需要预防可能的缓存击穿、穿透和雪崩问题等等。

2019-03-27 13:56:39

缓存雪崩穿透

弥补MySQL和Redis短板：看HBase怎么确保高可用

HBase是一个基于Hadoop面向列的非关系型分布式数据库(NoSQL)，设计概念来源于谷歌的BigTable模型，面向实时读写、随机访问大规模数据集的场景，是一个高可靠性、高性能、高伸缩的分布式存储系统，在大数据相关领域应用广泛。

2019-03-25 09:09:57

MySQL Redis HBase

Redis 布隆过滤器实战「缓存击穿、雪崩效应」

我们的业务中经常会遇到穿库的问题，通常可以通过缓存解决。如果数据维度比较多，结果数据集合比较大时，缓存的效果就不明显了。

2019-03-22 15:15:25

Redis 缓存击穿雪崩效应

为什么被垄断的DRAM价格会暴跌？

DRAM产品的高获利神话正式在2019年破灭，但厂商的扩厂并没有中断：全球第二大供应商的海力士(SK Hynix)，近日宣布计划启动未来十年的投资计划，预估十年内共计投入一千亿美元的预算兴建额外四条产线，将用来生产次世代的储存存储器及DRAM芯片。

2019-03-21 08:53:01

DRAM 存储器芯片

NoSQL数据库服务之Redis

Nosql数据库是一种非关系型数据库服务，它能解决常规数据库的并发能力，比如传统的数据库的IO与性能的瓶颈，同样它是关系型数据库的一个补充，有着比较好的高效率与高性能。

2019-03-20 15:59:11

NoSQL Redis 数据库

Web缓存控制策略详解

管理Web缓存的最常用和最有效的方法之一是通过Cache-Control HTTP标头，由于此标头适用于Web页面的缓存，这意味着我们页面上的所有内容都可以具有非常精细化的缓存策略。通过各种自定义策略，我们控制的策略就可以变得非常复杂和强大。

2019-03-20 09:11:50

Web 缓存策略

内存运行频率是由谁决定的？

重金买来的DDR4 4700内存为什么只能运行在2400Mhz?为什么CPU标称最大支持2400，却有很多主板号称支持高达3300的内存，难道内存控制器不是在CPU里面吗?如果CPU最大支持2400，主板号称支持3300，我买的内存条号称支持4700，最终内存工作频率是多少呢?

2019-03-19 10:24:00

内存运行频率

基于Redis+MySQL+MongoDB存储架构应用

使用MongoDB切片的水平动态添加，可在不中断平台业务系统的同时保障扩容后的查询速度和云计算效能;依据切片键索引分片，位于各切片独立进行计算，使大数据下的实时分析成为现实。对于高频访问的数据放在了Redis中，有效地降低磁盘I/O，使业务系统响应更为敏捷，满足了高并发下应用服务的高呑吐要求。

2019-03-18 14:58:18

Redis MySQL MongoDB

缓存更新的套路是怎样的?

看到好些人在写更新缓存数据代码时，先删除缓存，然后再更新数据库，而后续的操作会把数据再装载的缓存中。然而，这个是逻辑是错误的。

2019-03-18 10:02:16

缓存更新数据

来一份闪存存储器指南

人们需要了解闪存存储器和固态硬盘(SSD)正在彻底改变当今IT基础设施的原因，因为这些超级快速存储的设备可以支持高端应用和高性能存储层。

2019-03-15 15:15:12

硬盘 SSD 闪存

全闪存vs.混合闪存：如何选择适合的存储产品

随着存储阵列的发展和进步，闪存价格的大幅下降，许多生产厂商提供不同类型的全闪存存储阵列，以满足IT部门的网络文件系统/服务器消息块 (SMB)性能需求，而采用闪存的决策过程对IT经理和专业的人员来说变得更加复杂。

2019-03-14 14:18:49

全闪存混合闪存存储

为什么MySQL数据库要用B+树存储索引？

小史是一个应届生，虽然学的是电子专业，但是自己业余时间看了很多互联网与编程方面的书，一心想进 BAT 互联网公司。

2019-03-14 09:51:50

MySQL 存储逻辑架构

经典开源代码分析——Leveldb高效存储实现

LevelDB是Google开源的持久化KV数据库，在其高性能的背后，将数据拆分成多层进行存储。本文作者深入分析了LevelDB存储模块的设计和源码实现，快速了解LevelDB高性能背后的原理。

2019-03-12 11:11:25

开源 Leveldb 存储

过去一年，大佬们的服务器和存储卖得咋样？

3月份，IDC先后出炉了2018年Q4企业存储和服务器的市场报告,结合前三个季度的数据我们可以更清楚的看到各个“盒子”大厂，到底生意如何。

2019-03-12 09:18:34

服务器存储市场

如何选择合适的企业存储

为了跟上业务发展的步伐，他们正在向物联网、大数据、人工智能(AI)和增强现实等技术倾斜。然而，他们的的数据中心的一个关键组成部分——企业存储却一直是阻止企业发展的障碍。

2019-03-11 15:48:13

企业存储数据

Redis数据结构之简单动态字符串SDS

Redis的底层数据结构非常多，其中包括SDS、ZipList、SkipList、LinkedList、HashTable、Intset等。如果你对Redis的理解还只停留在get、set的水平的话，是远远不足以应对面试提问的。本文简单介绍了Redis底层最重要的数据结构 - 简单动态字符串(SDS)。

2019-03-07 15:43:22

Redis 数据 SDS

一次 MySQL 及 Redis 灵异断连现象：安全组静默丢包解决办法

差不多一两年前，在阿里云上遇到一个奇怪的 Redis 连接问题，每隔十来分钟，服务里的 Redis client 库就报告连接 Redis server 超时，当时花了很大功夫，发现是阿里云会断开长时间闲置的 TCP 连接，不给两头发 FIN or RST 包。

2019-03-06 10:36:25

MySQL Redis 安全组

一步步了解 Docker 存储驱动

在说docker的文件系统之前，我们需要先想清楚一个问题。我们知道docker的启动是依赖于image，docker在启动之前，需要先拉取image，然后启动。

2019-03-05 14:09:27

Docker 存储容器

如何写好上千行的 SQL 存储过程（附代码规范）

经历了大大小小的 MIS 系统，小到几人用的协作系统，几十人用的 OA 系统，到上千人用的 MES/ERP 系统，再到百万人用的电商系统，存储过程的影子在半个世纪以来从未淡出它的战场。

2019-03-04 15:53:02

SQL 存储系统

我们常说的内存是怎么分配的，如何减少内存浪费是大难题

说到内存的分配方式，就不得不提连续分配方式。这种方式是指为一个用户程序分配一个连续的内存空间，它曾被广泛的用于20世纪60~70年代的OS中，至今仍被使用。连续分配方式可以进一步分为单一连续分配、固定分配方式、动态分区分配以及动态重定位分配。

2019-02-28 14:04:28

内存固定分配存储

Redis 的事务到底是不是原子性的

原子性：一个事务(transaction)中的所有操作，要么全部完成，要么全部不完成，不会结束在中间某个环节。事务在执行过程中发生错误，会被恢复(Rollback)到事务开始前的状态，就像这个事务从来没有执行过一样。

2019-02-27 09:28:15

Redis 服务器事务

对比各类分布式锁缺陷，抓住Redis分布式锁实现命门

两年来微服务变得越来越热门，越来越多的应用部署在分布式环境中，在分布式环境中，数据一致性是一直以来需要关注并且去解决的问题，分布式锁也就成为了一种广泛使用的技术，常用的分布式实现方式为Redis，Zookeeper，其中基于Redis的分布式锁的使用更加广泛。

2019-02-26 09:51:52

分布式锁 Redis Zookeeper

值得收藏！9个优秀SSD状态监控及性能优化工具

如我们所知，与传统硬盘驱动器(HDD)相比，固态硬盘具有极高的磁盘性能，尤其是新出厂的硬盘。但随着时间的推移，SSD的性能会急剧下降。而且当存储在其上的数据达到总容量的约70%时，尤其如此。

2019-02-26 09:14:02

SSD 状态监控

如何避免Swap分区对NVMe设备造成过度损耗

NVMe是固态存储时代的下一个阶段，它提高了SSD和网络上其他存储设备的性能。如今，越来越多的服务器开始支持NVMe，IT人员是时候考虑Swap分区(交换区)的使用问题，来最大限度地利用这些系统了。

2019-02-22 09:05:04

Swap NVMe 设备

面试中经常被问到的Redis持久化与恢复，该如何解决？

本文主要讲了 Redis 的持久化相关功能，持久化一直是影响 Redis 性能的高发地，也是面试中经常被问到的。

2019-02-21 10:49:51

Redis 持久化恢复

NVMe存储性能瓶颈的主要来源：文件系统

NVMe通过改进物理接口、增加命令数量和队列深度，使存储基础设施能够充分利用闪存的优势。但是NVMe也带来了一个挑战:NVMe的延迟非常低，它暴露了存储基础架构中其他组件的弱点。基础架构中的任何薄弱环节都会增加延迟并降低NVMe的价值。

2019-02-20 12:37:39

NVMe 存储文件系统

Redis数据分片方案实践

witter的Twemproxy (https://github.com/twitter/twemproxy)是目前市面上用的最广的使用做多的用来做redis集群服务。由于redis是单线程，而且官方的cluster 还不是很稳定和广泛使用。

2019-02-19 10:12:41

Redis 分片数据

中美两国的数据增长情况和发展趋势译文

希捷和IDC发布了2018年11月《数据时代2025年》报告的更多细节，着重探讨了美国和中国的数据增长。本文介绍一些预测的趋势。你可以在此(https://www.seagate.com/our-story/data-age-2025/)查看完整报告。

2019-02-19 08:00:40

数据增长趋势

分布式缓存Redis扫盲教程

绝大部分写业务的程序员，在实际开发中使用 Redis 的时候，只会 Set Value 和 Get Value 两个操作，对 Redis 整体缺乏一个认知。这里对 Redis 常见问题做一个总结，解决大家的知识盲点。

2019-02-18 11:16:12

Redis 分布式缓存

如何回收处理数据中心的存储硬件?

当自动驾驶汽车工程师Andrew Levandowski从谷歌公司离职跳槽到Uber公司工作时，他声称在几个星期之后才发现在他的衣柜找出了五个装满了源代码、设计和工程文件的硬盘。

2019-02-15 15:19:42

数据中心存储硬件

开发导致的内存泄露问题，运维小伙伴这样排查不背锅

前些日子小组内安排值班，轮流看顾我们的服务，主要做一些报警邮件处理、Bug排查、运营issue处理的事。工作日还好，无论干什么都要上班的，若是轮到周末，那这一天算是毁了。

2019-02-14 13:30:54

内存泄露运维

容器“撩”存储手段升级，容器存储接口（CSI）胜出

容器虽然不是一个新事物，但是国内的市场应该没有起来，国外好点，但是总体来说，容器目前的市场空间还不够大。

2019-02-14 13:19:40

容器存储 CSI

分布式之MemCache详细解读

MemCache是一个自由、源码开放、高性能、分布式的分布式内存对象缓存系统，用于动态Web应用以减轻数据库的负载。

2019-02-13 13:41:07

MemCache 分布式 HashMap

干货！教你深入理解缓存问题，使用缓存无压力！

在高并发或大数据的场景下，面对热点数据的使用性能问题，缓存是常用的解决方式，主要作用包括将数据写入速度更快的存储设备;将数据缓存到离应用最近的位置;将数据缓存到离用户最近的位置等。

2019-02-12 14:24:14

缓存高并发网络

传统存储升级全闪存或混闪需要明确哪些问题？

传统的存储主要是基于SAS或者SATA等类型的传统硬盘，随着互联网的发展和企业业务的转型，SAS/SATA的性能已经无法满足业务的需求。在更多新的存储技术中，闪存介质已经成为主流。随着软件定义的崛起和流行，闪存的地位更成为企选型的基本配置。

2019-02-01 08:55:12

传统存储全闪存 SATA

如何使用Fedora模块化存储库

Fedora Linux是较具知名度的Linux发行包之一，由Fedora项目社群开发、红帽公司赞助，目标是创建一套新颖、多功能并且自由(开放源代码)的操作系统。

2019-01-30 14:04:57

Fedora 存储库 Fedora

为什么不搞集群服务也能实现Redis高可用？

基于内存的Redis应该是目前各种Web开发业务中最为常用的Key-Value数据库了。

2019-01-29 10:16:38

Redis 高可用集群

Linux内存取证：解析用户空间进程堆

在取证分析中，对内存的分析通常是还原事件的重要步骤。以前对内存工作的分析主要集中于那些驻留在内核空间中的信息，如进程列表、网络连接等，特别是在Microsoft Windows操作系统上，但是这项工作主要关注的是Linux用户空间进程，因为它们可能还包含有价值的调查信息。

2019-01-29 10:10:09

Linux 内存进程堆

上一页 1 ··· 14 15 16 17 18 ··· 44 下一页

51CTO技术栈公众号

业务
速览

媒体

51CTO CIOAge HC3i

社区

51CTO博客鸿蒙开发者社区 AI.x社区

教育

51CTO学堂精培企业培训 CTO训练营