51CTO首页
AI.x社区
博客
学堂
精品班
软考社区
免费课
企业培训
鸿蒙开发者社区
WOT技术大会
IT证书
公众号矩阵
移动端
短视频免费课程课程排行直播课软考学堂
全部课程厂商认证IT技术25年5月软考PMP项目管理免费题库
在线学习
文章资源问答课堂专栏直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO软考
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
51CTO软考题库
账号设置 退出

分布式

1379内容  
涵盖分布式相关研究热点、技术难点与应用场景。
文章 博文课程
共 1379 条
华为云发布新一代分布式缓存Redis，重新定义云原生缓存2.0时代
9月14日，华为云中国行在济南如期举行，华为EBG中国区行业云拓展部部长胡维琦在大会现场进行了“做有信仰的云，在创新的道路上加速奔跑”的主题演讲，发布了华为云全新产品：新一代分布式缓存Redis。

2018-09-14 13:06:36

华为云
常见分布式文件存储介绍、选型比较、以及架构设计
数据正成为世界上最有价值的资源，分布式文件存储是应对数据爆炸的最好解决方案，那就会涉及到分布式文件存储方案、选型、架构设计等。

2018-09-14 11:11:04

分布式文件存储
构建Uber大型支付系统时学到的分布式体系结构概念
在本文中，我总结了一些我认为在构建大规模，高可用分布式系统(为 Uber 提供底层支持的支付系统)时必须学习和应用的概念。

2018-09-12 07:22:00

分布式支付系统高负载
如何设计一个麻雀般的微型分布式架构？
设计该系统初衷是基于描绘业务（或机器集群）存储模型，分析代理缓存服务器磁盘存储与回源率的关系。

2018-09-06 22:49:31

分布式架构服务器
如果要设计个分布式文件系统，该从哪些方面考虑？
分布式文件系统是分布式领域的一个基础应用，其中最著名的毫无疑问是 HDFS/GFS。如今该领域已经趋向于成熟，但了解它的设计要点和思想，对我们将来面临类似场景 / 问题时，具有借鉴意义。

2018-09-03 10:49:09

分布式文件系统
区块链三大思维：分布式思维、代码化思维、共识性思维
区块链利用分布式数据存储、点对点传输、共识机制、加密算法等技术，具备去中心化、开放性、自治性、不可篡改、匿名性等特点。利用这些技术构建起来的商业模式，具备以下思维逻辑。

2018-08-30 18:30:19

区块链思维中心化
分布式存储的六大优点
分布式存储往往采用分布式的系统结构，利用多台存储服务器分担存储负荷，利用位置服务器定位存储信息。它不但提高了系统的可靠性、可用性和存取效率，还易于扩展，将通用硬件引入的不稳定因素降到最低。

2018-08-29 11:57:17

分布式存储优点
分布式深度学习新进展：让“分布式”和“深度学习”真正深度融合
近年来，作为人工智能发展迅速的领域之一的深度学习在NLP、图像识别、语音识别、机器翻译等方面都取得了惊人的成果。但是，深度学习的应用范围却日益受到数据量和模型规模的限制。如何才能高效地进行深度学习模型训练？

2018-08-28 15:47:03

人工智能深度学习机器学习
5个大数据处理/数据分析/分布式工具
Hadoop是一个开源框架，它允许在整个集群使用简单编程模型计算机的分布式环境存储并处理大数据。它的目的是从单一的服务器到上千台机器的扩展，每一个台机都可以提供本地计算和存储。

2018-08-24 10:28:41

大数据数据分析工具
带着问题学习分布式系统之数据分片
本文主要讨论数据分片的三个问题：(1)如何做数据分片，即如何将数据映射到节点；(2)数据分片的特征值，即按照数据中的哪一个属性(字段)来分片；(3)数据分片的元数据的管理，如何保证元数据服务器的高性能、高可用，如果是一组服务器，如何保证强一致性。

2018-08-24 07:03:45

分布式系统数据分片元数据
扫盲：Hadoop分布式文件系统（HDFS）基础概念讲解！
本文为您带来通过shell命令管理Hadoop HDFS的十大基本操作，这些操作对于管理HDFS集群上的文件非常有用。出于测试目的，你可以使用Cloudera或者Hortonworks等中的某些VM调用此命令，或者用于伪分布式集群设置。

2018-08-14 10:44:58

HadoopHDFS命令
收藏 | 第一次有人把“分布式事务”讲的这么简单明了
不知道你是否遇到过这样的情况，去小卖铺买东西，付了钱，但是店主因为处理了一些其他事，居然忘记你付了钱，又叫你重新付。

2018-08-14 09:28:40

分布式事务 ACID
分布式集群存储系统在电子档案场景下的应用
数字化档案管理系统的建设突破了传统的、封闭的档案管理模式，实现了档案工作以手工管理为主向以计算机管理为主、以管理档案实体为主向以管理档案信息为主、以档案存储保管为主向利用服务为主的转变。

2018-08-08 10:32:55

分布式集群存储
阿里P8架构师谈：分布式缓存的应用场景、选型比较、问题和挑战
高并发环境下，例如典型的淘宝双11秒杀，几分钟内上亿的用户涌入淘宝，这个时候如果访问不加拦截，让大量的读写请求涌向数据库，由于磁盘的处理速度与内存显然不在一个量级，服务器马上就要宕机。

2018-08-07 10:04:11

数据库分布式缓存Redis
区块链分布式存储数据十大趋势
进入2018年以来，全球区块链似乎进入一个白热化的发展环境，各国持续不断出台或更新相关监管政策，在该洪流下的币所、初创企业、区块链媒体等各机构使劲“蹦跶”。

2018-08-06 16:10:21

区块链分布式存储数据
常见分布式文件系统大盘点，想了解大数据先从存储开始
大数据的最底层的内容就是存储，只有把数据存在能高效访问的分布式系统下才能提升工作效率。小编带大家来盘点一下这些常见的分布式文件系统。

2018-08-06 16:03:13

分布式文件系统
价格低≠性价比高 购买分布式路由你应该知道这些
虽然低端分布式路由产品与三大厂的产品相比价格比较悬殊，但是低价并不能和高性价比划等号，其性能只能说符合该产品的定位。就如同近日上市的某拼团公司，人们费力拼团购买的所谓超值商品，充其量就是只值这点钱而已。

2018-08-03 12:05:47

分布式路由
区块链三大思维：分布式思维、代码化思维、共识性思维
传统互联网是信息互联网，区块链是价值互联网，所以，区块链也被认为是互联网的下半场。那么，何为价值互联网？区块链具有哪些价值？本文从思维的角度，说明区块链区别与传统互联网的价值所在。

2018-08-03 10:25:53

区块链大数据比特币
网件Orbi分布式路由系统：十年前装修没有网线，十年后也不需要
随着家庭中智能移动终端的不断增加，网件Orbi分布式路由系统在大户型和多楼层的WiFi覆盖实现了从能用到好用的飞跃，因此即使十年前的装修没有网络布线，十年后也不需要了。

2018-08-02 16:21:18

路由器
分离式or超融合，分布式存储建设时的两种部署模式
数据中心内部系统的核心要求是“稳定可靠”，一是指系统在运行过程中有能力提供连续可靠的服务，长时间无故障运行；二是指当故障发生之后，有能力快速定位，及时排查，故障范围不蔓延。

2018-08-02 09:13:34

分离式超融合存储
分布式存储 Ceph 中 PG 各种状态详解
面向容灾域的备份策略使得一般而言的PG需要执行跨节点的分布式写，因此数据在不同节点之间的同步、恢复时的数据修复也都是依赖PG完成。

2018-08-02 08:42:57

分布式存储Ceph
区块链+分布式存储，能否引起云存储平台的变革?
据相关数据显示，到2020年时，全球联网设备的数量将超过200亿台。它们将产生海量数据，随之而来的，是要对这些数据进行管理、存储和检索，加之消费者个性化软件以及跨越多个业务部门共享数据的必要性，都对数据存储提出了更高的要求。

2018-08-01 10:30:21

区块链分布式存储云存储
自主研发，京东云推出云架构核心产品分布式消息队列
2018年7月25日，京东云推出了互联网中间件PaaS产品消息队列，并全面开放公测。京东云消息队列（JD Cloud Message Queue，简称JCQ）是京东云自主研发的分布式消息队列服务。

2018-07-31 16:29:57

京东云
链圈人士也懵逼的一件事：区块链与分布式账本的差异
在加密货币和区块链领域，有一个业内人士常挂在嘴边的新术语：分布式账本技术(简称DLT)。但具有讽刺意味的是，恰恰是比特币和各种区块链试图颠覆的实体们对分布式账本技术情有独钟，而分布式账本技术和区块链，其实存在很大的差异。

2018-07-31 06:50:11

区块链分布式账本DLT
民生健康程羽：中心化思维阻碍分布式商业落地
7月19日，第三届FEA互联网保险发展大会在上海召开，吸引了蚂蚁金服、中国人保财险、中国平安、易安保险等知名机构参加。民生保险健康险事业部总经理程羽应邀出席，就“区块链+互联网保险创新”做主题演讲。

2018-07-26 15:31:02

保险
知乎十万级容器规模的分布式镜像仓库实践
知乎在 2016 年已经完成了全量业务的容器化，并在自研容器平台上以原生镜像的方式部署和运行。

2018-07-23 08:32:49

分布式镜像仓库
Spring Cloud构建微服务架构：分布式配置中心【Dalston版】
在本文中，我们将学习如何构建一个基于Git存储的分布式配置中心，并对客户端进行改造，并让其能够从配置中心获取配置信息并绑定到代码中的整个过程。

2018-07-19 14:58:14

Spring Clou微服务架构
从构建分布式秒杀系统聊聊WebSocket推送通知
秒杀架构到后期，我们采用了消息队列的形式实现抢购逻辑，那么之前抛出过这样一个问题：消息队列异步处理完每个用户请求后，如何通知给相应用户秒杀成功？

2018-07-19 14:53:23

秒杀websocket异步
饿了么轻量级分布式时序数据库的设计与探索！
饿了么对时序数据库的需求主要来自各监控系统，主要用于存储监控指标。原来使用的是graphite，后来慢慢对指标有了多维的需求，主要体现在对一个指标加多个Tag来组成Series，然后对Tag进行Filter和Group进行计算，这时graphite基本很难满足需求。

2018-07-19 11:18:45

饿了么时序数据库监控系统
京东万台规模Hadoop集群 | 分布式资源管理与作业调度
为了增加生产效率和节约成本，必须要将之前分散在各处的集群资源统一管理起来，组成一个超大集群对外提供服务，并且要让各种并行框架可以利用它的存储和计算资源进行业务处理。

2018-07-17 15:05:34

京东Hadoop集群分布式资源管理
分布式之抉择分布式锁——多个方位比较
无论是redis还是zookpeer，其实可靠性都存在一点问题。但是，zookpeer的分布式锁的可靠性比redis强太多!但是,zookpeer读写性能不如redis,存在着性能瓶颈。大家在生产上使用，可自行进行评估使用。

2018-07-17 08:14:22

分布式分布式锁方位
Ceph运维告诉你：如何驾驭开源分布式存储？
我觉得这是一件很幸运的事，让我有机会体验另一种大型分布式存储解决方案。因此我可以对比出 HDFS 与 Ceph 这两种几乎完全不同的存储系统分别有哪些优缺点、适合哪些场景。

2018-07-16 09:00:06

Ceph运维开源
必须理解的分布式系统中雷同集群技术及原理
分布在不同区域的计算机，彼此之间通过网络建立通信，相互协作作为一个整体对外提供服务，这就是集群，如果我们开发的系统具备这样的能力，那么理论上就具备无限横向扩容的能力，系统的吞吐量就会随着机器数增加而增长，那么未来当系统出现高负载的时候，就可以很好地应对这种情况。

2018-07-16 08:39:18

分布式系统集群
如何利用redis来进行分布式集群系统的限流设计
在很多高并发请求的情况下，我们经常需要对系统进行限流，而且需要对应用集群进行全局的限流，那么我们如何类实现呢。

2018-07-16 08:29:54

redis集群限流
阿里云升级金融级分布式架构解决方案 助力南京银行核心系统云化升级
7月11日晚间消息，阿里云宣布升级金融级分布式架构解决方案，为金融机构提供互联网时代背景下，通往数字化转型升级的技术动能。

2018-07-12 16:01:41

阿里云金融分布式
一文详解：如何设计出高可用的分布式架构？
在分布式架构中，SOA 和微服务架构是最常见的两种分布式架构，而且目前服务网格的概念也越来越火了，我们就先从这些常见的架构开始。

2018-07-11 09:34:55

分布式架构高可用
华为云支招基于云场景设计高性能分布式数据库
7月6日，2018 ArchSummit 全球架构师峰会在深圳拉开序幕。这场邀请了百余位国内外技术专家作演讲嘉宾的技术会议，向来自各行各业的高端技术管理者、架构师展示了先进技术在行业中的最佳实践，以及技术在企业转型发展中的推动作用。

2018-07-09 10:59:49

华为云
Hadoop分布式文件系统-从RAID说起
大数据技术主要要解决的问题的是大规模数据的计算处理问题，那么首先要解决的就是大规模数据的存储问题。大规模数据存储要解决的核心问题有三个方面：

2018-07-06 09:16:22

HadoopRAID文件系统
分布式记账不全是区块链 不可混为一谈
区块链技术是分布式账本技术的一种形式，并非所有的分布式记账技术都采用区块链技术，二者不可混为一谈。

2018-07-04 06:18:07

分布式记账区块链数字货币
手把手教你构建一个高性能、高可用的大型分布式网站
本文是学习大型分布式网站架构的技术总结，对构建一个高性能、高可用、可伸缩及可扩展的分布式网站进行了概要性描述，并给出一个架构参考。

2018-07-02 08:25:14

高性能高可用网站
一分钟理解分布式和集群
简单来说：分布式是一个抽象概念，集群是具体实现。一个集群系统一定是分布式的，而分布式未必是集群(比如互联网是分布式系统，但是它不是集群)。

2018-06-28 14:00:01

分布式集群架构
Ceph运维告诉你分布式存储的那些“坑”
过去两年，我的主要工作都在Hadoop这个技术栈中，而最近有幸接触到了Ceph。我觉得这是一件很幸运的事，让我有机会体验另一种大型分布式存储解决方案，可以对比出HDFS与Ceph这两种几乎完全不同的存储系统分别有哪些优缺点、适合哪些场景。

2018-06-28 08:18:56

Ceph运维存储
分布式之Redis数据库复习精讲
博主的《分布式之消息队列复习精讲》得到了大家的好评，内心诚惶诚恐，想着再出一篇关于复习精讲的文章。但是还是要说明一下，复习精讲的文章偏面试准备，真正在开发过程中，还是脚踏实地，一步一个脚印，不要投机取巧。

2018-06-26 18:10:43

分布式Redis数据库
虚拟化和分布式：云储存的手段与未来趋势
网络之于云存储是重要的，但其只是存储虚拟化的一个功能。存储虚拟化可以在系统架构的各个层实现，而在网络层可以做到横跨异构磁盘阵列，相当于在数据中心内部构建了一个大型的资源池。

2018-06-26 10:41:19

CIO云储存虚拟化
【专题】挨踢部落坐诊第十七期：分布式事务处理及前后端分离部署问题 原创
挨踢部落是为核心开发者提供深度技术交流，解决开发需求，资源共享的服务社群。基于此社群，我们邀请了业界技术大咖对开发需求进行一对一突破，解除开发过程中的绊脚石。以最专业、最高效的答复为开发者解决开发难题。

2018-06-25 14:58:54

技术坐诊
蚂蚁技术专家：一篇文章带你学习分布式事务
分布式事务是企业集成中的一个技术难点，也是每一个分布式系统架构中都会涉及到的一个东西，特别是在这几年越来越火的微服务架构中，几乎可以说是无法避免，本文就围绕分布式事务各方面与大家进行介绍。

2018-06-25 10:10:11

分布式事务Transaction
虚拟化和分布式：云储存的手段与未来趋势
将存储资源虚拟化的概念由来已久。起初，云存储是为了解决存储的低成本、可扩展和资源池化，从而实现所谓的按需所取，涉及的技术不仅有虚拟化、分布式，还有网络与负载均衡等等。

2018-06-25 09:30:14

虚拟化分布式云储存
挨踢部落坐诊第十七期：分布式事务处理及前后端分离部署问题 原创
挨踢部落是为核心开发者提供深度技术交流，解决开发需求，资源共享的服务社群。基于此社群，我们邀请了业界技术大咖对开发需求进行一对一突破，解除开发过程中的绊脚石。以最专业、最高效的答复为开发者解决开发难题。

2018-06-22 16:12:53

技术坐诊
分布式系统知识分享：正确理解CAP定理
CAP的理解我也看了很多书籍，也看了不少同行的博文，基本每个人的理解都不一样，而布鲁尔教授得定义又太过的简单，没有具体描述和场景案例分析。因此自己参考部分资料梳理了一篇与大家互相分享一下。

2018-06-20 10:42:47

分布式系统CAP
从构建分布式秒杀系统聊聊限流特技
俗话说的好，冰冻三尺非一日之寒，滴水穿石非一日之功，罗马也不是一天就建成的。两周前秒杀案例初步成型，分享到了中国最大的同×××友网站-码云。同时也收到了不少小伙伴的建议和投诉。我从不认为分布式、集群、秒杀这些就应该是大厂的专利，在互联网的今天无论什么时候都要时刻武装自己，只有这样，也许你的春天就在明天。

2018-06-19 09:35:51

分布式系统限流
上一页 1 ··· 1415161718 ··· 28
点赞

51CTO技术栈公众号

业务
速览
在线客服