51CTO首页
AI.x社区
博客
学堂
精品班
软考社区
免费课
企业培训
鸿蒙开发者社区
WOT技术大会
IT证书
公众号矩阵
移动端
短视频免费课程课程排行直播课软考学堂
全部课程厂商认证IT技术24年11月软考PMP项目管理免费题库
在线学习
文章资源问答课堂专栏直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO软考
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
51CTO软考题库
账号设置 退出

分布式

1378内容  
涵盖分布式相关研究热点、技术难点与应用场景。
文章 博文课程
共 1378 条
Longhorn，企业级云原生容器分布式存储 - 支持 ReadWriteMany (RWX) 工作负载
Longhorn 通过 NFSv4 服务器(share-manager)公开常规 Longhorn 卷，原生支持 RWX 工作负载。

2021-08-26 23:54:46

分布式存储负载
大数据之分布式协调神器：Zookeeper选举
分布式系统设计成主从节点主要是为了保障数据一致性，主从设计是一种最直观的数据一致性保障机制。

2021-08-26 08:03:30

大数据Zookeeper选举
万字长文说透分布式锁
“分布式锁”这个问题快被说烂了，奈何笔者实在没有找到一个满意的答案，故记录自己寻找答案、总结的过程。分布式锁的设计涉及了许多分布式系统相关的问题，许多地方值得推敲，非常有意思。

2021-08-26 05:02:50

分布式锁设计
Longhorn，企业级云原生容器分布式存储 - 高可用
数据局部性设置(data locality setting)旨在在以下情况下启用：只要有可能，至少应在与使用该卷的 pod 相同的节点上调度 Longhorn 卷的一个副本。我们将拥有本地副本的特性称为具有 data locality。

2021-08-26 00:23:14

分布式存储高可用
Longhorn，企业级云原生容器分布式存储之备份与恢复
Longhorn 提供了 allow-recurring-job-while-volume-detached 设置，即使卷已分离，您也可以进行周期性备份(recurring backup)。您可以在 Longhorn UI 中找到该设置。

2021-08-25 05:05:26

存储 备份恢复
HarmonyOS Sample 之 DistributedMusicPlayer分布式音乐播放器
本示例主要演示了如何通过迁移数据进行音乐的分布式播放。实现了音乐播放的跨设备迁移，包括：播放哪首歌曲、播放进度、以及播放状态的保持。

2021-08-24 15:13:06

鸿蒙HarmonyOS应用
Longhorn，企业级云原生容器分布式存储之监控
Longhorn 在 REST 端点 http://LONGHORN_MANAGER_IP:PORT/metrics 上以 Prometheus 文本格式原生公开指标。有关所有可用指标的说明，请参阅 Longhorn's metrics。

2021-08-24 05:02:34

云原生容器分布式
Web3.0时代区块链分布式存储的作用和影响
如何确保数据拥有足够存储空间，如何保障数据安全，提升传输速度无疑是重中之重。今天我们从全新视角讲述“Web3.0时代区块链分布式存储的价值和意义”。

2021-08-20 20:16:08

区块链Web3.0分布式存储
用鸿蒙的分布式助力七夕
如果升级了最新的B站服务卡片，那么当桌面上添加头像卡片时，只要点击头像，就会看到下图的效果。一个应用鸿蒙分布式能力的小功能。

2021-08-20 14:26:17

鸿蒙HarmonyOS应用
关基保护条例重磅发布 360呼吁构建国家级分布式安全大脑
三六零公司创始人、董事长周鸿祎表示，关基保护条例回应了国家对网络安全的重大关切，是我国数字经济的底线和红线，是提高我国网络安全防御水平的重要举措，是建设网络强国的战略部署。

2021-08-19 16:05:44

关基保护条例／安全大脑
Longhorn 云原生分布式块存储解决方案设计架构和概念
Longhorn 设计有两层：数据平面(data plane)和控制平面(control plane)。Longhorn Engine 是存储控制器对应数据平面，Longhorn Manager 对应控制平面。

2021-08-17 12:36:21

Longhorn云原生存储
解密万亿参数M6模型预训练背后的分布式框架Whale
M6是国内首个实现商业化落地的多模态大模型。M6拥有超越传统AI的认知和创造能力，擅长绘画、写作、问答，在电商、制造业、文学艺术等诸多领域拥有广泛应用前景。

2021-08-17 11:08:08

参数M6模型
Longhorn，Kubernetes 云原生分布式块存储
Longhorn 使用容器(containers)和微服务(microservices)实现分布式块存储。 Longhorn 为每个块设备卷(device volume)创建一个专用的存储控制器(storage controller)， 并跨存储在多个节点上的多个副本同步复制该卷。存储控制器(storage controller)和副本(replicas)本身是使用 Kubernetes 编排的。

2021-08-17 00:24:38

块存储云原生分布式
五分钟带你体验一把分布式事务！so easy！
分布式事务涉及到很多理论，如 CAP，BASE 等，很多小伙伴刚看到这些理论就被劝退了，所以我们今天不讲理论，咱们就看个 Demo，通过代码快速体验一把什么是分布式事务。

2021-08-16 15:40:04

分布式架构系统
HarmonyOS小游戏：吃豆豆---基于分布式数据库与分布式任务调度
本次学习笔记记录了吃豆豆的游戏实现，最近学习到的UI设置，页面跳转，分布式数据库，分布式任务调度等内容。作为我的第一个实践的项目，项目或多或少会有小问题和一些还没有解决的问题。

2021-08-16 09:55:41

鸿蒙HarmonyOS应用
基于跨设备迁移和分布式文件能力的DistributedMail解析
Distributed Server分布式版本主要服务于在各地设有分部的政府机构、大型集团公司以及百万用户级别的大型电子邮件运营商。

2021-08-13 13:53:23

鸿蒙HarmonyOS应用
AnalyticDB PostgreSQL 教你实现分布式一致性备份恢复
ADB PG 是采用MPP水平扩展架构的分布式数据库。ADB PG实例由一个或多个协调节点(Master)和多个计算节点(Compute Node)组成，协调节点负责接收用户请求，制定分布式执行计划并下发至计算节点，收集执行结果并返回给客户端；计算节点负责并行计算分析与数据存储。

2021-08-13 11:50:23

AnalyticDB 分布式数据库
博睿数据分布式手机真机监测+两大核心技术，轻松掌控短信服务质量与用户体验
2021年8月10日，博睿数据首次在业界倡导构建中立、客观、有效评估企业短信服务质量与用户体验体系的构想。通过Bonree Net短信网关监测产品，基于博睿数据的WAP会员能力，提供遍布全国各省市的10000+稳定在线的真机短信监测节点，以及智能化任务调度和深度数据识别采集两项核心技术，助力企业轻松掌控短信服务质量与用户体验。

2021-08-12 16:47:02

博睿数据短信监测
Ceph分布式存储系统优化分析
本文介绍了Ceph分布式存储系统的发展历史和特点，并从内部优化机制、面向硬件设备和应用场景这3个方面梳理了现有的性能优化方法。作为一个开源的统一存储系统，Ceph提供了高性能、高可扩展性和高可用的块、文件和对象存取功能。

2021-08-07 05:00:20

存储系统
瑞驰分布式存储为安徽广电护航
瑞驰集群存储并行模式让所有IO节点同时工作来提供性能，大幅度提高了存储系统性能，保障平台稳定运行。

2021-08-06 08:52:17

数字化
Springboot之分布式事务框架Seata实现原理源码分析
Spring Boot是由Pivotal团队提供的全新框架，其设计目的是用来简化新Spring应用的初始搭建以及开发过程。该框架使用了特定的方式来进行配置，从而使开发人员不再需要定义样板化的配置。

2021-08-06 08:33:27

Springboot分布式Seata
分布式系统咋做同步？虐死人！
分布式系统，通过数据冗余，来保证数据的安全。要写一个分布式系统，一道绕不过去的坎，那就是数据同步。

2021-08-04 20:37:29

分布式系统同步
七种分布式全局 ID 生成策略，你更爱哪种？
当数据库分库分表之后，原本的主键自增就不方便继续使用了，需要找到一个新的合适的方案，松哥的需求就是在这样的情况下提出的。

2021-08-04 10:38:51

分布式 ID策略
分布式存储系统可靠性：系统量化估算
们常常听到衡量分布式存储系统好坏的两个指标：可用性和可靠性指标。本文就重点来分析一下分布式系统的数据可靠性的量化模型。

2021-07-30 09:49:17

分布式架构系统
数据库为何又如何走向分布式？
数据库领域图灵奖获得者 Jim Gray 说过：“所有的存储系统最终都会演变成数据库系统。(All storage systems will eventually evolve to be database systems.)”

2021-07-30 06:58:28

数据库分布式映射
基于Redis的分布式锁和Redlock算法
在单进程的系统中，当存在多个线程可以同时改变某个变量(可变共享变量)时，就需要对变量或代码块做同步，使其在修改这种变量时能够线性执行消除并发修改变量。

2021-07-30 00:09:21

Redlock算法Redis
分布式协调框架Zookeeper核心设计理解与实战
想起很久以前在某个客户现场，微服务 B 突然无法调用到微服务 A，为了使服务尽快正常恢复，重启了微服务 B 。虽然故障原因找到了，但对于 Zookeeper 的理解还是不够深刻，于是重新学习了 Zookeeper 的核心设计，并记录于此文共勉。

2021-07-29 07:48:36

Zookeeper 核心设计
分布式系统的“脑裂”到底是个什么玩意？
目前大多数项目都在往分布式上发展，一旦系统采用分布式系统，便会引入更多复杂场景和解决方案。比如，当你在系统中使用了Elasticsearch、ZooKeeper集群时，你是否了解过集群的“脑裂”现象?又是否知道它们是如何解决脑裂问题的?

2021-07-29 06:56:36

分布式系统脑裂
分布式系统中的一致性模型
最近看到的一篇超棒的关于分布式系统中强一致性模型的blog，实在没有不分享的道理。最近比较闲，所以干脆把它翻译了，一是为了精读，二是为了更友好地分享。

2021-07-28 08:39:25

分布式架构系统
深度剖析：Redis分布式锁安全吗？
这篇文章，我们主要探讨了基于 Redis 实现的分布式锁，究竟是否安全这个问题。

2021-07-26 11:09:46

Redis分布式技术
HarmonyOS 分布式新闻分享
本篇Codelab中我们介绍了应用的主页面和详情页，在主页面可以通过顶部的新闻类型切换不同类别的新闻，同时下面整个新闻列表项也会跟随切换。

2021-07-23 08:57:32

鸿蒙HarmonyOS应用
HarmonyOS 分布式亲子教育
本篇Codelab通过一个亲子早教系统，完整的为您介绍了早教算数题和益智拼图游戏两个综合案例，旨在帮助您快速了解HarmonyOS应用开发、多屏互动、分布式跨设备协同的功能了解。

2021-07-22 10:20:21

鸿蒙HarmonyOS应用
八卦一下快手Bagua：突破TensorFlow、PyTorch并行瓶颈的分布式训练框架
近日，快手和苏黎世理工宣布开源分布式训练框架 Bagua（八卦），相比于 PyTorch、TensorFlow 等现有深度学习开源框架仅针对系统层面进行优化，Bagua 突破了这一点，专门针对分布式场景设计了特定的优化算法，实现了算法和系统层面的联合优化，性能较同类提升 60%。

2021-07-19 11:56:56

分布式训练框架
RocketMQ千锤百炼 哈啰在分布式消息治理和微服务治理中的实践
哈啰已进化为包括两轮出行(哈啰单车、哈啰助力车、哈啰电动车、小哈换电)、四轮出行(哈啰顺风车、全网叫车、哈啰打车)等的综合化移动出行平台，并向酒店、到店团购等众多本地生活化生态探索。

2021-07-16 13:11:10

分布式消息微服务
ZooKeeper 分布式锁 Curator 源码 05：分布式读写锁和联锁
Curator 同样支持分布式读写锁[1] 和联锁[2]，只需要使用 InterProcessReadWriteLock 即可，来一起看看它的源码以及实现方式。

2021-07-16 07:57:34

ZooKeeperCurator源码
西部数据着力构建创新存储架构，赋能分布式存储，加速Web 3.0落地 原创
西部数据不断为分布式存储领域提供先进的数据存储架构和解决方案。在未来，我们将持续助力客户降低部署和运维成本，并满足高效率、大容量及节能减排等多样化需求，加速Web 3.0落地，助力‘东数西算’算力网络建设。

2021-07-15 18:33:33

西部数据
Springboot整合百度开源分布式ID生成器UIDGenerator
UidGenerator是Java实现的, 基于Snowflake算法的唯一ID生成器。UidGenerator以组件形式工作在应用项目中, 支持自定义workerId位数和初始化策略, 从而适用于docker等虚拟化环境下实例自动重启、漂移等场景。

2021-07-14 07:17:37

Springboot分布式UIDGenerato
Springboot2.x AOP 实现缓存锁，分布式锁
本人深根后台系统多年的经验;用户在网络不好情况下; 在做表单提交时;会出现重复提交的情况;故而我们需要：做到防止表单重提。

2021-07-13 06:57:12

SpringbootAOP缓存
ZooKeeper 分布式锁 Curator 源码之三：可重入锁并发加锁
在了解了加锁和锁重入之后，最需要了解的还是在分布式场景下或者多线程并发加锁是如何处理的?

2021-07-10 10:02:30

ZooKeeperCurator并发
2021上半年：关于分布式云的那些事儿
随着数字化转型进入深水区，企业需求变得更加多样化，应用场景也随之变得愈发复杂，传统公有云的中心化架构已经难以满足用户需求，在这样背景下，业界提出了分布式云的概念。

2021-07-10 07:45:35

分布式云云计算数字化转型
ZooKeeper 分布式锁 Curator 源码之二：可重入锁重复加锁和锁释放
当锁需要释放的时候，只需要调用 lock.release() 进行释放即可，具体是如何释放的呢？

2021-07-09 06:48:31

ZooKeeperCurator源码
分布式部署那些事
提到分布式，一定就会涉及到集中式，相比于集中式，分布式说明存在很多个节点，各个节点彼此协同工作。

2021-07-09 05:49:53

分布式代码算法
ZooKeeper 分布式锁 Curator 源码 之一：可重入锁
一般工作中常用的分布式锁，就是基于 Redis 和 ZooKeeper，前面已经介绍完了 Redisson 锁相关的源码，下面一起看看基于 ZooKeeper 的锁。也就是 Curator 这个框架。

2021-07-08 09:21:17

ZooKeeper分布式锁 Curator
分布式事务如何解决？一次讲清楚！
事务指的就是一个操作单元，在这个操作单元中的所有操作最终要保持一致的行为，要么所有操作都成功，要么所有的操作都被撤销。简单地说，事务提供一种“要么什么都不做，要么做全套”机制。

2021-07-07 10:28:09

分布式架构系统
一篇带你了解什么是分布式ID
在分布式系统中，经常需要一些全局唯一的ID对数据、消息、http请求等进行唯一标识。那么这个全局唯一ID就叫分布式ID。

2021-07-07 07:14:48

分布式ID分布式系统
Redisson 分布式锁源码 11：Semaphore 和 CountDownLatch
Redisson 除了提供了分布式锁之外，还额外提供了同步组件，Semaphore 和 CountDownLatch。

2021-07-07 07:09:49

Redisson分布式锁源码
一文带你了解分布式系统中的真真假假
本文详细介绍了分布式系统中对真实的判断和处理，希望大家能有一个大概的了解。

2021-07-06 15:01:07

分布式架构系统
5 分钟搞懂高性能分布式消息系统 Kafka
kafka 由 LinkedIn 公司推出的一个高吞吐的分布式消息系统，通俗的说就是一个基于发布和订阅的消息队列。

2021-07-06 10:35:46

分布式KafkaLinux
Redisson 分布式锁源码 10：读写锁
Redisson 还支持可重入读写锁，允许在分布式场景下，同时有多个读锁和一个写锁处于加锁状态。

2021-07-06 08:37:29

Redisson分布式锁
Flink分布式程序的异常处理
Job与Flow之间的关系可以利用自定义的@JobFlow注解进行配置，如此就可以在执行抽象的AbstractJob的run()方法时，利用反射获得该Job下的所有Flow，遍历执行每个Flow的run()方法。

2021-07-05 09:28:11

Flink分布式程序
上一页 1 ··· 34567 ··· 28
点赞

51CTO技术栈公众号

业务
速览
在线客服