Distributed

前言 随着数据量的激增，存储系统在现代互联网架构中变得越来越重要。谷歌的Colossus是Google File System（GFS）后继的下一代分布式存储系统，旨在处理更加庞大、复杂的数据存储需求。Colossus不仅为谷歌提供更强大的存储解决方案，还为现代大规模数据存储技术树立了标杆。它是谷歌构建云计算平台和大数据处理架构的核心支柱之一。 ...

说明 本文限定在分布式系统不考虑拜占庭问题。即所有节点都是可信的。 定义 分布式系统是多个节点协作完全一个共同的业务。 重要性 分布式理论的重要性毋庸置疑，一句话总结：没有分布式理论，就没有现在互联网与云计算。在分布式系统实践过程中离不开分布式系统理论指导，对其重要性打个比方：分布式系统理论是分布式系统实践过程中地图与导航。 ...

前言 在现代互联网系统中，数据存储、管理与分发一直是关键技术之一。Google File System（GFS）是谷歌为满足其海量数据存储需求而设计的分布式文件系统。它支撑着谷歌的许多大规模应用，如搜索引擎、YouTube等，尤其适用于高吞吐量、大文件存储和海量数据处理。 ...

前言 在现代分布式系统中，多个节点并发处理数据的场景非常常见。如何判断两个事件的先后关系？如何检测冲突？这时我们需要一种比时间戳更精确的工具 —— Vector Clock（向量时钟）。 ...

前言 在现代分布式系统中，系统经常部署在多个地理位置、跨多个节点，网络延迟、故障和节点不一致成为常态。如何在这种复杂环境下权衡一致性与可用性？CAP 定理给出了明确的理论指导。 ...

前言 在分布式系统、文件传输、数据存储等场景中，数据在传输和存储过程中可能出现错误或损坏。为了确保数据的完整性和正确性，Checksum（校验和） 是一种常用且高效的手段，扮演着“数据防护罩”的角色。 ...

前言 在现代分布式系统、流处理引擎和日志系统中，数据的顺序性与进度控制至关重要。如何知道一个节点、消费者、或者整个系统**“处理到哪了”**？这就是 High-Water Mark（高水位线） 的核心意义。 ...

前言 CAP 定理揭示了分布式系统在「一致性（Consistency）」「可用性（Availability）」与「分区容忍性（Partition Tolerance）」之间的取舍。然而，现实系统中不仅要考虑网络分区，还要在正常情况下权衡延迟与一致性。为此，PACELC 定理应运而生，作为对 CAP 的自然扩展。 ...

前言 在分布式系统中，当主节点因故障被替换（Failover）后，如果原主节点恢复正常，系统是否、何时、以及如何让它重新承担主角色？这便是 Failback（故障恢复切回） 的核心问题。 ...

前言 在现代分布式系统中，高可用（High Availability） 是基本要求。而高可用的核心能力之一就是：当系统组件出现故障时，是否能自动切换到备份节点或副本继续提供服务。这个自动切换过程，正是“Failover”。 ...