> For the complete documentation index, see [llms.txt](https://docs.verge.io/llms.txt). Markdown versions of documentation pages are available by appending `.md` to page URLs; this page is available as [Markdown](https://docs.verge.io/learn-the-platform/zh/mo-kuai-1-jia-gou-ji-chu/03-vsan-vergefs.md).

# vSAN / VergeFS：软件定义存储

了解 VergeOS vSAN（VergeFS）如何通过分层架构、基于哈希的数据分布和自愈冗余提供分布式软件定义存储。

## 什么是 vSAN / VergeFS？

**vSAN** （虚拟存储区域网络），也称为 **VergeFS**，是内置于每个 VergeOS 部署中的软件定义分布式存储系统。它将所有参与存储的节点上的物理（或虚拟）驱动器汇集到一个供整个系统共享的存储资源池中。

无需外部 SAN、NAS 或第三方存储软件。vSAN 直接集成在 VergeOS 平台中，并在块级运行，为所有虚拟机磁盘、快照、ISO 映像和系统元数据提供存储。

主要特性：

* **块级架构** — 虚拟机磁盘划分为多个块，每个块都由可按内容寻址的哈希值标识
* **跨节点分布** — 数据块分布在集群中所有参与存储的节点上
* **分层存储** — Tier 0 专用于 vSAN 元数据；Tier 1–5 是工作负载存储层，可根据工作负载需求匹配介质类型
* **内联重复数据删除** — 基于哈希的数据块标识可在所有层中自动执行重复数据删除
* **自我修复** — 自动检测故障并切换到冗余副本。重建由操作员发起（使用热备盘或更换硬件）；随后通过 Journal Walks 从冗余副本重新复制缺失的数据块。自我修复在已配置的冗余级别（N+1 或 N+2）内运行；若故障超出冗余能力（例如，同时丢失的节点数超过系统可容忍的数量），修复可能会停滞，需要人工干预并联系支持团队

{% hint style="info" %}
**VMware 对比**

从 vSAN 的缓存 + 容量模型和按虚拟机配置存储策略迁移而来？VergeFS 使用 5 个工作负载层（T1–T5）和 1 个元数据层（Tier 0），默认在所有层执行内联重复数据删除，采用全系统统一的冗余设置（N+1/N+2），并支持 HCI 和 UCI 部署。压缩仅适用于站点同步复制，不适用于静态数据。
{% endhint %}

{% hint style="info" %}
**Nutanix 对比**

从 Nutanix DSF 及其每节点部署一个 CVM 的架构迁移而来？VergeFS 作为集成式操作系统服务运行，无需单独的 CVM，也不会占用每个节点的 CPU/RAM。它使用 5 个工作负载层（T1–T5）和 1 个元数据层（Tier 0），不自动迁移冷热数据，采用全系统统一的 N+1/N+2 冗余设置，始终启用内联重复数据删除，并支持 HCI 和 UCI 部署。
{% endhint %}

## 分层系统

VergeOS vSAN 将驱动器划分为 **层** ，编号为 0 到 5。每一层都针对不同类型的存储介质和工作负载特征进行设计。安装期间，每个物理驱动器都会分配到特定层，该分配决定了系统如何使用该驱动器。

### Tier 0：元数据

* **硬件**：企业级 SSD（NVMe 或 SAS）
* **用途**：仅用于存储 vSAN 文件系统索引和内部元数据
* **关键要求**：Tier 0 仅部署在控制器节点上——N+1 配置为节点 1–2，N+2 配置为节点 1–3
* **最佳实践**：使用耐久度至少为 1 DWPD（每日整盘写入次数）的企业级 SSD（NVMe 或 SAS）。在 3 DWPD 条件下，每 1 TB 可用 Tier 1–5 容量对应的 Tier 0 基准可用容量约为 5 GB。等效的容量和耐久度配置是在 1 DWPD 条件下每 1 TB 配置 15 GB。Tier 0 至少应保留 30% 的可用空间。

### Tier 1–5：工作负载数据

| 层级         | 硬件            | 用途        | 典型用例             |
| ---------- | ------------- | --------- | ---------------- |
| **Tier 1** | 高耐久度 NVMe SSD | 写入密集型工作负载 | 高性能数据库、事务日志      |
| **Tier 2** | 中端 SSD        | 读写均衡型工作负载 | 通用型虚拟机、混合应用、开发环境 |
| **Tier 3** | 读取优化型 SSD     | 读取密集型工作负载 | 内容分发、应用程序仓库、参考数据 |
| **第 4 层**  | 大容量 HDD       | 访问频率较低的数据 | 文件服务器、备份目标       |
| **第 5 层**  | 归档级 HDD       | 冷存储和长期保留  | 合规性归档、备份归档       |

并非每种部署都会使用全部五个工作负载层级。常见的生产配置可能只使用第 1 层（适用于对性能敏感的工作负载的 NVMe）和第 4 层（用于大容量存储的 HDD）。Terraform playground 仅使用第 0 层和第 1 层。

```mermaid
graph LR
    subgraph "vSAN 分层架构"
        T0["第 0 层<br/>元数据<br/>NVMe"]
        T1["第 1 层<br/>高性能<br/>NVMe SSD"]
        T2["第 2 层<br/>混合工作负载<br/>SSD"]
        T3["第 3 层<br/>读取优化<br/>SSD"]
        T4["第 4 层<br/>大容量<br/>HDD"]
        T5["第 5 层<br/>归档<br/>HDD"]
    end

    T0 -.->|"哈希映射<br/>查找"| T1
    T0 -.->|"哈希映射<br/>查找"| T2
    T0 -.->|"哈希映射<br/>查找"| T3
    T0 -.->|"哈希映射<br/>查找"| T4
    T0 -.->|"哈希映射<br/>查找"| T5

    style T0 fill:#e3f2fd,stroke:#1565c0
    style T1 fill:#e8f5e9,stroke:#2e7d32
    style T2 fill:#e8f5e9,stroke:#2e7d32
    style T3 fill:#fff3e0,stroke:#e65100
    style T4 fill:#fce4ec,stroke:#c62828
    style T5 fill:#f3e5f5,stroke:#6a1b9a
```

{% hint style="info" %}
**VMware 对比**

VMware vSAN 采用缓存层和容量层，并使用按虚拟机设置的存储策略（可容忍故障数、条带宽度、纠删码）。VergeOS 使用 6 个明确的层级，不采用按虚拟机设置的策略——在磁盘配置时选择层级，冗余（N+1/N+2）则在系统范围内统一设置。
{% endhint %}

{% hint style="info" %}
**Nutanix 对比**

Nutanix AOS 将数据组织到存储池中的存储容器，并使用智能分层引擎（ILM），根据访问模式在 SSD 和 HDD 之间移动数据块。VergeOS 不会在层级之间移动数据——驱动器在安装时分配，数据写入后便保留在原处；作为交换，用户可以明确指定数据位置，并获得可预测的性能。
{% endhint %}

## 数据如何分布

vSAN 使用 **基于哈希的分布算法** 将数据块分散到集群中的所有节点。其工作原理如下：

### 数据块的创建与哈希处理

1. 虚拟机写入数据时，vSAN 会将写入内容拆分为 **数据块**
2. 每个数据块都会分配一个 **内容寻址哈希值** 作为其唯一标识符
3. 哈希值既决定数据块的存储位置，也支持重复数据删除——如果两个数据块生成相同的哈希值，则只存储一份副本

### 跨节点分布

数据块会分布在集群中的多个节点上，而非存储在单个节点中。这种设计具有以下优势：

* **性能均衡** — I/O 负载分散到所有参与存储的节点
* **容错能力** — 任何单个节点都不会持有某个数据集的全部副本
* **高效扩展** — 添加节点会自动扩展存储池并触发重新平衡

```mermaid
graph TB
    VM["虚拟机写入操作"]
    VM --> HASH["块哈希<br/>(每个块的加密哈希)"]
    HASH --> DIST["基于哈希的分布"]
    DIST --> N1["节点 1<br/>主副本：块 A、C<br/>冗余副本：块 B"]
    DIST --> N2["节点 2<br/>主副本：块 B<br/>冗余副本：块 A、C"]
    DIST --> N3["节点 3<br/>主副本：块 D<br/>冗余副本：块 E"]
    DIST --> N4["节点 4<br/>主副本：块 E<br/>冗余副本：块 D"]

    style VM fill:#e3f2fd,stroke:#1565c0
    style HASH fill:#fff3e0,stroke:#e65100
    style DIST fill:#e8f5e9,stroke:#2e7d32
```

### 读写路径

**读取：**

* 系统通过 0 层哈希映射查找块的位置
* 读取时优先使用 **主副本** 以提高效率
* 如果虚拟机与某个冗余副本位于同一节点上，vSAN 会读取 **本地副本** 以尽量减少网络流量
* 如果主副本速度缓慢或无响应，vSAN 会自动切换到冗余副本

**写入：**

* 新块经过哈希处理后，会放置在最合适的节点上
* 主副本和 **冗余副本** 会同时写入
* 确认两个副本均已写入后，才会确认写入操作
* 系统会更新 0 层元数据，以跟踪新块的位置

## 冗余与自我修复

vSAN 会为每个数据块维护多个副本，以防范硬件故障。冗余级别（也称为 **复制因子 (RF)** ）在系统级别配置，并应用于每个层级。RF 表示保留的副本数量： **RF2** (N+1) 保留 2 个副本， **RF3** (N+2) 保留 3 个副本。

### 冗余级别

| 特性             | N+1 (RF2) — 默认 | N+2 (RF3) |
| -------------- | -------------- | --------- |
| **数据副本数**      | 2              | 3         |
| **可容忍的同时故障数**  | 1 个节点          | 2 个节点     |
| **控制器节点最少数量**  | 2              | 3         |
| **建议节点数**      | 3              | 5         |
| **存储开销** (去重前) | \~2×           | 约 3 倍     |

* **N+1（RF2）** 是默认设置，适用于大多数生产环境
* **N+2（RF3）** 适用于超关键工作负载或硬件更换缓慢的远程站点
* 冗余级别通常在安装期间设置，并应用于整个系统
* 故障只会影响故障驱动器所在的层级，其他层级仍可正常运行

### 自我修复流程

节点或驱动器发生故障时，vSAN 会自动切换到冗余副本——虚拟机持续运行，不会停机，但受影响的层级会以较低的冗余度运行。恢复完整冗余需要操作员介入：要么针对指定的热备盘启动修复，要么更换故障驱动器（或节点），然后从此处开始重建：

```mermaid
flowchart LR
    A["检测到驱动器或节点<br/>故障"] --> B["切换到<br/>冗余副本"]
    B --> C["虚拟机继续<br/>运行（无停机）"]
    B --> D["层级以较低的<br/>冗余度运行"]
    D --> E{"操作员采取措施"}
    E -->|"在热备盘上<br/>启动修复"| F["开始重建"]
    E -->|"更换故障<br/>驱动器或节点"| F
    F --> G["恢复完整<br/>冗余"]

    style A fill:#fce4ec,stroke:#c62828
    style C fill:#e8f5e9,stroke:#2e7d32
    style D fill:#fff3e0,stroke:#e65100
    style G fill:#e8f5e9,stroke:#2e7d32
```

1. **检测** — vSAN 会自动检测驱动器或节点故障；拓扑变化会触发 **完整日志遍历** ，重新验证受影响层级的冗余状态
2. **故障切换** — 读写操作会重定向到冗余副本，虚拟机不会停机
3. **冗余度降低** — 在操作员介入之前，受影响的层级将无法维持完整冗余
4. **重建** — 操作员可以针对指定的热备盘启动修复，或更换故障驱动器/节点。随后，vSAN 会重新复制受影响的块，以恢复完整冗余

{% hint style="info" %}
**什么是日志遍历？**

“ **日志遍历** ”是 vSAN 在后台遍历存储层级的过程，用于重建块引用计数（这些计数从不持久化存储）、验证冗余状态并执行所需的修复。该过程有三种形式： **完整遍历** （由控制器启动或拓扑变化触发，例如驱动器/节点故障，或添加、移除节点）、 **混合遍历** （非活动控制器所在节点重启时执行），以及定期执行的 **差异遍历**。在 vSAN 层级信息板上， `working` 标志表示遍历正在进行， `Walk Progress` 显示其进度百分比。详见 [了解 vSAN 层级状态/日志遍历](https://docs.verge.io/knowledge-base/zh/storage-vsan/understanding-journal-walks-and-vsan-tier-status.md) ，获取完整说明。
{% endhint %}

{% hint style="info" %}
**VMware 对比**

如果您之前使用的是 vSAN 按虚拟机设置的存储策略（FTT、条带宽度）以及基于超时的自动重建机制：VergeOS 使用单一的全系统冗余设置（N+1 或 N+2），并在操作员采取措施后恢复冗余——针对热备盘启动修复，或更换故障硬件。
{% endhint %}

{% hint style="info" %}
**Nutanix 对比**

如果您之前使用的是 Nutanix 按容器设置的复制因子以及由 Curator 驱动的重新平衡机制：VergeOS 使用单一的全系统 N+1 或 N+2 设置，并在操作员采取措施后恢复冗余——针对热备盘启动修复，或更换故障硬件。
{% endhint %}

## 实际应用中的驱动器分配

在 VergeOS 安装过程中，每个物理驱动器都会分配到特定的 vSAN 层级。安装程序使用 `YC_DRIVE_LIST` 和 `YC_VSAN_TIER_LIST` 变量（在安装过程中以交互方式设置）将驱动器映射到相应层级。

### 分配规则

* **Tier 0 的放置**：Tier 0 仅位于控制器节点上——N+1 时为节点 1–2，N+2 时为节点 1–3
* 同一层级中的驱动器应具有相近的类型和性能特征
* 纵向扩展（添加驱动器）时，应在集群中的所有节点上添加 **数量相等的驱动器** ，以保持分布均衡
* 横向扩展（添加节点）时，新节点的硬件配置（CPU、内存、磁盘布局）应与现有集群匹配

### 示例：双节点 HCI 配置

在 Terraform playground 最简单的部署中，每个控制器节点包含：

| 驱动器          | 层级     | 用途                    |
| ------------ | ------ | --------------------- |
| 1× NVMe（小容量） | Tier 0 | 元数据——vSAN 哈希映射和文件系统索引 |
| 1× NVMe（大容量） | Tier 1 | 工作负载数据——VM 磁盘、快照、ISO  |

两个节点的驱动器都会加入同一个 vSAN 存储池。采用 N+1 冗余（默认设置）时，写入节点 1 上 Tier 1 的每个数据块都会在节点 2 上保存一个冗余副本，反之亦然。

## vSAN 的其他功能

### 内联重复数据删除

由于每个数据块都由其加密哈希值标识，vSAN 会自动检测重复数据块。如果两个 VM（或同一 VM 磁盘中的两个区域）写入相同的数据，则只会存储该数据块的一个副本。此操作以内联方式进行，即在写入路径中完成，无需单独运行重复数据删除任务或安排其执行时间。

### 加密

vSAN 支持 **静态 AES-256 加密**，可在初始安装期间进行配置。加密密钥可以存储在 USB 驱动器上（插入前两个控制器节点），也可以在启动时手动输入。所有层级中的所有数据都会以透明方式加密。

### 快照和克隆

vSAN 的块级架构支持 **节省空间的快照** ——快照记录的是某个时间点的哈希映射状态，而非复制数据块。克隆同样引用现有数据块，只有在数据发生分歧时才会占用额外空间。

## 要点总结

| 概念                 | 摘要                                                 |
| ------------------ | -------------------------------------------------- |
| **vSAN / VergeFS** | 内置分布式存储——无需外部 SAN/NAS                              |
| **Tier 0**         | 仅存储元数据（NVMe）。仅位于控制器节点上（N+1 时为节点 1–2，N+2 时为节点 1–3）。 |
| **Tier 1–5**       | 工作负载数据，涵盖从高性能 NVMe 到归档 HDD                         |
| **数据分布**           | 基于哈希，分布在所有存储节点上                                    |
| **冗余**             | N+1（2 个副本，默认）或 N+2（3 个副本）——按层级在全系统范围内实施            |
| **自我修复**           | 发生故障时自动故障转移；重建由操作员触发（使用热备盘或更换盘）                    |
| **重复数据删除**         | 以内联方式进行，基于哈希，并覆盖所有层级                               |
| **压缩**             | 非静态存储时加密——仅在站点同步复制期间                               |

## 后续步骤

现在您已了解 VergeOS 如何存储数据，接下来将介绍连接所有节点并承载 vSAN 复制流量的网络结构： [**核心网络结构与网络 →**](https://docs.verge.io/learn-the-platform/zh/mo-kuai-1-jia-gou-ji-chu/04-core-fabric.md)


---

# Agent Instructions
This documentation is published with GitBook. GitBook is the documentation platform designed so that both humans and AI agents can read, navigate, and reason over technical content effectively. Learn more at gitbook.com.

## Querying This Documentation
If you need additional information that is not directly available in this page, you can query the documentation by asking a question.

Perform an HTTP GET request on the following URL with the `ask` and `goal` query parameters:

```
GET https://docs.verge.io/learn-the-platform/zh/mo-kuai-1-jia-gou-ji-chu/03-vsan-vergefs.md?ask=<question>&goal=<user_goal>
```

`ask` is the immediate question: it should be specific, self-contained, and written in natural language.
`goal` is what the user is ultimately trying to achieve, the reason they need the answer. Sharing it helps GitBook give you a better, more relevant answer. A goal is most helpful when it describes the outcome the user wants rather than restating the question. For example, with `ask=how do I create an API token`, a goal like `automate deployments from our CI pipeline` lets GitBook tailor the answer to that use case.

The response will contain a direct answer to the question and relevant excerpts and sources from the documentation.

Use this mechanism when the answer is not explicitly present in the current page, you need clarification or additional context, or you want to retrieve related documentation sections.
