分布式存储概览：Ceph / Longhorn / Rook

graph LR
    subgraph 单机存储
        S1[一块盘 SSD] --> F1[盘坏 = 数据丢]
    end
    subgraph 单机RAID
        R1[RAID 5/6 多盘] --> F2[整机挂 = 数据不可用]
    end
    subgraph NFS
        N1[一台 NFS server] --> F3[server 挂 = 所有客户端挂]
    end
    subgraph 分布式
        D1[N 台机器] --> D2[副本/EC]
        D2 --> F4[单点挂 = 自动重建<br>性能近线性扩展]
    end

    style F1 fill:#ffe1e1
    style F2 fill:#ffe1e1
    style F3 fill:#ffe1e1
    style F4 fill:#e1ffe1

mindmap
  root((分布式存储))
    传统方案
      Ceph
        RBD 块
        CephFS 文件
        RGW 对象
      GlusterFS
      MooseFS
    云原生方案
      Longhorn
        简单
        块存储
        K8s 原生
      OpenEBS
        多种引擎
        cStor/Mayastor/Jiva
      Portworx
        商业
        企业级
    对象存储
      MinIO
        S3 兼容
        自建
      Ceph RGW
      MooseFS
    K8s 编排
      Rook
        把 Ceph 装进 K8s
      Longhorn
        本身就 K8s 原生

graph TB
    subgraph 客户端
        K8sPod["K8s pod"]
        S3Client["S3 客户端"]
        CephFSClient["CephFS 客户端"]
    end

    subgraph Ceph核心
        MON["MON<br>(Monitor)<br>集群状态 / map"]
        MGR["MGR<br>(Manager)<br>web UI / metrics"]
        OSD1["OSD 1<br>(实际存储)<br>盘 + 进程"]
        OSD2["OSD 2"]
        OSD3["OSD 3"]
        MDS["MDS<br>(metadata server)<br>CephFS 用"]
        RGW["RGW<br>(S3 网关)"]
    end

    K8sPod -->|RBD<br>(块)| OSD1
    K8sPod -->|RBD| OSD2
    CephFSClient --> MDS
    MDS --> OSD1
    S3Client --> RGW
    RGW --> OSD3

    style Ceph核心 fill:#e1f5ff

graph TB
    subgraph LonghornNode1[节点 m1]
        E1["Engine<br>(per volume)"]
        R1["Replica 1<br>本地数据"]
    end
    subgraph LonghornNode2[节点 m2]
        R2["Replica 2"]
    end
    subgraph LonghornNode3[节点 m3]
        R3["Replica 3"]
    end

    Pod[Pod] -->|iSCSI| E1
    E1 -->|同步写| R1
    E1 -->|同步写| R2
    E1 -->|同步写| R3

    style Pod fill:#e1f5ff

graph LR
    Pod[Pod] -->|NVMe-oF| Mayastor[Mayastor Engine]
    Mayastor -->|本地 NVMe| Disk1[本地 NVMe SSD]
    Mayastor -->|网络 NVMe| Disk2[远程 NVMe]

    style Mayastor fill:#fff4e1

flowchart TD
    Start[需要存储] --> Q1{云上 / 自建?}
    Q1 -->|云上| Q2{要不要 RWX?}
    Q2 -->|RWO 够| C1["云盘 (EBS / SSD)"]
    Q2 -->|RWX| C2["云 NAS (EFS / NAS)"]
    Q2 -->|大对象| C3["云 OSS (S3 / OSS)"]

    Q1 -->|自建| Q3{规模?}
    Q3 -->|小 < 50 节点| L1[Longhorn]
    Q3 -->|中 < 200 节点| Q4{有专门团队?}
    Q4 -->|是| C4[Rook+Ceph]
    Q4 -->|否| L2[Longhorn 或者 NFS]
    Q3 -->|大 200+ 节点| C5[Rook+Ceph 或 商业方案]

    Q3 -->|要极致性能| M1[Mayastor / OpenEBS]
    Q3 -->|要对象存储| MI[MinIO]