一、什么是Rook:K8s 存储编排
Rook 是一个将分布式存储系统(Ceph、EdgeFS、MinIO、NFS、Cassandra、CockroachDB 等)转化为 Kubernetes 云原生服务的开源存储编排框架,基于 Kubernetes Operator 模式把存储集群的部署、扩容、升级、备份、恢复等运维操作抽象为自定义资源(CRD)。其最广泛使用的形态是 Rook-Ceph,把 Ceph 分布式块存储(RBD)、文件系统(CephFS)、对象存储(RGW)通过 Operator 完整集成到 K8s,并提供 CSI Driver、快照管理、拓扑感知与多集群复制能力。Rook 是 CNCF graduated 项目,是 K8s 上对接持久化存储的事实标准之一。

二、原理
1. Operator 模式:用 CRD 定义 CephCluster、StoragePool、ObjectStore 等存储域对象 → 2. 控制器循环:Rook Controller 监听 CRD 变更,调用 Ceph 命令行驱动底层 Ceph 集群部署与扩缩容 → 3. 节点与守护:在 K8s Node 上以 DaemonSet 形式部署 Ceph OSD / MON / MGR,调度到合适节点(拓扑感知) → 4. CSI 集成:Rook-Ceph CSI Driver 把 PVC 映射为 RBD / CephFS 卷,挂载到业务 Pod → 5. 快照与克隆:通过 CSI Snapshot 与 Volume Clone 提供数据快照与克隆能力 → 6. 自愈与升级:Operator 持续监控集群健康,自动替换故障 OSD、按 CR 配置滚动升级
三、信息卡片
| 中文名 | Rook |
| 英文名 | Rook |
| 缩写 | Rook |
| 别名 | Rook Operator、Rook 存储编排、CNCF Rook |
| 提出者 | SUSE(创始团队),后续由 Rook.io 社区主导 |
| 提出时间 | 2016 年(首次开源),2018 年加入 CNCF,2020 年成为 incubating 项目,2024 年成为 graduated 项目 |
| 所属类别 | IT 基础架构与开发 > 云原生存储 > K8s 存储编排 |
| 核心技术 | Kubernetes Operator 模式、CRD、Ceph 集成、CSI Driver、CSI Snapshot、拓扑感知调度 |
| 主要应用 | K8s 持久化存储、Ceph on K8s、块存储 / 文件存储 / 对象存储、边缘存储、备份与恢复 |
四、历史时间线
2016 年:SUSE 团队首次开源 Rook,作为 Ceph 编排的 K8s Operator 实验项目
- 2017-2018 年:Rook-Ceph 快速成熟,0.9/1.0 版本先后发布,逐步成为 Ceph on K8s 主流方案
- 2018 年:Rook 加入 CNCF,成为 Sandbox 项目
- 2019-2020 年:Rook 1.x 系列支持 CSI 快照、拓扑感知、OSD on PVC 等能力;成为 CNCF incubating 项目
- 2021-2023 年:Rook 1.10-1.13 引入 Ceph Reef/Squid 适配、多集群复制、EdgeFS / NFS / MinIO 等多存储后端
- 2024 年:Rook 升级为 CNCF graduated 项目,成为 K8s 持久化存储编排的事实标准
五、分类
按存储后端:Rook-Ceph / Rook-NFS / Rook-MinIO / Rook-Cassandra / Rook-CockroachDB / EdgeFS
- 按存储类型:块存储(RBD)、文件系统(CephFS)、对象存储(RGW)
- 按部署形态:单集群 Rook vs 多集群联邦(Rook 多集群复制)
- 按运维阶段:初始部署 / 扩容 / 升级 / 备份与恢复 / 故障自愈
- 按生态:CNCF Rook(编排)+ Ceph(存储)+ CSI Driver(接入)+ csi-snapshotter(快照)
六、应用场景
K8s 持久化存储:通过 Rook-Ceph 为 StatefulSet(数据库、消息队列)提供 RBD / CephFS 持久卷
- 统一存储平台:同一 Rook 集群同时提供块、文件、对象三种存储接口,简化存储架构
- 边缘与混合云存储:在边缘 K8s 集群上用 Rook 提供本地化持久存储
- 备份与灾难恢复:利用 CSI Snapshot 与 Velero 等工具实现数据快照与跨集群恢复
- 多租户对象存储:通过 Ceph RGW(S3 兼容)替代独立 MinIO 集群,统一对象存储底座
七、优缺点
- 优点:
- Operator 模式成熟:把 Ceph 复杂运维封装为 K8s 原生 API,与 kubectl 工作流一致
- 完整存储类型覆盖:块、文件、对象三种存储接口同时提供,统一存储底座
- CSI 与快照支持完善:原生支持 PV 动态供给、快照、克隆与拓扑感知
- CNCF graduated 保障:项目活跃度高,生态成熟,多家厂商商业支持
- 缺点:
- 运维门槛高:Ceph 本身复杂,Rook 虽简化但仍需理解 OSD / MON / MGR / PG 等概念
- 升级风险:底层 Ceph 与 Rook 版本强耦合,跨大版本升级需谨慎
- 资源开销:Ceph MON/MGR/OSD 本身占用较多 CPU/内存,小集群性价比不高
八、常见误区
Rook = Ceph(错:Rook 是编排框架,Ceph 是底层存储;Rook 也支持 MinIO、NFS、Cassandra 等后端)
- Rook 仅用于 K8s(错:Rook 通过 Operator 在 K8s 中运行,但底层 Ceph 集群仍可独立提供服务)
- 小集群不需要 Rook(错:小集群用 Rook 同样受益于声明式运维与 CSI 自动供给,但需评估资源开销)
九、关联概念
- 父概念:Kubernetes · 容器编排、Kubernetes Operator、云原生
- 子概念:Ceph分布式存储、Operator Pattern · Operator 模式、Kubernetes CRD、Kubernetes Operator
- 兄弟概念:Cilium、Envoy、Istio、ArgoCD
- 对比概念:Rook vs ArgoCD、Rook vs Kubernetes Operator、Rook vs 独立 Ceph
- 应用相关:Kubernetes · 容器编排、Kubernetes CRD、Operator Pattern · Operator 模式、云原生