Curve核心组件之Client - 网易数帆

• 语言: JavaScript
• 格式: .pdf
• 来源: github.com/opencurve

摘要

文档介绍了网易数帆的CURVE核心组件Client，包括其总体架构和功能。CURVE是一个高性能、高可用、高可靠的分布式存储系统，支持块存储、对象存储、云原生数据库等场景，并已成功对接OpenStack和Kubernetes。Client负责与元数据节点MDS和数据节点Chunkserver通信，处理数据增删改查、元数据获取及缓存等功能。文档还提到CURVE的高可用性设计，如RAFT协议的使用，以及性能优化措施如热升级和NEBD优化。CURVE已在网易内部稳定运行400多天，并已开源。

AI总结

《Curve核心组件之Client - 网易数帆》文档总结

Curve是一款高性能、高可用、高可靠的分布式存储系统，具备低延迟存储特性，广泛适用于块存储、对象存储、云原生数据库等场景，并已成功对接OpenStack和 Kubernetes（k8s）。该系统在网易内部线上环境中稳定运行已超过400天，现已开源。

### 1. Curve核心架构
Curve的核心架构包括三大组件：
- **MDS（元数据节点）**：负责元数据的管理、存储及集群状态感知与调度。
- **Chunkserver（数据节点）**：承担数据存储任务，采用Raft协议实现副本一致性。
- **Client**：提供数据和元数据的增删改查操作，并支持快照克隆功能。

### 2. Client组件与功能
Client作为用户接入Curve的入口，主要功能包括：
- 提供数据面接口（如AioWrite/AioRead）和控制面接口（如Create/Delete）。
- 实现IO处理（转换、拆分、合并）、元数据获取及缓存功能。
- 支持逻辑_chunk与物理_chunk的映射关系管理。
- 支持Failover功能，确保系统的高可用性。
- 通过Cache机制优化元数据访问效率。

### 3. Client的关键组件
Client内置多个关键模块，各司其职：
- **FileManager**：记录已挂载的卷信息。
- **FileInstance**：管理单个挂载卷的 生命周期。
- **LeaseExecutor**：定期与MDS通信，更新元数据信息。
- **IOTracker/Splitter**：跟踪和拆分IO请求。
- **ChunkClient/CliClient**：与Chunkserver交互，管理数据读写及复制组（copyset）leader信息。
- **MetaCache**：提供元数据缓存服务，提升访问效率。

### 4. NEBD性能优化与热升级
NEBD作为Curve与上层应用的重要桥梁，支持热升级：
- **热升级特性**：可在1-5秒内恢复IO，不影响业务using：
- **架构优化**：NEBD Server负责请求转发，支持版本升级时的平滑切换。

### 5. 开源与扩展性
Curve已开源，代码托管于GitHub平台：
- 主页地址：https://opencurve.github.io/
- 代码仓库：https://github.com/opencurve/curve
- CSI插件开源地址：https://github.com/opencurve/curve-csi

Curve凭借其高性能、灵活性和稳定性，成为云原生存储场景的理想选择。