Curve设计要点

• 语言: zh-cn
• 格式: .pdf
• 来源: github.com/opencurve

摘要

文档主要介绍了Curve的设计要点，包括背景、总体设计、系统特性和近期规划。背景部分提到由于现有存储软件如SDFS、NEFS、NBS和Ceph无法满足高性能和延迟敏感场景的需求，且在异常场景下存在较大抖动，因此决定从0到1开发Curve。总体设计包括基本架构、数据组织形式、拓扑和IO流程。系统特性强调高性能、高可用、自治、易运维和高质量。近期规划重点优化性能，如满足数据库性能要求和优化大IO吞吐量，同时计划进行开源技术分享和开发人员线上讨论会。

AI总结

《Curve设计要点》总结如下：

**背景**
现有存储软件（如SDFS、NEFS、NBS、Ceph）在性能、延迟敏感场景及异常处理上表现不足，尤其在集群不均衡时需人工运维。因此，选择从0到1开发Curve，以满足高性能、低延迟、高可用等需求。

**总体设计**
1. **基本架构**
- 元数据节点（MDS）：管理元数据，收集集群状态，自动调度。
- Chunkserver：存储数据块，处理数据存储和读取。
- Client：发起请求，与Chunkserver交互，完成数据操作。

2. **数据组织形式**
- 数据按块组织，支持高效读写和扩展。

3. **拓扑结构**
- 分层设计，元数据节点与数据节点分离，确保高可用性和负载均衡。

4. **IO流程**
- Client发起请求 → Chunkserver处理数据 → 返回结果给Client → Client通知用户请求完成。

**系统特性**
1. **高性能**
- 单卷4K随机读写IOPS和延迟优于Ceph（测试环境：6台服务器*20块SATA SSD，E5-2660 v4，256G，3副本场景）。

2. **高可用**
- 支持副本机制和自动故障恢复。

3. **自治**
- 元数据节点自动调度资源，减少人工干预。

4. **易运维**
- 简化运维流程，降低集群管理复杂性。

5. **高质量**
- 代码规范，测试覆盖率高，注重性能优化和稳定性。

**近期规划**
1. **性能优化**
- 优化大IO吞吐能力，满足数据库性能需求。
- 提升多raft集群性能。

2. **开源分享**
- 发布技术分享内容，组织线上讨论会，鼓励开发者参与项目。

**开源信息**
- GitHub主页：https://opencurve.github.io/
- 代码仓库：https://github.com/opencurve/curve
- 系列讲座：https://space.bilibili.com/700847536/channel/detail?cid=153949

Curve项目旨在打造高性能、高可用的分布式存储系统，欢迎参与开发与讨论！