BRPC与UCX集成指南

• 语言: 中文（简体）
• 格式: .pdf
• 来源: github.com/opencurve

摘要

文档详细介绍了如何通过集成UCX到BRPC来实现对RDMA（远程直接内存访问）的支持。主要修改包括在EndPoint类中增加字段以识别连接类型（TCP、UCP、UNIX），以及在ChannelOptions中添加使用UCX的选项。文档还描述了BRPC的架构、UCX的协议和传输层，以及集成后的性能提升和测试结果。UCX提供了对多种传输协议的支持，并具有完善的配置和性能测试工具，能够满足对RDMA的需求。

AI总结

《BRPC与UCX集成指南》总结如下：

1. **BRPC简介**
- BRPC是Curve的基础通讯框架，支持远程过程调用（RPC）。
- 特性：
- C++实现
- 支持TCP传输和bthread协程（减少内核上下文切换，优化缓存命中率）。
- 多协议支持，包括baidu_std、HTTP、gRPC、protobuf等。

2. **EndPoint修改**
- 原始的EndPoint类默认仅支持TCP，为支持UCX，需新增字段标识连接类型（TCP、UCP、UNIX）。
- UCP地址仍使用TCP地址格式。
- 修改后的EndPoint类支持通过构造函数指定连接类型。

3. **ChannelOptions修改**
- 在ChannelOptions中新增字段`use_ucp`，用于指定是否使用UCX传输。

4. **Server开启UCX连接**
- BRPC的Server类支持通过以下方式指定开启UCX连接：
- `Start(const char* ip_port_str, const ServerOptions* opt)`
- `Start(const bufil::EndPoint& ip_port, const ServerOptions* opt)`
- `Start(int port, const ServerOptions* opt)`
- `Start(const char* ip_str, PortRange range, const ServerOptions* opt)`

5. **UCX实现BRPC对RDMA的支持**
- UCP（Unified Communication Protocol）支持：
- RDMA、TCP、共享内存等多种传输协议。
- 支持多链路传输（如多网卡bond）。
- 提供性能测试工具和完善的配置功能（如`ucx_info`用于配置信息输出）。
- UCT（Unified Communication Technology）提供低层次传输接口，支持硬件加速的RMA（远程内存访问）、原子操作等。

6. **现状与优势**
- BRPC与UCX集成已在GitHub开源分支（`https://github.com/opencurve/incubator-brpc.git`）实现，目前处于测试阶段。
- 该集成降低了开发难度，且通过Curve验证，性能表现良好。
- UCX满足了BRPC对RDMA支持的需求，提供了高效的通信能力。

7. **架构与应用场景**
- 支持多种分布式计算框架（如MPICH、Open-MPI、OpenSHMEM等）。
- 支持多种通信协议（如InfiniBand的VERBs驱动、Cuda硬件直连、SYSV、POSIX等）。

总结：BRPC通过集成UCX实现了对RDMA的支持，提升了性能和扩展性，同时保持了与现有功能的兼容性。