Remote Execution Caching Compiler (RECC)

• 语言: 英语
• 格式: .pdf
• 来源: github.com/CppCon

摘要

The document introduces the Remote Execution Caching Compiler (RECC), an open-source build tool designed to enhance compilation efficiency. RECC combines the functionalities of ccache and distcc, supporting remote linking and caching while being compatible with various compiler toolchains (e.g., GCC, Clang, Solaris CC) and operating systems (Linux, macOS, Solaris). It generates deterministic cache keys based on compiler commands, input Merkle trees, environment variables, and OS properties. RECC enables sandboxed execution for higher parallelism and is used extensively at Bloomberg, handling tens of millions of compiles daily with an 80% cache hit rate. It is integrated into all phases of the Software Development Lifecycle (SDLC) and outperforms traditional builds on small VMs.

AI总结

**文档总结：Remote Execution Caching Compiler (RECC)**

**1. 什么是RECC？**
RECC（Remote Execution Caching Compiler）是一个开源构建工具，旨在通过缓存和远程编译提升构建效率。它结合了`ccache`和`distcc`的功能，支持远程链接和缓存。RECC的设计目标是跨工具链和操作系统共享缓存，兼容多种编译器（如GCC、Clang、Solaris CC）以及多个操作系统（Linux、macOS、Solaris）。

**2. 核心功能：**
- **缓存与远程执行：** RECC支持本地或远程的沙盒化执行，提供更高的并行编译效率，优于传统的`-j $(nproc)`模式。
- **依赖树与缓存键：** 通过`clang-scan-deps`（或`gcc -M`、`CC -xM`）计算依赖树，生成包含输入文件校验和和环境变量的唯一缓存键，确保编译的可重复性和高效性。
- **分布式支持：** 可与Bazel支持的远程执行API服务器集成，支持单机代理（如BuildBox-CASD）或分布式服务器（如BuildGrid）。

**3. 实际效果：**
- **性能数据：** 在Bloomberg，RECC每天处理数千万次编译，缓存命中率高达80%。
- **应用场景：** 广泛应用于软件开发生命周期（SDLC）的各个阶段，包括远程编译、链接和小虚拟机上的构建，性能优于传统构建方式。
- **资源优化：** 在小虚拟机上表现优异，能够高效利用资源完成构建任务。

**4. 安装与使用：**
用户可通过Homebrew或Debian包管理器安装RECC，并通过提供的链接访问代码仓库和联系渠道获取支持。

**总结：**
RECC是一款高效、灵活的构建工具，通过缓存和分布式执行显著提升编译效率，适用于复杂的开发环境和大规模构建任务。其跨平台和跨工具链的支持使其成为现代开发流程中的重要工具。