开源fs 性能对比 可行性分析 方案对比 对比结论 架构设计 卷和文件系统 元数据架构 文件系统快照 方案一：文件/目录级别快照 方案二：文件系统快照 关键点 元数据设计 数据结构 索引设计 文件空间管理 开发计划及安排 背景 为更好的支持云原生的场景，Curve需要支持高性能通用文件系统，其中高性能主要是适配云原生数据库的场景。当前Curve是实现了块存储，向上提供块设备服 启动的时候根据 inode 和 dentry 分别建立对应的内存结构，再回放 wal 日志完成构建 卷的元数据管理 卷的元数据中需要包含建立在该卷之上的文件系统元数据分片的位置，以便进行元数据的索引 常见的元数据操作 Create 与 mds 交互获取 inode 和 dentry 的 copyset 位置 创建 inode© XXX Page 7 of 14 1. 3. 元数据设计 元数据设计分以下几个部分 inode 和 dentry 的数据结构（ inode 和 dentry 两个结构描述 还是 由一个dentry描述所有信息） inode 和 dentry 的索引设计（btree / skiplist / hashmap ?） 元数据的持久化（以 kv 的方式存入文件？存储 rocksdb ?） 元数据节点的高可用 元数据分片策略（哪些范围的元数据存储在哪些复制组上）

9 Curve支持S3 数据缓存方案© XXX Page 2 of 9 版本 时间 修改者 修改内容 1.0 2021/8/18 胡遥 初稿 背景 整体设计 元数据采用2层索引 对象名设计 读写缓存分离 缓存层级 对外接口 后台刷数据线程 本地磁盘缓存 关键数据结构 详细设计 Write流程 Read流程 ReleaseCache流程 Flush流程 FsSync流程 是顺序写和顺序 读，而对于随机写和随机读来说也会有一定性能提升，但效果可能不会太好。 元数据采用2层索引 由于chunk大小是固定的（默认64M），所以Inode中采用map s3ChunkInfoMap用于保存对象存储的位置信息。采用2级索引的好处是，根据操作的offset可以快速定位到index，则只需要遍历index相关的S3ChunkInfoList，减少了遍历的范围。 在ReadChunk内，根据index找到对应的ChunkCacheManager，根据请求的chunkPos和len从dataCacheMap中找到一个可读的DataCache，由于DataCache都是最小粒度为blockSIze的缓存，所以存在3种情况：要读的 chunkPos~len的区间全部被缓存，部分被缓存，以及无缓存。将缓存部分buf直接copy到接口的buf指针对应的偏移位置，无缓存部分生成requestVer。

233 # aptitude search ’~c’ 如果您确认所列出的软件包应当被完整删除，请运行以下命令。 # aptitude purge ’~c’ 您可能想要在交互模式中做类似的操作进行细粒度的控制。 在” 新软件包视图” 使用”l” 提示并输入正则匹配式”~c” ，这将仅匹配软件包，比如，” 移除但不清空配置” 。所有符 合匹配的软件包可以在顶层标题上使用”[” 显示。 当您在顶层 Table 10.9: 在文件上使用的 GNU 隐私卫士的命令列表 10.3.3 在 Mutt 中使用 GnuPG 增加下面内容到”~/.muttrc”，在自动启动时，避免一个慢的 GnuPG，在索引菜单中按”S” 来允许它使用。 Debian 参考手册 190 / 233 macro index S ”:toggle pgp_verify_sig\n” set pgp_verify_sig=no 5.2 基本的 Git 命令 Git 操作涉及几个数据。 • 工作树目录保持面向用户的文件，你可以对这些文件做修改。 – 需要被记录的改变，必须明确的被选择并暂存到索引。这是 git add 和 git rm 命令。 • 索引保持暂存文件。 – 在接下来的请求之前，暂存文件将被提交到本地仓库。这个是 git commit 命令。 • 本地仓库保持已经提交的的文件。 – Git 记录提交

232 # aptitude search ’~c’ 如果您確認所列出的軟體包應當被完整刪除，請執行以下指令。 # aptitude purge ’~c’ 您可能想要在互動模式中做類似的操作進行細粒度的控制。 在” 新軟體包檢視” 使用”l” 提示並輸入正則匹配式”~c” ，這將僅匹配軟體包，比如，” 移除但不清空調配” 。所有符 合匹配的軟體包可以在頂層標題上使用”[” 顯示。 當您在頂層 Table 10.9: 在檔案上使用的 GNU 隱私衛士的指令列表 10.3.3 在 Mutt 中使用 GnuPG 增加下面內容到”~/.muttrc”，在自動啟動時，避免一個慢的 GnuPG，在索引選單中按”S” 來允許它使用。 Debian 參考手冊 190 / 232 macro index S ”:toggle pgp_verify_sig\n” set pgp_verify_sig=no 2 基本的 Git 命令 Git 操作涉及幾個資料。 • 工作樹目錄保持面向使用者的檔案，你可以對這些檔案做修改。 – 需要被記錄的改變，必須明確的被選擇並暫存到索引。這是 git add 和 git rm 命令。 • 索引保持暫存檔案。 – 在接下來的請求之前，暫存檔案將被提交到本地倉庫。這個是 git commit 命令。 • 本地倉庫保持已經提交的的檔案。 – Git 記錄提交

apt-get Debian Linux发行版中的APT软件包管理工具 apt-key 管理Debian Linux系统中的软件包密钥 apt-sortpkgs Debian Linux下对软件包索引文件进行排序的工具 aptitude Debian Linux系统中软件包管理工具 ar 建立或修改备存文件，或是从备存文件中抽取文件 arch 显示当前主机的硬件架构类型 arj 用于创建和管理 中国开源镜像站点 游戏玩家发行版 Team 这里存放Linux 命令大全并不全，你可以通过linux-command来搜索，它是把 command 目录里面 搜集的命令，生成了静态HTML并提供预览以及索引搜索。 bye、ftp、ftpcount、ftpshut、ftpwho、ncftp、tftp、uucico、uucp、uupick、uuto、 scp ar、bunzip2、bzip2、bzi F86Setup、xlsatoms、xlsclients、xlsfonts yes 可以通过 npm 安装 linux-command 包，包含所有命令的 markdown 文本，和一个索引文 件。 1. npm install linux-command 1. var comm = require("linux-command"); 2. console.log("---->"

debian-mentors@lists.debian.org 邮件列表存档 的内容。 • debian-devel@lists.debian.org 邮件列表存档 的内容。 要获取您所需要的信息，一种有效的方法是在网页搜索引擎中构建类似“关键字 site:lists.debian.org” 这样具有限制条件的搜索字符串来限定搜索的域名。 制作一个小型测试用软件包也是了解打包细节的一个好办法。对当前已有的维护良好的软件包进行检 override_dh_auto_install: dh_auto_install -- prefix=/usr 如上在 debian/rules 文件中导出 =DH_VERBOSE 环境变量可以强制 debhelper 工具输出细粒度的构 建报告。 如上导出 DEB_BUILD_MAINT_OPTION 变量可以如 dpkg-buildflags(1) 手册页中“FEATURE AR- EAS/ENVIRONMENT”部分所说，对加固选项进行设置。1

madvise： 1. 进程粒度支持全范围去重：新增一个 prctl 系统调用接口，作为进程使能 KSM 的开关， 调用该接口可以使进程内 所有地址范围的内存（私有匿名页）参与 KSM 去重，fork 后的进程也继承该去重方式。相比之下，进程只需要调 用一次 prctl 接口，即可使能全范围 KSM 去重，而无需多次调用 madvise 分别指定去重地址范围。 2. 容器粒度支持全范围去重：在 memory memory cgroup v1 目录下新增容器粒度的开关 memory.ksm，写 1 后该容器内所 有进程都使能 KSM 全地址范围内存去重。 • Damon（Data Access MONitoring）特性增强：Damon 可在轻度内存压力下，实现主动、轻量级的线上内存访问监 控及回收，用户根据监控结果定制策略对内存区域做相应操作。 • uswap 特性增强：增加用户态换出内存页面的

. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 2703 索引 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 2705 索引 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 2708 索引 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .

. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 1937 索引 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 1939 索引 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 1941 索引 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .

中，对单个线程的资源使用进行更精细的控制。 3）更安全的子树委派： 通过委派机制允许非特权用户创建和管理自己的 cgroup 层次结构。通过合理利用委派，系统管理员可以提供给用户或应用程 序必要的控制权限，提供更细粒度的资源管理，同时保持系统的稳定性和安全性。 4）更丰富的特性支持： 基于统一的文件树管理，支持 psi、页面缓存回写、跨多个资源的增强资源分配管理和隔离、统一核算不同类型的内存分配， MemoryQoS 特性：MPAM（内存系统组件隔离监控）是用于解决服务器系统中，混部不同类型业务时，由于共享资源的竞争而带来 的关键应用性能下降或者系统整体性能下降的问题。另外，对于业务共享资源的使用，以 CPU 或者 PID 为粒度，进行实时跟 踪监控。OLK 6.6 下 MPAM 重构的版本提供若干新特性： 1）完整支持 L2 cache 分区隔离和监控功能，其中关于监控功能，支持统计缓存占用量，同时监控缓存带宽流量。