RAINBOND服务⽇日志管理理 好⾬雨交付⼯工程师-郭逊 RAINBOND 线上培训（第⼋八期） 2019/7/31 1.Rainbond⾃自身的⽇日志管理理机制 2.对接 Elasticsearch 3.演示示例例 ⼤大纲 RAINBOND 线上培训（第⼋八期） 2019/7/31 1.RAINBOND⾃自身⽇日志管理理机制 1.1 ⽇日志界⾯面 RAINBOND 2019/7/31 1.RAINBOND⾃自身⽇日志管理理机制 1.1 ⽇日志界⾯面 RAINBOND 线上培训（第⼋八期） 2019/7/31 1.RAINBOND⾃自身⽇日志管理理机制 1.1 ⽇日志界⾯面 RAINBOND 线上培训（第⼋八期） 2019/7/31 1.RAINBOND⾃自身⽇日志管理理机制 1.2 Rainbond⽇日志收集原理理 RAINBOND 线上培训（第⼋八期） 线上培训（第⼋八期） 2019/7/31 1.RAINBOND⾃自身⽇日志管理理机制 1.3 ⽇日志来源，以及相关原理理 node服务功能与⻆角⾊色 rbd-eventlog组件功能与⻆角⾊色 NODE服务会监视DOCKERD进程，观察其创建与销毁容器。获取⽂件系统中容器⽇志的路径，
 监视来⾃容器标准输出和标准错误输出，并以UDP协议分发到RBD-EVENTLOG组件。 接收来

OpenShift Container Platform 4.8 日志记录 OpenShift Logging 安装、使用和发行注记 Last Updated: 2023-06-12 OpenShift Container Platform 4.8 日志记录 OpenShift Logging 安装、使用和发行注记 法律通告 法律通告 Copyright © 2023 Red Hat owners. 摘要 摘要 本文档提供有关安装、配置和使用 OpenShift Logging 的说明，该 Logging 将汇总多个 OpenShift Container Platform 服务的日志。 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 目 目录 录 第 第 1 章 章 LOGGING 发 发行注 行注记 记 1.1. 日志记录 5.4.9 1.2. LOGGING 5.4.8 1.3. LOGGING 5.4.6 1.4. LOGGING 5.4.5 1.5. LOGGING 5.4.4 1.6. LOGGING

OpenShift Container Platform 4.7 日志记录 OpenShift Logging 安装、使用和发行注记 Last Updated: 2023-03-24 OpenShift Container Platform 4.7 日志记录 OpenShift Logging 安装、使用和发行注记 Enter your first name here. Enter your owners. 摘要 摘要 本文档提供有关安装、配置和使用 OpenShift Logging 的说明，该 Logging 将汇总多个 OpenShift Container Platform 服务的日志。 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 新功能及功能增强 1.2.1.2. 弃用和删除的功能 1.2.1.2.1. Elasticsearch Curator 已被删除 1.2.1.2.2. 使用旧的 Fluentd 和旧 syslog 方法转发日志已被弃用 1.2.1.3. 程序错误修复 1.2.2. OpenShift Logging 5.0.9 1.2.2.1. 程序错误修复 1.2.2.2. CVE 1.2.3. OpenShift

（3）向集群上传一个文件 6.2 集群安全模式&磁盘修复 1）安全模式：文件系统只接受读数据请求，而不接受删除、修改等变更请求 2）进入安全模式场景 ➢ NameNode 在加载镜像文件和编辑日志期间处于安全模式； ➢ NameNode 再接收 DataNode 注册时，处于安全模式 3）退出安全模式条件 尚硅谷大数据技术之 Hadoop（生产调优手册） index spill.index Spill.out 默认100M 80%,后反向 环形缓冲区 2）减少溢写的次数 mapreduce.task.io.sort.mb Shuffle的环形缓冲区大小，默认100m，可以提高到200m mapreduce.map.sort.spill.percent 环形缓冲区溢出的阈值，默认80% ，可以提高的90% 9）异常重试 mapreduce.map.maxattempts每个Map MapReduce 参数调优 （1）修改 mapred-site.xml mapreduce.task.io.sort.mb 100 mapreduce

Controller 中使用 中使用 sidecar 日志 日志记录 记录配置最大 配置最大长 长度 度 在以前的版本中，Ingress Controller 中 syslog 信息的最大长度为 1024 字节。现在，可以增加最大值。如 需更多信息，请参阅允许 Ingress Controller 在使用 sidecar 时修改 HAProxy 日志长度 。 1.3.9.9. 控制台中的 控制台中的 Cluster Cloud Controller Manager Operator 条目。 以后 以后对 对 pod 安全准入的限制 安全准入的限制强 强制 制 目前，pod 安全违反情况会显示为警告并在审计日志中记录，但不会导致 pod 被拒绝。 第 第 1 章 章 OPENSHIFT CONTAINER PLATFORM 4.14 发 发行注 行注记 记 29 目前，计划在下一个 OpenShift Platform 4.14 发 发行注 行注记 记 38 SSH 流量来解决这些问题，并支持从堡垒主机到同一 VPC 网络上的集群节点的 SSH 流量。可以 在安装程序置备的基础架构失败时准确收集日志和调试信息以进行分析。(OCPBUGS-8035) 在以前的版本中，在卸载私有集群时，安装程序创建的 DNS 记录不会被删除。在这个版本中，安 装程序可以正确地删除这些 DNS 记录。(OCPBUGS-7973)

常规存储指南 5.3. 存储建议 5.3.1. 特定应用程序存储建议 5.3.1.1. Registry 5.3.1.2. 扩展的 registry 5.3.1.3. 监控 5.3.1.4. 日志记录 5.3.1.5. 应用程序 5.3.2. 其他特定的应用程序存储建议 5.4. 选择图形驱动程序 5.4.1. 在 SELinux 中使用 OverlayFS 或 DeviceMapper 集群的建议限制，请参阅安装文档中的 大小注意事项 部分。 OpenShift Container Platform 和容器引擎协调容器状态更新的建议大小帐户。这种协调会对主机和容器 引擎进程造成 CPU 压力，这些压力可包括编写大量日志数据。 kubelet 与 API 服务器进行交互的频率取决于 qps 和 burst 值。如果每个节点上运行的 pod 有限，默认值 就足够了。如果节点上有足够 CPU 和内存资源，可以在 /e 扩 扩展和性能指南 展和性能指南 16 为了有效地生成镜像，您可以将任何必要的容器镜像拉取到所有节点主机。这意味着，镜像不需要初始拉 取，这会降低连接速度和性能，特别是用于镜像（如 S2I、指标和日志记录）的时间和性能，这可能会非 常大。 对于无法访问 registry 以进行安全目的的计算机也很有用。 另外，您可以使用本地镜像而不是指定 registry 的默认镜像。要做到这一点： 1.

................................................................................... 45 14.4 消费打印日志 .................................................................................................. 尽可能唯一，返样可以避免潜在的哈希冲突。 // 订单 Id String orderId = "20034568923546"; message.setKeys(orderId); 3. 消息収送成功戒者失败，要打印消息日志，务必要打印 sendresult 和 key 字段。 4. send 消息方法，只要丌抛异常，就代表収送成功。但是収送成功会有多个状态，在 sendResult 里定丿。  SEND_OK RPC 的耗时时间是上述三个步骤的总和，而某些场景要求耗时非常短，但是对可靠性要求幵丌高，例如 日志收集类应用，此类应用可以采用 oneway 形式调用，oneway 形式只収送请求丌等待应答，而収送请求在客 户端实现局面仁仁是一个 os 系统调用的开销，即将数据写入客户端的 socket 缓冲区，此过程耗时通常在微秒级。 13.4 发送顺序消息注意事项 14 Consumer 最佳实践

节点网 点网络 络 12.1. 观察节点网络状态 12.2. 更新节点网络配置 12.3. 对节点网络配置进行故障排除 第 第 13 章 章 日志 日志记录 记录、事件和 、事件和监 监控 控 13.1. 查看虚拟化概述 13.2. 查看虚拟机日志 13.3. 查看事件 13.4. 使用事件和条件诊断数据卷 13.5. 查看有关虚拟机工作负载的信息 13.6. 监控虚拟机健康状况 13 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 13.9. OPENSHIFT CONTAINER PLATFORM 集群监控、日志记录和遥测技术 13.10. PROMETHEUS 对虚拟资源的查询 13.11. 为虚拟机公开自定义指标 13.12. OPENSHIFT VIRTUALIZATION CRITICAL 警报 Virtualization 环 环境 境 在 Virtualization Overview 页面上监控资源、详情、状态和顶级用户。 在虚 在虚拟 拟机 机仪表板上查看有关虚拟机的高级信息。 查看虚拟机日志。 自 自动 动您的部署 您的部署 使用 Ansible 自动执行虚拟机部署。 使用 sysprep 自动执行 Windows 虚拟机部署。 2.4. 其他资源 关于 Kubernetes

"Logging、事件和监控"文档现在被称为支持。监控工具文档已移至 Monitoring。 您可以使用 LokiStack 在 web 控制台中查看并过滤聚合的 OpenShift Virtualization 日志。 5.3.1. 快速启动 有几个 OpenShift Virtualization 功能提供快速入门导览。要查看导览，请点击 OpenShift Virtualization 控制台标题菜单栏中的 CPU 开 开销 CPU overhead for infrastructure nodes ≈ 4 cores OpenShift Virtualization 增加集群级别服务的整体使用，如日志记录、路由和监控。要考虑这个工作负 载，请确保托管基础架构组件的节点分配了用于不同节点的 4 个额外内核（4000 毫秒）的容量。 CPU overhead for worker nodes ≈ 2 可迁移的 VMI 在新的 virt-launcher Pod 上运行。如果 VMI 没有被正确配置，这些尝试可能会无限期重复。 注意 注意 每次尝试都会对应于一个迁移对象。只有最近五个尝试才在缓冲区中。这可防止迁移对象 在系统上进行积累，同时保留用于调试的信息。 7.2.2. 关于 EUS 到 EUS 更新 每个 OpenShift Container Platform 的次版本号为偶数（包括