........................ 21 六、日志排查.......................................................................................................................21 6.1 云管平台日志................................ ........................22 6.2 MySQL 服务日志................................................................................................... 22 6.3 Nginx 服务日志........................................ ............................................29 杭州飞致云信息科技有限公司 4 一、概述 本手册包含了云管理平台的软件架构、部署升级、服务操作、日志、监控、备份等详细 说明。CloudExplorer 云管平台采用微服务架构设计，通过本手册能快速了解 CloudExplorer 云管理平台的基础组件构成这样更方便以后在系统运维中更方便的去排查

..................................................................................87 10 云对象存储在线申请及文件上传下载管理....................................................................88 10.1 查看查找对象存储桶....... ................................................................................... 90 10.4 上传下载删除文件.............................................................................................. 91 10 Volume Service）是一种为 ECS 等计算服务提 供持久性块存储的服务，通过数据冗余和缓存加速等多项技术， 提供高可用性和持久性，以及稳定的低时延性能。您可以对云硬 盘做格式化、创建文件系统等操作，并对数据做持久化存储 安全组 安全组是一种虚拟防火墙，具备有状态的数据包过滤功能，用于 设置云服务器、负载均衡、云数据库等实例的网络访问控制，控 制实例级别的出入流量，是重要的网络安全隔离手段。可以通过

，您可以在 Git 存储库中存储集群和应用程序的配 置，然后按照 Git 工作流将这些存储库应用到所选集群中。您可以将在 Git 存储库中开发和维护软件的核 心原则应用到创建和管理集群和应用程序配置文件。 第 第 1 章 章 什么是 什么是 GITOPS？ ？ 3 第 2 章 关于 RED HAT OPENSHIFT GITOPS Red Hat OpenShift GitOps 是一个使用 统和 和应 应用程序 用程序设 设置或配置所需的基 置或配置所需的基础 础架 架构 构声明描述。您可以在 声明描述。您可以在 Git 存 存储库 储库中的 中的 YAML 配置 配置 文件中指定此描述。声明性 文件中指定此描述。声明性设 设置包含一个自 置包含一个自动 动化 化过 过程，使您的 程，使您的环 环境和基 境和基础 础架 架构 构与上述状 与上述状态 态匹配。例 匹配。例 如，使用 如，使用 应用程序状 用程序状态 态。 。 目 目标 标状 状态 态 想要的 想要的应 应用程序 用程序资 资源的状 源的状态 态，如 ，如 Git 存 存储库 储库中的文件表示。 中的文件表示。 用 用户 户定 定义 义的 的 Argo CD 实 实例 例 安装和部署的自定 安装和部署的自定义 义 Argo CD 实 实例来管理集群配置或部署

k8s) & 微服务的架构和研发 2019 腾讯云 Serverless 产品架构师 核心诉求 Application Application Architecture 开发工具 DevOps 日志 监控告警 Lifecycle Management 网络 计算 存储 数据库 System Resource Monolithic Sprint Cloud Coding VScode 工具 ❑ VS Code IDE 插件 ❑ WebIDE ❑ Command Line 功能 ❑ 函数增删改查 ❑ 调试 ❑ 打包部署 ❑ 日志 ❑ … DevOps 解决方案 Coding DevOps Serverless 平台 日志 CLS 日志服务 监控告警 Cmonitor 云监控告警 Serverless 系统运维能力 ❑mvm: 租户级别最强隔离，更低的延时 ❑ docker: 提高产品竞争力 业务部署 Serverless vs. IaaS 运维能力 容器 虚拟机 ❑ 运维介入 ❑ 配置OS环境、业务配置 ❑ 自己实现蓝绿发布、回滚 功能 ❑ 运维介入 ❑ 编写 Yaml 文件，对运维人员 有更高的技能要求 ❑ 修改Yaml、执行命令，部署 业务 Serverless Serverless 上传代码 监控告警 Serverless vs. IaaS 运维能力

测试验证 清理脏数 据 对外开放 获取新主 机 CMDB注 册信息 关闭故障 大区入口 新机程序 布署 大区服务 重启 测试验证 故障机回 收 故障 替换 业务配置 文件修改 对外开放 选择发布 范围 备份业务 程序&数 据 屏蔽监控 告警 关闭游戏 入口 更新程序 包 更新数据 库 启动游戏 进程 版本 发布 停游戏进 程 测试验证 公共 组件 环境 构建 资源 准备 代码 部署 应用 开发 监控 告警 日志 追溯 基于PaaS的开发模式 应用需求 公共 组件 环境 构建 资源 准备 代码 部署 应用 开发 监控 告警 日志 追溯 运维开发 负责企业技术运营领域（CI、CD、CO）相关场景的系统构建，例如持续集成、日志分析、资 源管理、版本发布、环境变更、监控处理、灾备切换、日常巡检、电子工单、运营分析、运营 、运营 管控、经营管理等。 落地企业工具文化。 回顾一下传统烟囱式模式的弊端 …… 调度引擎 容器管理 文件传输 指令执行 编译构建 开发测试服 更新 DevOps系统 实时计算 离线计算 数据采集 实时视图 交叉分析 数据分析 调度引擎 容器管理 文件传输 指令执行 预发布环境 更新 生产环境 发布 发布系统 实时计算 离线计算 数据采集 数据存储 监控曲线

Feature 分支 -> GitLab-CI 自动构建打包 Chart （写一堆复杂的 脚本 ）-> -> Rancher 上手动替换 Helm Chart 版本 -> 调试（使用 kubectl/ 日志系统） 2. 测试流程 合并到 develop -> GitLab-CI 自动构建打包 Chart （还是那堆复杂的脚本）- > -> Rancher 上手动替换 Helm Chart 版本 字节跳动 - 飞书场景二： Gerrit + Zadig 方案 工程师体验 现状 Zadig Helm 方案 管理员 1. 上线服务，每个环境都配置一份服务 values 文件 2. 创建新环境，准备所有服务 values 文件 1. 从模板创建服务->修改少量配置更新到所有环境 2. 创建环境，维护与环境相关的少量配置 开发 1. Rancher 手动更新服务 2. 调试更新配置需要打一个 调试更新配置需要打一个 Chart 包 3. 使用 kubectl 登入服务 1. Zadig 工作流自动更新服务 2. Zadig 集成环境更新服务配置 3. 在Zadig的图形界面上查看实时日志、调试 测试 1. 测试因为环境不稳定经常受影响 1. 测试套件的自助式运行，管理和执行分析测试结果 2. 关联到开发工作流中，为开发提供自动化验证保障 效能提升场景：2K+微服务、多语言、Helm、K8s 多集群

问题优化 正式上云 运营维护 上云各环节注意点 业务上云 测试 方案 迁移 混合 质量 功能、性能测试，云上云下对比 安全、容量、难度、风险、数据 接入服务、逻辑服务、数据存储、文件存储 混合云过度到全量公有云 服务调用质量、用户访问质量、 服务可用率 数据上公有云 • 冷迁移+增量 •同步中心数据同步 •切换过程停写 私有组件迁移上云 • 云上部署服务集群 Kubernetes多集群管理 Cluster1 Cluster2 ……. 应用服务管理 集群监控 集群日志 集群告警 基础设施监控 基础设施日志 基础设施告警 管理体系 业务管理 用户体系 权限 审计 安全 资源调度 服务监控 服务告警 远程日志 自动扩缩容 负载均衡 服务发现 CI/CD 蓝盾 OCI QCI 镜像仓库 CSIGHUB DockerImage 分批发布 •接口证书认证 •基于RBAC授权 权限控制 •基于项目管理 •角色鉴权认证 镜像仓库 •CBS(SSD/SATA) •Cehp/NFS 网络存储 •远端日志挂载 •页面日志查询 远程日志 CI/CD/CO 需求 设计 开发 构建 测试 部署 搭建 监控 计划 运营 业务上云总结 ⚫ 拥抱云原生 ⚫ 借上云革新研发模式，全面DevOps（CI/CD/CO）

GitLab-CI 自动构建打包 Chart （写一堆复杂 的脚本 ） -> -> Rancher 上手动替换 Helm Chart 版本 -> 调试 （使用 kubectl/ 日志系统） 2. 测试流程 合并到 develop -> GitLab-CI 自动构建打包 Chart （还是那堆复杂的脚 本） -> -> Rancher 上手动替换 Helm 飞书场景二： Gerrit + Zadig 方案 工程师体验 现状 Zadig Helm 方案 管理员 1. 上线服务，每个环境都配置 一份服务 values 文件 2. 创建新环境，准备 所有服务 values 文件 1. 从模板创建服务 -> 修改少量配置更新到所有环境 2. 创建环境，维护与环境相关的少量配置 开发 1. Rancher 手动更新服务 2. 调试更新配置 需要打一个 Chart 包 3. 使用 kubectl 登入服务 1. Zadig 工作流自动更新服务 2. Zadig 集成环境更新服务配置 3. 在 Zadig 的图形界面上查看实时日志、调试 测试 1. 测试因为环境不稳定经常受影响 1. 测试套件的自助式运行，管理和执行分析测试结果 2. 关联到开发工作流中，为开发提供自动化验证保障 效能提升场景： 2K+ 微服务、多语言、

.......................................... 23 杭州飞致云信息科技有限公司 软件用起来才有价值，才有改进的机会 4 2.3.9 对象存储在线申请及文件上传下载管理..................................................... 23 2.3.10 人工服务申请...................... 实例生命周期创建、配置变更、回收 支持 公有云私有云负载均衡实例部署、变更、回收 支持 杭州飞致云信息科技有限公司 软件用起来才有价值，才有改进的机会 17 公有云对象存储桶新建、变更、回收，对象文件上传下载删除 支持 资源查找 支持 服务目录管理 支持 配置部署资源池及网络分配 支持 流程管理、订单管理 支持 配置申请向导选项显示可见、选项范围、是否必选 支持 配置审批环节修改选项 带宽、回收弹 性 IP; 目前支持 OpenStack、阿里云、腾讯云、华为云、AWS、Azure。 2.3.9 对象存储在线申请及文件上传下载管理 应用开发测试、运维人员可查看其工作空间下存储桶列表，并能够查看存储桶内文件列 表、上传下载文件、删除文件，申请新存储桶，删除存储桶; 目前支持阿里云、腾讯云、华为云、AWS。 2.3.10 人工服务申请 在企业 IT 服务中，其中一部分

单维时间序列分析 异常检测 03 多维时间序列分析 多维下钻 目录 04 Metis 的研究方向 展望未来 智能运维（AIOps） 基于机器学习的智能运维 发现问题 • 时间序列异常 • 日志分析异常 • 设备性能异常 分析问题 • 多维下钻分析 • 关联事件分析 • 容量预估分析 解决问题 • 扩容 • 决策 • 调度 • 优化 智能运维学件库 • 可重用 • Metis 的研究方向 展望未来 异常检测 单指标异常检测，多指标异常检测 根因分析 智能多维下钻分析，链路调用根源分析 告警收敛 事件与事件，事件与时序，时序与时序 日志分析 日志模板提取，日志异常检测，日志聚类分析 腾讯 Metis 智能运维方向 发现问题 分析问题 解决问题 THANKS 关注云加社区公众号