多云管下的自动化运维架构 刘宇 Bespin 高级研发总监 自我介绍 自我介绍 • DevOps专家 • 曾任职于新浪、百度、金山 • 《Puppet实战作者》 《Puppet实战手册》 《Python进阶》 • QCon金牌讲师，QCon优秀出品人 目录 ① 行业趋势分析 ② 多云下运维的挑战 ③ 多云平台架构如何设计？ ④ 困难以及挑战 资源统一管理 监控 排查定位问题成本高 —〉 跨度大 业务成本难以核算 —〉 账单难处理 。。。 多云下运维的挑战 Gartner：云管理平台需要具备多云管理、自服务、计量计费、资源弹性及服务编排， 能够自动化部署和配置相关资源，可以与企业现有IT管理系统集成的服务化能力 云管平台架构设计 私有云 公有云 虚拟化 接⼝口适配 多云统⼀一编排 ⾃自助服务 多云管理理 资源优化 云管平台架构设计 Account Service Redis MySQL Aliyun AWS Huawei Other • 通用的参数在拦截器获取实 现，并注入到log4j的MDC • 使用时没有侵入，自动将通 用参数写入日志 • 标准化：统一日志规范和记 录日志方式 资源统一管理：日志 Log interceptor Controller Cloud Service Inject

服务传输文件，使用 Samba 或 NFS 实现文件共享，使用 BIND 提供域名解析服务，使用 DHCP 动态管理主机地址，使用 Postfix 与 Dovecot 部署邮件系统，使用 Ansible 服务实现自动化运维，使用 iSCSI 服务部署网络存储，使用 MariaDB 数据库管理系统，使用 PXE+Kickstart 无人值守安装服务，使用 LNMP 架构部署动态网站环境等。此外， 本书的配套站点还深度点评了红帽 ................................................................................ 306 12.3 autofs 自动挂载服务 ............................................................................................. 309 ....................................................................................... 340 14.3 自动管理 IP 地址 ..........................................................................................

可以知道自己是哪个用户（以后说输入某条命令，默认是要按下回车键的） root tty1 2019-12-10 06:03 用户名 终端 登录时间 18 5.Linux 下输入命令前几个字母后，如果没有二义性，可以按下 Tab 键自动补全命令，如果 有二义性，按下 Tab 键后会显示出所有匹配的命令 6.可以按键盘上的箭头键的上下键↑ ↓，查看刚刚输入过的命令，当我们需要重复执行某个命 令时，可以按上箭头找到那条命令，再回车就可以了，不必每次都输入一长串命令。 字体名 可以设置 console 字体，以上三种字体都试一下，选一个适合 自己屏幕分辨率的就行 4.输入 setfont 可以恢复默认的字体 5.重启系统后，字体大小又恢复默认的了，需要在开机时就自动设置字体 这里涉及到 vi 的使用，不会用 vi 的先学习下一章节！ 使用 vi 编辑/etc/rc.d/rc.local 文件 在文件末尾添加一行： setfont sun12x22 保存 20 为磁盘上的分区 1） #pwd //查看当前所处的目录 #cd /etc //切换到/etc 目录，cd 表示切换目录（change directory） #cd .. //切换到上一层目录 #cd - //切换到上一次所处的目录 #cd ../a //切换到上一层目录下的 a 目录里 #cd ~ //切换到当前用户的家目录 #mkdir xxx //在当前目录下创建一个名为 xxx 的目录

bz2压缩包查看器 bzmore 查看bzip2压缩过的文本文件的内容 C cal 显示当前日历或指定日期的日历 cancel 取消已存在的打印任务 cat 连接多个文件并打印到标准输出 cd 切换用户当前工作目录 cdrecord Linux系统下光盘刻录功能命令 chage 修改帐号和密码的有效期限 chattr 用来改变文件属性 chcon 修改对象（文件）的安全上下文 chfn 打印真实以及有效的用户和所在组的信息 ifcfg 置Linux中的网络接口参数 ifconfig 配置和显示Linux系统网卡的网络参数 ifdown 禁用指定的网络接口 ifstat 统计网络接口流量状态 iftop 一款实时流量监控工具 ifup 激活指定的网络接口 indent 格式化C语言的源文件 info Linux下info格式的帮助指令 init init进程是所有Linux进程的父进程 iptables-restore 还原iptables表的配置 iptables-save 备份iptables的表配置 iptables Linux上常用的防火墙软件 iptraf 实时地监视网卡流量 iptstate 显示iptables的工作状态 ispell 检查文件中出现的拼写错误 J jed 主要用于编辑代码的编辑器 jobs 显示作业的状态 joe 强大的纯文本编辑器 join

22所示的界面。 大学霸 Kali Linux 安全渗透教程 20 1.4 安装Kali Linux 图1.22 结束安装进程 （21）在该界面单击“继续”按钮，将返回到安装系统过程。安装完成后，将会自动 重新启动系统。 1.4.2 安装至USB驱动器 Kali Linux USB驱动器提供了一种能力，它能永久的保存系统设置、永久更新及在 USB设备上安装软件包，并且允许用户运行自己个性化的Kali mounting read-only 看到以上的输出信息，表示VMware Tools安装程序挂载成功了。 （3）切换到挂载位置，解压安装程序VMwareTools。执行命令如下所示： root@kali:~# cd /mnt/cdrom/ #切换目录 root@kali:/mnt/cdrom# ls 查看当前目录下的文件 Tools程序将被解压到/目录中，并生成一个名为vmware- tools-distrib文件夹。 （4）切换到VMware Tools的目录，并运行安装程序。执行命令如下所示： root@kali:/mnt/cdrom# cd /vmware-tools-distrib/ #切换目录 root@kali:/vmware-tools-distrib# ./vmware-install.pl

..............................22 2.3.4 工作空间角色切换........................................................................................... 23 2.3.5 语言切换.............................................. 6.3.3 给虚拟机批量打标签分组分类..................................................................... 107 6.3.4 自动打标签分组分类..................................................................................... 108 6 查看生成的运营报告...................................................................................272 9.3.20 配置定时自动生成报告并发送到指定邮箱...............................................273 10 资源回收优化..........................

• 所有程序运⾏行行在Linux裸机 • ⼏几乎全部机器器都是单点故障 • 软件升级和变更更是⾼高⻛风险活动 • ⽆无法扩容 2014架构运维问题与挑战 • 流量量⼀一年年涨5倍 • 不不变的话, ⼏几个⽉月后会被流量量压垮 2016年年架构 Demand Supply Optic Disco Geobase RTAPI Eyeball requests Trip requests • 优步, 设⽴立北北京和上海海数据中⼼心 • Uber Eats流量量激增 三年年来的运维强化(2016-2019) 架构调整: 多活, 容器器化, 软件⽹网络 部署管理理: ⾃自动化部署uDeploy 变更更管理理: P3系统 监控优化: M3监控系统, Blackbox外部监控 故障恢复: ⾃自愈⼒力力和⾃自动排障 流程优化: Ring0和Post Mortem 架构调整: Active SJC1 DCA1 Riak
 (DB) Riak
 (DB) RTTR SJC1 DCA1 CaaS
 (DB) CaaS
 (DB) 程序层⾯面复制 —> 数据库⾃自动复制 架构调整: 容器器化和Mesos •Puppet退出服务层，只负责底层系统 •全局config(clusto)退位 •服务层⾃自主控制infra配置 •为其他运维变更更提供了了可能性

. . . . . . . . . . . . . 591 2 agent（主动模式）自动注册 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 600 3 低级别自动发现 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 1886 6 使用 Zabbix 监控网络流量 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 1890 7 使用主动检查监控网络流量 . . . . . . . . . . . . . . . . . . . . . 环境监控的方法。 维护 ，正则表达式，事件确认 和XML 导入/导出 部分进一步说明如何使用 Zabbix 软件的各个方面。 发现 包含有关设置网络设备、主动模式的 agent（自动注册）、文件系统、网络接口等的自动发现的说明。 分布式监控 介绍在更大、更复杂的环境中使用 Zabbix 的可能性。 加密 帮助解释加密 Zabbix 组件之间的通信的可行性。 Web 界面 包含特定的使用 Zabbix

fault 的扩展性，可以加速应用启动等并发场景的性能。 • PCP high 自适应调节：对于不同工作负载，页面分配 / 释放的性能要求通常也是不同的。通过 PCP high 自适应的调节，可以 自动调整每个 CPU 的页面集的大小以优化页面分配 / 释放性能，可以优化内核多并发构建等并发场景的性能。 • MGLRU 特性：多层级的 LRU 机制，更精确地识别页面的冷热信息，提升高内存压力场景下的系统性能，降低 默认模式下批量申请 block，大幅优化各类 benchmark 下 ext4 性能表现。 3）ext4 buffer io 读写流程以及 pagecache 回写流程弃用老旧的 buffer_head 框架，切换至 iomap 框架，并通过 iomap 框架 实现 ext4 支持 large folio。 • 潮汐 affinity 调度特性：提供高效内存回收和加载机制，支持 per-memcg 的 swap PID 为粒度，进行实时跟 踪监控。OLK 6.6 下 MPAM 重构的版本提供若干新特性： 1）完整支持 L2 cache 分区隔离和监控功能，其中关于监控功能，支持统计缓存占用量，同时监控缓存带宽流量。 2）支持任务之间根据优先级的差异，动态调整共享资源配置。 3）支持任务共享资源的保底设置。 • CPU QoS 优先级负载均衡特性：在离线混部 CPU QoS 隔离增强 , 支持多核 CPU

发者协同开发的成果，在 openEuler 社区的发展进程中具有里程碑式的意义，也是中国开源历史上的标志性的事件。 2021 年 3 月 31 日，openEuler 21.03 创新版如期而至，该版本不仅将内核切换到 Linux Kernel 5.10, 还在内核方向实 现内核热升级、内存分层扩展等多个创新特性，加速提升多核性能，构筑千核运算能力。 openEuler 作为一个发行版平台，每两年推出一个 IO 性能。 • OpenStack&Kubernetes：向云而生，集成两大主流云计算调度和管理软件，构筑云化基座 。 • HA 高可用集群方案：麒麟软件贡献的 HA 高可用集群方案，故障秒级切换。 繁荣社区生态： • 更多桌面环境支持：UKUI、DDE 、Xfce 桌面环境，丰富社区桌面环境生态。 平台架构 6 7 openEuler 21.03 技术白皮书 openEuler ：提供了一种评估系统资源 CPU、内存、 数据读写压力的方法。准确的检测方法可以帮资 源使用者确定合适的工作量，帮助系统制定高效 的资源调度策略，最大化利用系统资源，改善用 户体验。 8. TCP 发包切换到了 Early Departure Time 模型： 解决原来 TCP 框架的限制，根据调度策略给数据 包设置 Early Departure Time 时间戳，避免大的 队列缓存带来的时延，同时大幅提升