/ 2020-11.21-22 go-Chassis 在 Shopee 供应链的实践 余卓煌 ’ alt=‘OCR图片’/> 关于 Shopee 东南亚本地电商平台 成立于2015 8个市场 发展非常快 GOPHER CHINA 2020 中国 上海 / 2020-11.21-22 Shopee供应链过去的技术栈 python $ ^{ \mathrm { T M } } } $ gunicorn Celery elastic GOPHER CHINA 2020 Shopee供应链现在的技术栈 Saturn kubernetes RabbitMQ Wprowadzenie kafka ceph Celery gunicorn elastic GOPHER CHINA 2020 Why Go 运行和开发效率的平衡

openEuler 开放透明的开源软件供应链管理 开源操作系统的构建过程，也是供应链聚合优化的过程。拥有可靠开源软件供应链，是大规模商用操作系统的基础。openEuler从用户场景出发，回溯梳理相应的软件依赖关系，理清所有软件包的上游社区地址、源码和上游对应验证。完成构建验证、分发、实现生命周期管理。开源软件的构建、运行依赖关系、上游社区，三者之前形成闭环且完整透明的软件供应链管理。 ## 02 平台架构

___ ## 面临问题 航班舱位时刻变动 供应商规则调整密集 变价 低价缺失 运价规则变化繁多 报价不全 航司政策各有不同 GDS数据成本不菲 供应商的office权限不一致 ## 海量数据 · 规则量 • 供应商规则量2亿+ • 运价规则1亿+ · 报价量 • 国内国际航线28万 * 航班数 * 产品个数 * 供应商个数 * 180天 = 1500亿 + • 搜索量 搜索量 • 航线搜索+航班搜索：3k+qps • 每秒计算产品数：搜索qps * 航班数 * 供应商个数 * 产品个数 = 1500万 + ## 设计思路 · 最理想的方式 • 所有的报价都实时计算，填充好 • 一个巨大的哈希表 • 响应所有渠道价格变动进行计算 - 快 · 0 变价 ## 设计思路 按需计算 消息驱动 分布式 CAP BASE 理论 异步 无状态 旗舰店 供应商直连 抓取 报价源 航班数据 运价数据 基础数据 ## 搜索框架 · 报价数量多，内存问题 · 报价源多，不稳定 • 响应时间要求苛刻 遇到问题 • 搜索条件有热点 • 缓存报价不准 · 尽量用原生数据类型，编码 • 回数比例，异步搜索更新 解决方案 · 分批回数 ·一致性哈希，负载均衡 • 供应商粒度，主动更新 ## 报价引擎 供应商规则 套餐搭售

Operator 配置对象 ..... 16 defaultNetwork 对象配置 ..... 17 配置 OpenShift SDN CNI 集群网络供应商 ..... 17 配置 OVN-Kubernetes CNI 集群网络供应商 ..... 18 kubeProxyConfig 对象配置 ..... 18 4.5.2. Cluster Network Operator 配置示例 138 第 13 章 OPENSHIFT SDN 默认 CNI 网络供应商 ..... 140 13.1. 关于 OPENSHIFT SDN 默认 CNI 网络供应商 ..... 140 13.1.1. OpenShift SDN 网络隔离模式 ..... 140 13.1.2. 支持的默认 CNI 网络供应商功能列表 140 13.2. 为项目配置出口 IP 140 13.2 第 14 章 OVN-KUBERNETES 默认 CNI 网络供应商 169 14.1. 关于 OVN-KUBERNETES 默认 CONTAINER NETWORK INTERFACE (CNI) 网络供应商 169 14.1.1. OVN-Kubernetes 特性 169 14.1.2. 支持的默认 CNI 网络供应商功能列表 169 14.1.3. OVN-Kubernetes

200 14.10. 卸载 SR-IOV NETWORK OPERATOR 209 第 15 章 OPENSHIFT SDN 默认 CNI 网络供应商 211 15.1. 关于 OPENSHIFT SDN 默认 CNI 网络供应商 211 15.2. 为项目配置出口 IP 212 15.3. 为项目配置出口防火墙 216 15.4. 为项目编辑出口防火墙 220 15 章 OVN-KUBERNETES 默认 CNI 网络供应商 241 16.1. 关于 OVN-KUBERNETES 默认 CONTAINER NETWORK INTERFACE (CNI) 网络供应商 241 16.2. 从 OPENSHIFT SDN 集群网络供应商迁移 243 16.3. 回滚到 OPENSHIFT SDN 网络供应商 251 16.4. 转换为 IPv4/IPv6 OPERATOR 进行证书注入 ..... 358 第 22 章 RHOSP 负载均衡 ..... 360 22.1. 使用带有 KURYR SDN 的 OCTAVIA OVN 负载均衡器供应商驱动 ..... 360 22.2. 使用 OCTAVIA 为应用程序流量扩展集群 ..... 361 22.3. 使用 RHOSP OCTAVIA 为入站流量扩展 ..... 363

[Image](/uploads/documents/5/5/1/1/55113b7b22909f468e40ade3eef34f79/p16_1.jpg) ## 重要 安装后，不支持以下更改： ● 混合云供应商平台 ● 混合云供应商组件，比如使用与安装集群不同的平台中的持久性存储框架 在 OpenShift Container Platform 4.10 中，您可以在以下平台上安装使用用户置备的基础架构集群： AWS、Azure、Azure Stack Hub、GCP 或 VMC on AWS 上执行用户置备的基础架构安装，您可以使用提供的模板来帮助备份所有所需的组件。您还可以重复使用一个共享的 VPC on GCP。或者，您可以使用供应商安装方法将集群部署到其他云中。 您还可以在现有硬件上完成用户置备的基础架构安装。如果使用 RHOSP、RHOSP on SR- IOV、RHV、IBM Z 或 LinuxONE、使用 RHEL 用户访问集群前进行操作。您可以通过自定义组成集群的Operator，并将集群与其他所需系统（如身份提供程序）集成，从而自定义集群本身。 对于生产环境集群，您必须配置以下集成： 持久性存储 身份供应商 监控 OpenShift Container Platform 核心组件 #### 2.3. 为工作负载准备集群 根据工作负载需要，您可能需要在开始部署应用程序前执行额外的步骤。例如，在为

区域，您可以使用可用性集来确保高可用性。自动扩展器在集群生命周期内尽可能提供平衡。 ## 其他资源 ● 机器阶段和生命周期 #### 1.2. 管理计算机器 作为集群管理员，您可以执行以下操作： 为以下云供应商创建计算机器集： ○ AWS o Azure o GCP o RHOSP o vSphere 为裸机部署创建机器集：在裸机上创建计算机器集 - 通过从计算机器集中添加或删除机器，手动扩展计算机器。 创建基础架构计算机器集。 配置和部署机器健康检查，以自动修复机器池中损坏的机器。 #### 1.3. 管理 CONTROL PLANE 机器 作为集群管理员，您可以执行以下操作： 使用以下云供应商的 control plane 机器集更新 control plane 配置： ○ AWS ○ GCP ○ Azure ○ Nutanix ○ vSphere - 配置和部署 机器健康检查，以自动恢复不健康的 c88ae806/p17_5.jpg) 计算机器设置 CR 的 部分中的值是特定于平台的。有关 CR 中的 参数的更多信息，请参阅您的供应商计算机器设置 CR 配置示例。 3. 运行以下命令来创建 MachineSet CR : $ oc create -f .yaml ## 验证 运行以下命令，查看计算机器集列表：

[Image](/uploads/documents/0/5/6/6/0566dcd0a21667bb000be07290f98e4f/p16_1.jpg) ## 重要 安装后，不支持以下更改： ● 混合云供应商平台 ● 混合云供应商组件，比如使用与安装集群不同的平台中的持久性存储框架 在 OpenShift Container Platform 4.8 中，您可以在以下平台上安装使用用户置备的基础架构集群： • ，您可以在安装过程中手动部署集群所需的机器。如果在 AWS、Azure、GCP 或 VMC on AWS 上执行用户置备的基础架构安装，您可以使用提供的模板来帮助备份所有需要的组件。否则，您可以使用供应商安装方法将集群部署到其他云中。 您还可以在现有硬件上完成用户置备的基础架构安装。如果使用 RHOSP、SR-IOV、RHV、IBM Z 或 LinuxONE 上的 RHOSP, IBM Power 用户访问集群前进行操作。您可以通过自定义组成集群的Operator，并将集群与其他所需系统（如身份提供程序）集成来自定义集群本身。 对于生产环境集群，您必须配置以下集成： 持久性存储 • 身份供应商 监控 OpenShift Container Platform 核心组件 #### 2.3. 为工作负载准备集群 根据工作负载需要，您可能需要在开始部署应用程序前执行额外的步骤。例如，在为

[OCR图片](/uploads/documents/e/7/9/e790aac5fdd2d64ba7a41f8d7cc0c323/fbce07c5.png) 重要 安装后，不支持以下更改： - 混合云供应商平台. - 混合云供应商组件。例如，在安装集群的平台上使用另一个平台的持久性存储框架。 在 OpenShift Container Platform 4.13 中，您可以在以下平台上安装使用用户置备的基础架构集群： zure Stack Hub、GCP或VMC on AWS上执行用户置备的基础架构安装，您可以使用提供的模板来帮助备份所有所需的组件。您还可以重复使用一个共享的VPC on GCP。或者，您可以使用供应商安装方法将集群部署到其他云中。 您还可以在现有硬件上完成用户置备的基础架构安装。如果您使用 RHOSP，RHV，IBM Z or IBM $ ^{\circ} $ LinuxONE，IBM Z or 群前进行操作。您可以通过自定义组成集群的 Operator，并将集群与其他所需系统（如身份提供程序）集成，从而自定义集群本身。 对于生产环境集群，您必须配置以下集成： - 持久性存储 - 身份供应商 - 监控 OpenShift Container Platform 核心组件 ## 2.3. 为工作负载准备集群 根据工作负载需要，您可能需要在开始部署应用程序前执行额外的步骤。例如，在为