## 从Mesos到Kubernetes 孙寅  ## 体系架构 Infrastructure SaaS capability CMDB Service Mesh Fault Self-healing Volume Test dynamics Auth Mesos (Resource Manager) Docker(Container Service) Private IDC Key Center MultiCloud Service Mesh Network LCS IDC Network Cloud Network Fault Self-healing ## Mesos时代 ## 容器网络 ➢ percent/mount=/home df.bytes.free.percent/mount=/data ## 转向K8S ## 双引擎 Marathon/Mesos Adapter Kubernetes API Server 翻译为Marathon/Mesos API 代理Events ## 有效裁剪 ![Image](/uploads/documents/c/e/d/5/ced59b00a39f

# 基于 mesos 的容器调度框架 Gopher 杭州 meetup 5 August 2017 黄励博(huangnau) 又拍云 ## What's Upone UPONE ## demandporn 10 repo.upyun.com:5043/demandpom:v0.0.17 CPU: 1.0 MEM: 2560.0M Disk: 0.0G Net: BRIDGE 81:8500 Serv siardari:facedet # MESOS Image credit: mesos.apache.org (http://mesos.apache.org/) 官方称之为分布式系统内核, 它把数据中心的 CPU、内存、磁盘等抽象成一个资源池 ## Mesos 调度  ## 消息交互 upone 通过 /api/v1/scheduler (/api/v1/scheduler) 和 mesos master 完成交互  ## 2017/8/3

他们是是否解决了我们的问题？ ☐ 我们的研究和探索 # 求解之路的探索 ☐ 是否已经存在类似的解？ ☑ 传统: HPC中的PBS 和 Condor ■ 现代: Hadoop YARN, Apache Mesos, Google Kubernetes ## 求解之路的探索 他们是否解决了我们的问题？ No ## the Cattle Farm and the Zoo ## 1 求解之路的探索 他们是否解决了我们的问题？ 单，不适用于服务器组中处理性能不一的情况，而且当请求服务时间变化比较大时，轮询调度算法容易导致服务器间的负载不平衡。 ## 求解之路的探索 他们是否解决了我们的问题？ No Apache MESOS   调度机制。YARN自带FIFO、Capacity Scheduler和Fair Scheduler(借鉴了Mesos的DRF)。 ② Mesos中的DRF调度算法过分的追求公平，没有考虑到实际的应用需求。在实际生产线上，往往需要类似于Hadoop中Capacity

基本概念 1.21.3 kubectl 使用 1.21.4 架构设计 1.21.5 Mesos - 优秀的集群资源调度平台 1.22 Mesos 简介 1.22.1 安装与使用 1.22.2 原理与架构 1.22.3 Mesos 配置项解析 1.22.4 日志与监控 1.22.5 常见应用框架 1.22.6 本章小结 等高级操作；第 10～13章介绍了容器生态中的几个核心项目；14、15章讨论了关于 Docker 安全和实现技术等高级话题。后续章节则分别介绍包括 Etcd、CoreOS、Kubernetes、Mesos、容器云等热门开源项目。最后，展示了使用容器技术的典型的应用场景和实践案例。 在线阅读：GitBook，Github，国内镜像 • 下载：pdf, epub · 离线阅读 Docker 自 2015-06-29 添加 Compose 项目 添加 Machine 项目 添加 Swarm 项目 完善 Kubernetes 项目内容 添加 Mesos 项目内容 0.4.0: 2015-05-08 添加 Etcd 项目 添加 Fig 项目 添加 CoreOS 项目 添加 Kubernetes 项目

|Troubleshooting| |Istio| |Getting Started Using Istio| |Docker| |Cilium with Docker & libnetwork| |Mesos| |Cilium with Mesos/Marathon| |Envoy| Envoy Go Extensions Administration System Requirements Summary Linux Getting Started Using Istio Other Orchestrators Cilium with Docker & libnetwork Cilium with Mesos/Marathon The best way to get help if you get stuck is to ask a question on the Cilium Slack channel will work, and you can start it again later. ## Cilium with Mesos/Marathon This tutorial leverages Vagrant and VirtualBox to deploy Apache Mesos, Marathon and Cilium. You will run Cilium to apply a simple

• Istio Getting Started Using Istio • Docker Cilium with Docker & libnetwork Cilium with Mesos/Marathon Envoy Envoy Go Extensions ## Administration • System Requirements Summary. Linux Distribution Started Using Istio ## Other Orchestrators • Cilium with Docker & libnetwork • Cilium with Mesos/Marathon The best way to get help if you get stuck is to ask a question on the Cilium Slack channel will work, and you can start it again later. # Cilium with Mesos/Marathon This tutorial leverages Vagrant and VirtualBox to deploy Apache Mesos, Marathon and Cilium. You will run Cilium to apply a simple

Troubleshooting Istio Getting Started Using Istio Docker Cilium with Docker & libnetwork Mesos Cilium with Mesos/Marathon Envoy Envoy Go Extensions Administration System Requirements Summary Linux Distribution Istio Getting Started Using Istio Other Orchestrators Cilium with Docker & libnetwork Cilium with Mesos/Marathon The best way to get help if you get stuck is to ask a question on the Cilium Slack channel will work, and you can start it again later. Cilium with Mesos/Marathon This tutorial leverages Vagrant and VirtualBox to deploy Apache Mesos, Marathon and Cilium. You will run Cilium to apply a simple

AI训练的痛点 为什么用K8S 基于K8S的AI训练 一次踩坑经历 接下来的工作 ## 可选项 • Docker Swarm：功能弱，尚在迭代 • Rancher：偏小众，没社区 • Mesos or Kubernetes? 趋势比对 |mesosSearch term|kubernetesSearch term|\+ Add comparison| |---|---|---| |Worldwide jpg) Apache / mesos mirrored from git://git.apache.org/mesos.git Watch ▼ 411 ★ Star 3,111 Code 1,256 Pull requests 14 Projects 0 Pulse Graphs ## Mirror of Apache Mesos 12,188 commits

leadership” ## Answer: Cloud Scheduler required Mesos native library. Specify Mesos native library path by property `-Djava.library.path`. For instance, Mesos native libraries are under /usr/local/lib, so library.path=/usr/local/lib need to be set to start the Cloud Scheduler. About Apache Mesos, please refer to Apache Mesos. ### 10.12 Unable to obtain a suitable IP in the case of multiple network interfaces

Cloud Scheduler 依赖 Mesos 库，启动时需要通过 `-Djava.library.path` 指定 Mesos 库所在目录。例如，Mesos 库位于 `/usr/local/lib`，启动 Cloud Scheduler 前需要设置 `-Djava.library.path=/usr/local/lib`。 Mesos 相关请参考 Apache Mesos。 ### 10.12 在多网卡的情况下无法获取到合适的