## HashiCorp ## Consul及Consul Connect介绍 Service Mesh Made Easy 劉宇雷-Hashicorp Solutions Engineer ## Agenda 1. 服務網格是什麼？簡要歷史回顧 2. 什麼是Consul，它如何工作？ 3. 演示: 如何在非容器化的環境下使用Consul的服務網格 4. 問&答 ## 簡要歷史回顧： Hashicorp聯合創始人 Armon Dadgar Mitchell Hashimoto Co-Founders and Co-CTOs Products: Terraform, Vault, Consul, Nomad, Packer, Vagrant  ## How does Consul work? ## Consul是什麼？ Consul是一個服務網格解決方案，它提供了一整套完整的控制層方案，包括： 服務發現， 服務配置， 服務網絡隔離及互聯等功能。 ## 功能 ## 服務註冊 對目前所有的

4812a02/p1_1.jpg) ## 链滴 ## consul 集群搭建 作者：boolean-dev 原文链接：https://ld246.com/article/1545917881597 来源网站：链滴 许可协议：署名-相同方式共享4.0国际(CC BY-SA 4.0) ## consul集群搭建 consul agent -data-dir /tmp/node0 -node=node0 -ui -lient=192.168.64.59 -server -bootstrap-expect 1 consul agent -data-dir /tmp/node1 -node=node1 -bind=192.168.64.94 -datacenter=dc1 -ui consul agent -data-dir /tmp/node2 -node=node2 -bind=192.168.64 64.249 -datacenter=dc1 -ui client=192.168.64.249 consul join 192.168.64.59 consul members -rpc-addr=192.168.64.59:8400 consul join -rpc-addr=192.168.64.249:8400 192.168.64.59 agent -data-dir /tmp/node0

ae8b748ce2baf8/p1_1.jpg) ## 链滴 ## consul 命令行 作者：boolean-dev 原文链接：https://ld246.com/article/1545917811707 来源网站：链滴 许可协议：署名-相同方式共享4.0国际(CC BY-SA 4.0) ## consul命令行 ● advertise：广告地址用于将我们通告的地址更改为群集中 网络为WAN进行闲聊，同时使专用VLAN互相闲聊及其客户端代理，并且如果远程数据中心是远程数据中心，则允许从远程数据中访问此地址时访问客户端代理。配置了translate_wan_addrs。在Consul 1.0及更高版本中，这可以置为go-sockaddr模板 - bootstrap：此标志用于控制服务器是否处于“引导”模式。重要的是，在此模式下，每个数据中只能运行一台服务器。从技术上讲，允 ，或者该值必须与群中的其他服务器一致。提供后，Consul将等待指定数量的服务器可用，然后引导群集。这允许自动选初始领导者。这不能与传统-bootstrap标志一起使用。此标志需要-server模式。 - -bind：应绑定到内部群集通信的地址。这是群集中所有其他节点都应该可以访问的IP地址。默认情况下，这是“0.0.0.0”，这意味着Consul将绑定到本地计算机上的所有地址，并将第一个可用的

## 基于Consul的多Beats接入管控与多ES搜索编排 梁成 腾讯云, barryliang@tencent.com ## 拥抱开源、释放云原生的力量 背景与挑战 多Beats/Logstash接入管控 多ES搜索编排系统 日志AIOps探索 ## 背景与挑战 如何降低日志接入门槛 如何保证日志实时上报 如何保障日志采集不影响业务 如何做配置标准化 如何帮助业务快速排障 jpg) ## Agent管理 时序图 ## Agent注册 Agent启动首先向Consul获取Master服务列表，并向Master发起Agent注册逻辑，获取agent id ## 配置获取 从Consul中获取当前agent的配置组列表，并启动多个采集进程 ## 配置变更感知 watch到Consul对应的agent id路径，实时感知配置变化，并对启动的进程列表做重启清理等工作 前端 TypeScript、Angular 8、Ng-zorro 后台 Golang、Iris、Consul、微服务化设计、Pongo2模板管理 配置 Consul、Elasticsearch Agent Golang、ELK beats、Logstash、LXC资源管控、 Consul、其他自定义插件 TypeScript ![Image](/uploads/documents/

2017 /01 严选 Service Mesh 演进 /02 混合云架构落地实践 /03 规划与展望 ## 严选ServiceMesh演进 · 使用 Consul 作为服务发现组件 · 数据面：cNginx · 控制面：Consul 管理后台 ![Image](/uploads/documents/3/a/7/5/3a75d07bb8bc3b9306b297c186e7db5e/p5_2 colspan="2">能力提供方服务调用方 (Client)服务提供方 (Server)服务注册与发现注册发现：基于Consul√调用控制协议支持：HTTP 1.X/2.X，可扩展至TCP√ colspan="2">能力提供方服务调用方 (Client)服务提供方 (Server)服务注册与发现注册发现：云外基于Consul，云内基于K8s默认的ETCD√调用控制协议支持：HTTP 1.X/2.X，GR

全程自动化-个人环境 巧妙管理第三方依赖（包括工具链） 自我迭代 （只支持命令行） 开发环境构建：Goflow ’ alt=‘OCR图片’/> 微服务选型：gRPC 使用pb来描述接口 扩展代码生成 使用consul用于服务发现和负载均衡 微服务选型：接口定义 包->服务->方法 可以拥有接口级别的配置 package greeter service Greeter { rpc SayHello TraceWithField(err, "dial", name) } return &Client{grpcClient}, nil } GopherChina 2017 Consul 程序内维护地址列表 polling 获取更新 func (r *Resolver) watchLoop(addrs []string) error { wp, err := s.s.WebApiHandleResp(ctx, w, resp, err) } Webapi生成代码 GopherChina 2017 微服务选型：gRPC + Webapi consul-template 自动注册路由 找出支持webapi的接口 共享一个端口 （github.com/cockroachdb/cmux） mux := cmux.New(ln) if s.GrpcServer

致谢 介绍 1 微服务简介 2 Spring Cloud 2.1 服务发现 2.1.1 Eureka 2.1.2 Eureka的高可用 2.1.3 Consul 2.1.4 Consul安装与使用 2.1.5 Consul常用命令 2.1.6 Consul高可用 2.2 服务提供者 2.3 服务消费者 2.3.1 Ribbon 2.3.2. Feign 2.4 熔断器 2.4.1. Hystrix 2 Discovery）是关键原则之一。手动配置每个客户端或某种形式的约定是很难做的，并且很脆弱。 Spring Cloud提供了多种服务发现的实现方式，例如：Eureka、 Consul、Zookeeper。 Spring Cloud支持得最好的是Eureka，其次是Consul，最次是 Zookeeper。 2.1.1 Eureka 2.1.1 Eureka 准备工作 代码示例 代码地址（任选其一） 2.1.1 Eureka c/Brixton.SR5/#spring-cloud-eureka-server 2.1.3 Consul 2.1.3 Consul 2.1.3 Consul Consul是HashiCorp公司推出的开源工具，用于实现分布式系统的服务发现与配置。与其他分布式服务注册与发现的方案，Consul的方案更“一站式”，内置了服务注册与发现框架、分布一致性协议实现、健康检查、Key/Value存储

总体架构-高层视图 灰度发布 APP: Canary Deployment APP ... Jaeger 管控规则 Pilot Mixer MSB-SDClient MSB-Consul K8s API Server  _1.jpg) ## Consul Registry遇到的坑： 1.0版本的Consul Registry只能算PoC（原型验证），远未达到产品要求 CPU占用率超高不下 (Pilot+Consul 占用冲高到 400%) • TIME_WAIT Sockets 太多导致FD耗光 ## Consul Registry优化 • 增加数据缓存，减少无谓的Consul Catalog API调用 API调用 • 将Polling改为Watch，大幅降低Consul服务数据变化后的同步时延 ## 优化效果 • 200个服务的规模下，CPU占用率降低了一个数量级 • 服务数据变化同步时延从分钟级降低到秒级 • Consul调用导致的TIME_WAIT Sockets数量减少到个位级 ## 产品化增强-Ingress API Gateway ![Image](/uploads/docume

Mesh ## 注册中心与高可用方案 ## 注册中心 - Consul ### - Consul is a tool for service discovery and configuration. Consul is distributed, highly available, and extremely scalable • Consul provides several key features: Multi-Datacenter  Consul 架构  • 注册中心容灾 ## ## 注册中心 - Consul ## Datacenter1 (Region1) ## • 架构设计 LEADER FORWARDING LEADER FORWARDING • 多地域？ · 多租户？ Consul Server (Follower) REPLICATION Consul Server (Leader) REPLICATION Consul Server (Follower)

维护到淘汰只有一步之遥，未来的选型将何去何从？ ’ alt=‘OCR图片’/> Spring Cloud 未来走向 选项一：Spring Cloud Zookeeper 选项二：Spring Cloud Consul 选项三：Spring Cloud Kubernetes 选项四：Spring Cloud Alibaba 选项五：Spring Cloud 退化，仅剩 Spring Boot Spring Cloud Zookeeper Spring Cloud Consul Spring Cloud Kubernetes Spring Cloud Alibaba 分布式配置 Archaius Zookeeper Consul ConfigMap +Nacos 服务注册与发现 Eureka Zookeeper Consul API Server +Nacos 服务路由 Zuul Gateway Spring Cloud 特性强依赖于 Netflix OSS，后者大量组件却处于维护状态，Spring Cloud 的命运存在着不确定性 Spring Cloud Zookeeper 和 Consul 的实现不完整，大部分依赖于 Netflix OSS 组件，难当大任 Spring Cloud Kubernetes 被 Spring Cloud 限制了原生能力，否则 Spring Cloud就没有存在的必要