## SOFA MESH 的通用协议扩展 邵俊雄（熊啸） 2018.08.25 ## AGENDA • SOFA MESH 介绍 • SERVICE MESH 落地的问题 • SOFA MESH 的通用落地方案 • DNS 服务寻址方案 • X-PROTOCOL 通用协议 · 问答 ## SOFA MESH • 从 ISTIO 克隆并保持同步更新 - 使用 SOFA-MOSN 代替 Controller Pattern 通过 CRD 扩展新的能力 ## MESH 落地碰到的问题 • 客户端服务发现与负载均衡无法与 ISTIO 一起工作 • ENVOY 不支持微服务使用的通信协议 - RPC 服务使用的接口，方法，参数语义无法匹配 ISTIO 的路由模型 • 一个应用上部署了多个 RPC 服务，每个服务有自己的版本 ## I STIO 控制平面路由的抽象模型 VirtualHost for DUBBO • 开发 DUBBO 服务的 XDS 配置下发 • 开发 DUBBO 服务的路由规则 XDS 适配 • 开发 DUBBO 协议支持 ## SOFA MESH 的统一解决方案 • 采用 Kubernetes Native 方式落地微服务应用 • 使用 INTERFACE 作为 DNS 来寻址服务 • 开发一个通用协议处理框架 - 避免为不同的微服务框架修改 PILOT

## Greenplum分布式事务 和两阶段提交协议 钉钉直播 | 10月21日 20:00 - 21:00 #### Greenplum中文社区 https://cn.greenplum.org 博文·资料·文档·项目 ## 全新的问答论坛 #### https://cn.greenplum.org/askgp ## GREENPLUM DATABASE $ ^{®} $ ![Imag 欢迎访问Greenplum中文社区：cn.greenplum.org ## Greenplum分布式事务和两阶段提交协议 ## Outline • 事务实现原理和Write Ahead Logging(WAL) • 分布式事务和两阶段提交的原理 Greenplum两阶段提交协议的实现 Greenplum两阶段提交协议的优化 ## 事务的属性:ACID |属性|含义|数据库系统的实现| |---|---|---| |---|---|---| |Atomic原子性|事务中的操作要么全部正确执行，要么完全不执行。|Write Ahead Logging，分布式事务：两阶段提交协议| |Consistency一致性|数据库系统必须保证事务的执行使得数据库从一个一致性状态转移到另一个一致性状态。（满足完整性约束）|实现对A、I、D三个属性的支持| |Isolation隔离性|多个事务并发地执行，对每个事务来说，它并不会感知系统中有其他事

## 腾讯云 ## I stio 流量管理原理与协议扩展 赵化冰 The provided image is a graphic design and does not contain any chart, graph, or data points that can be extracted and converted into a markdown table. ## 腾讯云 赵化冰 e/2/1/f/e21ff44e1a0fd862792c70b5eca8d6ae/p3_1.jpg) ## I stio 流量管理 – 概览 控制面下发流量规则：Pilot • 数据面标准协议：xDS • 集群内Pod流量出入：Sidecar Proxy • 集群外部流量入口：Ingress Gateway • 集群外部流量出口：Egress Gateway（可选,在一个集中点对外部访问进行控制） 两类数据： ☐ 服务数据（Mesh 中有哪些服务？缺省路由） Service Registry ■ Kubernetes：原生支持 Consul、Eureka 等其他服务注册表：MCP over xDS （https://github.com/istio-ecosystem/consul-mcp） 通过CRD定义的服务数据 ☐ 自定义流量规则（如何将请求路由到这些服务？） 通过CRD定义的流量规则

不同的协议层次：SDN 2-4层，Service Mesh 主要为7层 ## SDN对Service Mesh发展的启发： ## 北向接口 • 面向业务和运维 具有较高的抽象层次，比较容易提取统一的控制面标准？ • 主要面向layer 7及以上？ • SMI能否统一控制面标准？如何避免成为最小公分母，扩展支持其它协议？ ## 南向接口 • 面向流量和路由配置 • xDS v2将统一数据面标准？ v2将统一数据面标准？ • xDS接口包含有较多实现相关内容：Listener, Filter, 能否可以成为一个通用的接口协议？是否会出现Envoy之外的大量数据面实现？ • 建议：对xDS接口进行改进，去掉实现相关内容 ## Service Mesh的发展 • 控制面对数据面软硬件的统一控制能力？ • 通过控制面API接入各种丰富的应用场景 - 下一个热点？ ## 总体架构-高层视图 灰度发布 Service纳入Service Mesh管控？ ## 收益 ➢ TCP Service可以享受流量管理，可见性，策略控制等Istio承诺的益处 ## 成本 Istio不理解TCP上的应用层协议，其对TCP Service的缺省处理会影响应用层逻辑 -例子：Envoy的LB算法不能处理应用后端集群的Sharding Istio中和HTTP Service 端口冲突会的TCP Service请求会被Envoy直接丢弃

CONFE 2023 Rust HTTP 协议栈在终端通信场景的实践 胡凯 hukai45@huaweicom 华为 公共开发部 嵌入式软件能力中心 ‖ 目录 @ HTTP 协议介绍 什么是 HTTP 协议? @ Rust与HTTP协议 介绍 Rust 与 HTTP 协议栈结合的业界实现。 @ 终端 HTTP 通信场景浅析 终端场景下 HTTP 协议的主要使用场景，以及需要思考的问题。 和终端通信场景的实践的简单介绍, 和1 Part 01 HTTP 协议介绍 什么是 HTTP 协议? Rust China Conf 2022 - 2023, Shanghai China HTTP 协议介绍 HTTP 协议，即超文本传输协议 (HyperText Transfer Protocol) 是一种用于分布式、协作式和超媒体 信息系统的应用层协议。 HTTP 是一个客户端〈用户) 和服务端 (网站) Server ust China Conf 2022 - 20: HTTP 协议介绍 HTTP 协议主要具有以下特点: WO WO 支持客户/服务器模式。 简单快速: 客户向服务器请求服务时，只需传送 请求方法、路径和请求头。HTTP 协议简单、HTTP 服务器的程序规模小，因而通信速度很快。 灵活: HTTP 支持传输任意类型的数据对象。 无连接:

2023 第三届中国Rust开发者大会 6.17-6.18 @Shanghai ## SOLANA ## 在Solana合约链 实现IBC协议跨链互操作 @DaviRain ## 简单介绍下IBC协议是什么，及其生态 ## 介绍IBC协议和其在跨链互操作中的作用 ## I nterchain Standards |Number of Trees|Number of Trees |---| IBC协议中的角色和参与者 1. 客户端 2. 连接 3. 通道 4. 包 4. 中继器 ## 解释为什么选择在Rust合约链中实现IBC协议 - IBC协议的核心已经被协议核心团队用Rust语言实现。 - 对于本身就是使用Rust语言作为智能合约开发的区块链平台来说，支持集成支持IBC协议会很方便。 - 这里优先构想了在Solana链上实现IBC协议，因为Solana - 以及本人对Solana平台的喜欢，优先考虑了Solana平台，但是这套方案是可以推广到任何的Rust智能合约平台的。 ## < / IBC协议概述 大致讲解下IBC协议的原理，以及参与整个IBC协议活动的不同决策 ## 详细介绍IBC协议的基本概念和原理 ![Image](/uploads/documents/9/5/b/7/95b73a3b7e14cd349b3ba6d8f35e7dba/p9_1

目前常见数据面主要有三种：Envoy、Linkerd、Traefic。Envoy由于高性能和扩展能力前在数据面遥遥领先。 - Iptables使Pod间出入应用的流量均由Envoy代理，对应用来说完全透明。支持主要常用网路协议Http1/Http2/Tls/gRPC/Tcp等。 ![Image](/uploads/documents/5/5/7/2/557282ac723872a8db46eec96f433fb7/p5_1 d建立长连接，通过xDS协议接收系统下发的监听器、路由、集群节点等更新信息。 ### • 3. 数据面通信 • 客户端请求进入容器网络，并被iptables规则拦截，经过DNAT后进入Envoy virtualOutbound监听器 • virtualOutbound经过监听过滤器恢复用于原始目标服务，并找到后端处理器处理新连接。 后端处理器在配置中指定处理协议，根据协议相关的网络过滤器处理读取到的数据。 理读取到的数据。 - 如果为http协议，再经过请求过滤器处理http协议头部，如路由选择等功能并创建上游连接池 • 将修改及编码后的http消息通过网络发送到对端Envoy的容器网络。 • Iptables识别为入流量则进入virtualInbound端口。 - ORIGINAL_DST恢复原始目标后，根据virtualInbound配置的监听过滤器找到对应的本地服务器地址。并发起localhost的请求。

1.jpg) ## How to implement it ## Apache APISIX Native Support • No etcd required • Support for xDS protocol It’s public now!!! https://github.com/api7/amesh ![Image](/uploads/documents/0/7/4/b/0

。 多消息协议 RPC消息协议默认支持 Thrift、Kitex Protobuf、gRPC。Thrift支持Buffered和 Framed二进制协议；Kitex Protobuf是Kitex自定义的Protobuf消息协议，协议格式类似 Thrift；gRPC是对gRPC消息协议的支持，可以与gRPC互通。除此之外，使用者也可以扩展自己的消息协议。 多传输协议 传输协议封装消息协议进行RPC互 传输协议封装消息协议进行RPC互通，传输协议可以额外透传元信息，用于服务治理， Kitex 支持的传输协议有 TTHeader、HTTP2。TTHeader 可以和 Thrift、Kitex Protobuf 结合使用；HTTP2 目前主要是结合 gRPC 协议使用，后续也会支持 Thrift。 多种消息类型 支持 PingPong、Oneway、双向 Streaming。其中 Oneway 目前只对 Thrift协议支持，双向 框架性能 性能测试只能提供相对参考，工业场景下，有诸多因素可以影响实际的性能表现。 由于开源社区缺少支持 thrift的优秀RPC框架，当前对比项目为grpc，rpcx，均使用 protobuf协议。 我们通过测试代码比较了它们的性能，测试表明Kitex具有明显优势。 并发表现（Echo1KB，改变并发量） 吞吐表现（并发100，改变包大小） 测试环境 CPU: Intel® Xeon®

保持一致性的继续“前行” 撸猫原则：如果你非要撸猫，记得顺着毛撸 ## 服务与配置扩展 - 配置 ## ● 多configSource + MCP-over-xds $ ^{①} $ configSources: - address: xds://mesh-registry.istio-system.svc:16010?type=serviceentry&type=sidecar - address: `ServiceEntry` $ ^{①} $ configSources: - address: xds://mesh-registry.istio-system.svc:16010?type=serviceentry&type=sidecar - address: k8s:// ## ● MCP-over-xds (istio-mcp) $ ^{①} $ ## ● mesh-registry filters.http.router" patch: operation: INSERT_BEFORE ## ● 问题 因为操作的是xDS内容，所以使用者不得不去理解一些下层概念（vhost、routeconfiguration、特殊http filter如router等）同时也耦合了istio的特性实现 插件内容这个自然没办法，但