## SOFA MESH 的通用协议扩展 邵俊雄（熊啸） 2018.08.25 ## AGENDA • SOFA MESH 介绍 • SERVICE MESH 落地的问题 • SOFA MESH 的通用落地方案 • DNS 服务寻址方案 • X-PROTOCOL 通用协议 · 问答 ## SOFA MESH • 从 ISTIO 克隆并保持同步更新 - 使用 SOFA-MOSN 代替 Controller Pattern 通过 CRD 扩展新的能力 ## MESH 落地碰到的问题 • 客户端服务发现与负载均衡无法与 ISTIO 一起工作 • ENVOY 不支持微服务使用的通信协议 - RPC 服务使用的接口，方法，参数语义无法匹配 ISTIO 的路由模型 • 一个应用上部署了多个 RPC 服务，每个服务有自己的版本 ## I STIO 控制平面路由的抽象模型 VirtualHost for DUBBO • 开发 DUBBO 服务的 XDS 配置下发 • 开发 DUBBO 服务的路由规则 XDS 适配 • 开发 DUBBO 协议支持 ## SOFA MESH 的统一解决方案 • 采用 Kubernetes Native 方式落地微服务应用 • 使用 INTERFACE 作为 DNS 来寻址服务 • 开发一个通用协议处理框架 - 避免为不同的微服务框架修改 PILOT

## Greenplum分布式事务 和两阶段提交协议 钉钉直播 | 10月21日 20:00 - 21:00 #### Greenplum中文社区 https://cn.greenplum.org 博文·资料·文档·项目 ## 全新的问答论坛 #### https://cn.greenplum.org/askgp ## GREENPLUM DATABASE $ ^{®} $ ![Imag 欢迎访问Greenplum中文社区：cn.greenplum.org ## Greenplum分布式事务和两阶段提交协议 ## Outline • 事务实现原理和Write Ahead Logging(WAL) • 分布式事务和两阶段提交的原理 Greenplum两阶段提交协议的实现 Greenplum两阶段提交协议的优化 ## 事务的属性:ACID |属性|含义|数据库系统的实现| |---|---|---| |---|---|---| |Atomic原子性|事务中的操作要么全部正确执行，要么完全不执行。|Write Ahead Logging，分布式事务：两阶段提交协议| |Consistency一致性|数据库系统必须保证事务的执行使得数据库从一个一致性状态转移到另一个一致性状态。（满足完整性约束）|实现对A、I、D三个属性的支持| |Isolation隔离性|多个事务并发地执行，对每个事务来说，它并不会感知系统中有其他事

## 腾讯云 ## I stio 流量管理原理与协议扩展 赵化冰 The provided image is a graphic design and does not contain any chart, graph, or data points that can be extracted and converted into a markdown table. ## 腾讯云 赵化冰 e/2/1/f/e21ff44e1a0fd862792c70b5eca8d6ae/p3_1.jpg) ## I stio 流量管理 – 概览 控制面下发流量规则：Pilot • 数据面标准协议：xDS • 集群内Pod流量出入：Sidecar Proxy • 集群外部流量入口：Ingress Gateway • 集群外部流量出口：Egress Gateway（可选,在一个集中点对外部访问进行控制） 两类数据： ☐ 服务数据（Mesh 中有哪些服务？缺省路由） Service Registry ■ Kubernetes：原生支持 Consul、Eureka 等其他服务注册表：MCP over xDS （https://github.com/istio-ecosystem/consul-mcp） 通过CRD定义的服务数据 ☐ 自定义流量规则（如何将请求路由到这些服务？） 通过CRD定义的流量规则

CONFE 2023 Rust HTTP 协议栈在终端通信场景的实践 胡凯 hukai45@huaweicom 华为 公共开发部 嵌入式软件能力中心 ‖ 目录 @ HTTP 协议介绍 什么是 HTTP 协议? @ Rust与HTTP协议 介绍 Rust 与 HTTP 协议栈结合的业界实现。 @ 终端 HTTP 通信场景浅析 终端场景下 HTTP 协议的主要使用场景，以及需要思考的问题。 和终端通信场景的实践的简单介绍, 和1 Part 01 HTTP 协议介绍 什么是 HTTP 协议? Rust China Conf 2022 - 2023, Shanghai China HTTP 协议介绍 HTTP 协议，即超文本传输协议 (HyperText Transfer Protocol) 是一种用于分布式、协作式和超媒体 信息系统的应用层协议。 HTTP 是一个客户端〈用户) 和服务端 (网站) Server ust China Conf 2022 - 20: HTTP 协议介绍 HTTP 协议主要具有以下特点: WO WO 支持客户/服务器模式。 简单快速: 客户向服务器请求服务时，只需传送 请求方法、路径和请求头。HTTP 协议简单、HTTP 服务器的程序规模小，因而通信速度很快。 灵活: HTTP 支持传输任意类型的数据对象。 无连接:

不同的协议层次：SDN 2-4层，Service Mesh 主要为7层 ## SDN对Service Mesh发展的启发： ## 北向接口 • 面向业务和运维 具有较高的抽象层次，比较容易提取统一的控制面标准？ • 主要面向layer 7及以上？ • SMI能否统一控制面标准？如何避免成为最小公分母，扩展支持其它协议？ ## 南向接口 • 面向流量和路由配置 • xDS v2将统一数据面标准？ v2将统一数据面标准？ • xDS接口包含有较多实现相关内容：Listener, Filter, 能否可以成为一个通用的接口协议？是否会出现Envoy之外的大量数据面实现？ • 建议：对xDS接口进行改进，去掉实现相关内容 ## Service Mesh的发展 • 控制面对数据面软硬件的统一控制能力？ • 通过控制面API接入各种丰富的应用场景 - 下一个热点？ ## 总体架构-高层视图 灰度发布 Service纳入Service Mesh管控？ ## 收益 ➢ TCP Service可以享受流量管理，可见性，策略控制等Istio承诺的益处 ## 成本 Istio不理解TCP上的应用层协议，其对TCP Service的缺省处理会影响应用层逻辑 -例子：Envoy的LB算法不能处理应用后端集群的Sharding Istio中和HTTP Service 端口冲突会的TCP Service请求会被Envoy直接丢弃

2023 第三届中国Rust开发者大会 6.17-6.18 @Shanghai ## SOLANA ## 在Solana合约链 实现IBC协议跨链互操作 @DaviRain ## 简单介绍下IBC协议是什么，及其生态 ## 介绍IBC协议和其在跨链互操作中的作用 ## I nterchain Standards |Number of Trees|Number of Trees |---| IBC协议中的角色和参与者 1. 客户端 2. 连接 3. 通道 4. 包 4. 中继器 ## 解释为什么选择在Rust合约链中实现IBC协议 - IBC协议的核心已经被协议核心团队用Rust语言实现。 - 对于本身就是使用Rust语言作为智能合约开发的区块链平台来说，支持集成支持IBC协议会很方便。 - 这里优先构想了在Solana链上实现IBC协议，因为Solana - 以及本人对Solana平台的喜欢，优先考虑了Solana平台，但是这套方案是可以推广到任何的Rust智能合约平台的。 ## < / IBC协议概述 大致讲解下IBC协议的原理，以及参与整个IBC协议活动的不同决策 ## 详细介绍IBC协议的基本概念和原理 ![Image](/uploads/documents/9/5/b/7/95b73a3b7e14cd349b3ba6d8f35e7dba/p9_1

目前常见数据面主要有三种：Envoy、Linkerd、Traefic。Envoy由于高性能和扩展能力前在数据面遥遥领先。 - Iptables使Pod间出入应用的流量均由Envoy代理，对应用来说完全透明。支持主要常用网路协议Http1/Http2/Tls/gRPC/Tcp等。 ![Image](/uploads/documents/5/5/7/2/557282ac723872a8db46eec96f433fb7/p5_1 d建立长连接，通过xDS协议接收系统下发的监听器、路由、集群节点等更新信息。 ### • 3. 数据面通信 • 客户端请求进入容器网络，并被iptables规则拦截，经过DNAT后进入Envoy virtualOutbound监听器 • virtualOutbound经过监听过滤器恢复用于原始目标服务，并找到后端处理器处理新连接。 后端处理器在配置中指定处理协议，根据协议相关的网络过滤器处理读取到的数据。 理读取到的数据。 - 如果为http协议，再经过请求过滤器处理http协议头部，如路由选择等功能并创建上游连接池 • 将修改及编码后的http消息通过网络发送到对端Envoy的容器网络。 • Iptables识别为入流量则进入virtualInbound端口。 - ORIGINAL_DST恢复原始目标后，根据virtualInbound配置的监听过滤器找到对应的本地服务器地址。并发起localhost的请求。

zipkin，Jaeger 等 • 支持 ZK, Nacos 等 • 支持 Dubbo 3.0 - 支持 thrift, kafka 等协议 - 支持 Istio 1.10 - 支持 Ingress 和 Gateway - 推动 UDPA 多协议建设 ## MOSN 网络层扩展思考和选型 ## MOE 背景介绍 — 什么是 MOE 处理性能高 (C++) 研发效能高(GoLang、生态) /p17_1.jpg) ## MOSN 做业务扩展 • 扩展非 xDS 服务发现 • 扩展 L4/L7 filter • 扩展 Xprotocol 支持 • Debug 及 Admin 管理 • Metrics 监控统计 ## Envoy 复用基础能力 • 复用高效 Eventloop 模型 • 复用 xDS 服务元数据通道 • 复用 L4/L7 filter • 复用 Cluster 008d0093b2ada802e5bf/p23_1.jpg) MOSN 和 Envoy 的相关服务元数据信息，是如何交互管理的？ 通过扩展 Envoy 中的 Admin API 使其支持 xDS 同等功能的 API，MOSN 集成的 Service Discovery 组件通过该 API(rest http) 和 Envoy 交互 使其 MoE 的服务发现能力也具备“双模”能力，可同时满足大规模及云原生的服务发现通道

1.jpg) ## How to implement it ## Apache APISIX Native Support • No etcd required • Support for xDS protocol It’s public now!!! https://github.com/api7/amesh ![Image](/uploads/documents/0/7/4/b/0

保持非常包容的态度。 运行时的稳定性。 1.2 字节跳动编程语言及框架的演进 1.2.1 Go 微服务框架的演进 Go起源2007年，2009年11月Google公司正式发布Go，并以BSD协议完全开源，支持Linux、MacOS和Windows等多个平台。相对于大多数语言，Go具有编写并发或网络交互简单、丰富的数据类型、编译快等特点，比较适合于高性能、高并发场景。从业 务角度来看，Go在 此阶段的微服务体系并不成型，没有安全、稳定方面的治理，连微服务框架都是不成型的。下面仅根据路由进行展开。在2014年前，服务之间通信是HTTP和Thrift协议并存的状态。对于性能不敏感的RPC请求采用HTTP，对于更偏底层，性能更敏感的内容使 用 Thrift 协议。服务之间采用朴素的注册中心：代码仓库+文件。每个团队把自己维护服务的 IP Port列表写在文件内部，提交到代码仓库。有需要变更的时候，把代码 用和飞云原生的应用基本上是并存的。有一些老服务，继续使用Python单体仓库，在物理机上部署；另一些新服务，可以使用Go语言编写，独立仓库，在Kubernetes上部署。虽然语言不通，但采用了相同的协议，使用相同的注册方式，就可以顺利调用。在2017年，字节启动了云原生计划，大量采用物理机、虚拟机部署的Python服务被替换为Kubernetes部署。这一年，今日头条和火山小视频的用户数迎来了爆发