构建统一的云原生应用 可观测性数据平台构建统一的云原生应用可观测性数据平台 向阳 | 云杉网络 研发VP 2022.4.9 14:00-16:30分享 合作媒体 COSCHINA ☐ 示说 ☑ 稀土掘金 segmentfault 思否 ## 构建统一的云原生应用 可观测性数据平台 DeepFlow在混合云中的实践总结 向阳@云杉网络 2022-04-09 ## 构建统一的云原生应用可观测性数据平台 1. 可观测性数据平台的挑战 可观测性数据平台的挑战 2. 解决数据孤岛：AutoTagging 3. 降低资源开销：MultistageCodec 4. 统一数据平台的落地思路及案例 ## 统一的可观测性数据平台  ## 挑战：数据孤岛、资源开销 Low volume  BEIJING 2017 # 构建基于富媒体大数据的弹性深度学习计算平台 SPEAKER / 土土@七牛 AtLab ## 促进软件开发领域知识与创新的传播  + Ideea ## Connect 数据处理 数据存储 直播点播 数据加速 QINIU QCon[北京站]2017  CHICHE 0 ## 9 色情 0.01 性感 0.98 正常 0.01  ### 聊聊 Node.js 构建部署时 我们要关心的数据 死月  ## 死月 XadillaX（朱凯迪） [Image](/uploads/documents/5/d/2/7/5d271b655d61bf14b736fcfb28672669/p2_2.jpg) ## 目录 CONTENTS ☑ 源起 ☑ 构建数据 ☑ 部署结果 ☑ 启动数据 ☑ 大盘 / 健康模型  ## 构建部署流程 触发构建 前置校验日志 构建日志 Kai 部署日志 部署 重新构建部署 构建任务 统一脚本  触发部署 ## 接收方 应用节点 统一脚本 应用本身 启动元信息收集 ## 构建数据 ## 部署结果0 码力 | 47 页 | 5.80 MB | 2 年前3
- Go 构建大型开源分布式数据库技术内幕# Go 搭建大型开源分布式数据库技术内幕 shenli@PingCAP ## 关于我 • 申砾 (Shen Li) • TiDB 技术负责人 ● 网易有道 / 360搜索 / PingCAP • Infrastructure software engineer 为什么需要一个新的数据库？ ## 从单机数据库到 NewSQL ● 关系型数据库 • NoSQL • 中间件 • NewSQL SQL Database 如何构建分布式数据库？ ## 原则 • 分层 • Make it right and make it fast. 测试很重要 ● 简单易用 和社区结合 ## 架构  ## 数据分片 ## • Hash Based 难以评判什么样的数据分布情况是最优解 ☐ 机器配置不同 ☐ CPU、内存、磁盘、网络多种因素相互制约 ☐ 用户场景多变 ● 调度所依赖的集群状态不一定是最新的 ● 调度本身也会带来系统负担 ## 多副本管理策略 使用多副本保证数据安全(Data safety) ● 维持数据副本数 ☐ 副本数不足: AddPeer ☐ 副本数过多: RemovePeer ## ● 优化数据的地理位置分布0 码力 | 44 页 | 649.68 KB | 2 年前3
- 2.6 用Go构建高性能数据库中间件- 徐成选用Go构建高性能数据库中间件 徐成选 小米商城 xuchengxuan@xiaomi.com 探探 Gopher China 2019 自我介绍 15年初开始使用Go，被Go的生产力、性能所吸引 微服务 数据库、缓存中间件 其他一些偏业务基础服务，例如：库存代理、人群服务、ID生成器等 ’ alt=‘OCR图片’/> Agenda Go in XiaoMi Gaea简介0 码力 | 32 页 | 13.83 MB | 1 月前3
- 数据迁移## 数据迁移 ## 存量 MySQL 迁移到 TiDB 服务 UDTS 产品支持 MySQL(5.5/5.6/5.7/8.0) 到 TiDB 的全量数据迁移，及增量数据同步。可协助用户在不停机的情况下轻松将业务从 MySQL 切换至 TiDB。 ## 自建 TiDB 迁移到 TiDB 服务 UDTS 产品支持 TiDB 全量数据迁移至 TiDB 服务。用户在源 TiDB 开启 Pump, Drainer 可进行数据增量同步。UDTS 与源端 Pump, Drainer 一起可协助用户在不停机的情况下轻松将业务从自建 TiDB 切换至 TiDB 服务。 ## 为 TiDB 服务建立 MySQL 从库 UDTS 产品支持 TiDB 全量数据迁移至 MySQL 数据库。用户在 TiDB 服务上开启 Binlog 可将数据增量同步至下游 MySQL。UDTS 与 TiDB Binlog Binlog 服务一起可协助用户轻松建立 MySQL 从库。 ## 为 TiDB 服务建立 TiDB 从库 UDTS 产品支持 TiDB 全量数据迁移至 TiDB 数据库。用户在源 TiDB 服务上开启 Binlog 可将数据增量同步至下游 TiDB。UDTS 与 TiDB Binlog 服务一起可协助用户轻松建立 TiDB 从 库。0 码力 | 2 页 | 42.01 KB | 1 年前3
新一代分布式高性能图数据库的构建 - 沈游人数据库与大数据专场 ## 新一代分布式高性能图数据库的构建 北京海致星图科技有限公司 2023-06-18 沈游人 ## 海致简介—企业级知识图谱开创者  ## 专注于数据智能技术赋能中国数字经济发展 海致专注为政府、金融、能源 海致专注为政府、金融、能源等客户提供大数据处理、分析、挖掘服务，在互联网技术基础上，打造专业、易用的企业级大数据实战应用产品及解决方案。  ## 专业顶尖技术团队支撑 超 700 人团队，其中 80% 为技术人员，创始团队在完成全球第一个中文知识图谱网站研发后， 4c98d1f37eb6d72977af9d443434d4/p2_4.jpg) ## 企业级数据解决方案专家 为建行、工行、交行、招行、上交所、深交所、中国人寿等 70+ 银行证券保险企业、公安部、上海市公安局、武汉市公安局等 100+ 公安机构，国家电网、国信通产业集团等电力能源行业提供数据智能产品解决方案及长期服务。  元彦 https://github.com/yuanyan FSD 淘系前端团队 ## • 2011 - 2013年 • WebQQ • QQ0 码力 | 39 页 | 2.13 MB | 2 年前3
- 蔡岳毅-基于ClickHouse+StarRocks构建支撑千亿级数据量的高可用查询引擎## Gdevops Global DevOps Summit 全球敏捷运维峰会 基于ClickHouse+StarRocks 构建支撑千亿级数据量的高可用查询引擎 演讲人：蔡岳毅 1. 为什么选择ClickHouse/StarRocks; 2. ClickHouse/StarRocks 的高可用架构； 3. 如何合理的应用ClickHouse的优点，StarRocks如何来补充ClickHouse的短板； 1. 不固定的查询条件，不固定的汇总条件； 2. 数据量日益增量，每天要更新的数据量也不断增大； 3. 业务场景不断增多，涉及面越来越广； 4. 需要保证高可用并秒出； 5. 从Sql，Es，CrateDB，Kylin，Ingite，MongoDB，Hbase不断的研究，实践； ## ClickHouse 的特点 ## 优点： 1. 数据压缩比高，存储成本相对非常低； 2. 支持常用的 支持常用的SQL语法，写入速度非常快，适用于大量的数据更新； 3. 依赖稀疏索引，列式存储，cpu/内存的充分利用造就了优秀的计算能力，并且不用考虑左侧原则； ## 缺点： 1. 不支持事务，没有真正的update/delete; 2. 不支持高并发，可以根据实际情况修改qps相关配置文件；  在 OpenShift Container Platform 中执行构建并与之交互 ## 法律通告 Copyright $ \copyright $ Container Platform 中的构建和构建配置，并且说明了执行和管理构建的各种方法。 ## 目录 第1章 理解镜像构建 ..... 4 1.1. 构建 (BUILD) ..... 4 第2章 了解构建配置 ..... 6 2.1. BUILDCONFIG ..... 6 第3章 创建构建输入 ..... 8 3.1. 构建输入 ..... 8 3.2. DOCKERFILE 凭证用于私有 REGISTRY ..... 23 3.9. 构建环境 ..... 25 3.10. 什么是 SECRET? ..... 26 3.11. 服务用（SERVICE SERVING）证书 SECRET ..... 30 3.12. SECRET 限制 ..... 31 第4章 管理构建输出 ..... 32 4.1. 构建输出 ..... 32 4.2. 输出镜像环境变量0 码力 | 101 页 | 1.12 MB | 2 年前3
共 1000 条
- 1
- 2
- 3
- 4
- 5
- 6
- 100
相关搜索词