Comprehensive Rust(한국어) 2024120 码力 | 369 页 | 1.29 MB | 1 年前3
Pivotal Greenplum 5: 新一代数据平台提供强有力的分析改进。通过自动对数据进行分区和并行运行查询,它让服务器群集能够以单一数据超级计算机的方式运行,且性能比传统数据库或其他同类平台高出数十甚至数百倍。其多种分析扩展功能支持 ANSI SQL,并通过封装扩展提供多种内置语言和附加功能。Greenplum 能够管理各种规模的数据卷,数据量从数 GB 到数 PB 不等。  实现性能提升。随着 GPORCA 的功能逐渐增多,传统查询优化器能够在性能上胜出的情况将变得极为罕见。 $ ^{4} $ ## Greenplum资源组和Workload Manager 管理并发性能和用户资源分配是 Greenplum 的主要功能之一。这一版本不仅增强了 Workload Manager 的功能,还引入了一种管理数据库查询的新方法——资源组,可让数据库管理员更好地控制用户活动,尤其是在0 码力 | 9 页 | 690.33 KB | 2 年前3
Apache Doris 在美团外卖数仓中的应用实践MOLAP模式的劣势 1. 应用层模型复杂,根据业务需要以及Kylin生产需要,还要做较多模型预处理。这样在不同的业务场景中,模型的利用率也比较低。 2. Kylin配置过程繁琐,需要配置模型设计,并配合适当的“剪枝”策略,以实现计算成本与查询效率的平衡。 3. 由于MOLAP不支持明细数据的查询,在“汇总+明细”的应用场景中,明细数据需要同步到DBMS引擎来响应交互,增加了生产的运维成本。 4 同时支持“汇总+明细”。 4. 模型轻量标准化,极大的降低了生产成本。 综上所述,在变化维、非预设维、细粒度统计的应用场景下,使用MPP引擎驱动的ROLAP模式,可以简化模型设计,减少预计算的代价,并通过强大的实时计算能力,可以支撑良好的实时交互体验。 ## 双引擎下的应用场景适配问题 架构上通过MOLAP+ROLAP双引擎模式来适配不同应用场景,如下图所示: ## 技术权衡 ## MOLAP 如上图A模型中,始终使用最新的商家组织归属查看历史),预计算回溯历史数据成本巨大。在这种场景下,将数据稳定在商家的粒度,通过现场计算进行历史数据的回溯分析,实现现用现算,可以节省掉预计算的巨大成本,并带来较大的应用灵活性。这种情况下适合MPP引擎支撑下的ROLAP生产模式。 ## MPP引擎的选型 目前开源的比较受关注的OLAP引擎很多,比如Greenplum、Apache Impala、Pr0 码力 | 8 页 | 429.42 KB | 2 年前3
23-云原生观察性、自动化交付和 IaC 等之道-高磊二.云原生可观察性方法论 三.云原生自动化交付(ISV业务下发) 四.基础设施即代码拉通云与云原生 ## 全生命周期API管理-1 服务是从内研发视角来看的,但是对于外部消费者只想找到并集成API而已,并不想了解API背后的运维细节或者需要协调运维能力!API成了一种可以交易的商品,可以购买增强自己APP的能力,比如在自己APP里显示天气预报数据,从外部去管理应用平台,形成了一种新PaaS组织方式。 化的稳定性保障的思想 数据的全面采集 数据的关联分析 统一监控视图与展现 Metric 是指在多个连续的时间周期内用于度量的KPI数值 Tracing 通过Traceld来 标识记录并还 原发生一次分 布式调用的完 整过程和细节 Logging 通过日志记录 执行过程、代 码调试、错误 异常微观信息 数据之间存在很多关联,通过关联性数据分析可获得故障的快速界定与定位,辅助人的决策就会更加精确 2/b/f/42bf0766a8dd4abd4144b9265b9cd04d/p15_1.jpg) - 基于CICD和服务市场,通过OAM集群镜像式打包的方式向团队、组织或者公司进行整体化交付,并通过Docker+SDN+云原生存储+K8S+OAM彻底隔离了不同环境底层的细节和差异,可以整体化交付到这些组织所在的数据中心里去 ## 标准化能力—微服务PAAS—OAM交付流程模式—场景流程 ##0 码力 | 24 页 | 5.96 MB | 1 年前3
openEuler 22.03-LTS 技术白皮书可兼容 EdgeX Foundry 开源生态。 3. 边缘数据服务:通过边缘数据服务实现消息、数据、媒体流的按需持久化,并具备数据分析和数据导出的能力。 4. 边云智能协同架构(Sedna):基于开源 Sedna 框架,提供基础的边云协同推理、联邦学习、增量学习等能力,并实现了基础的模型管理、数据集管理等,使能开发者快速开发边云 AI 协同特性,以及提升用户边云 AI 特性的训练与部署效率。 57.4%,发展日渐壮大。 openEuler 发布面向嵌入式领域的版本 openEuler 22.03 Embedded,提供更加丰富的嵌入式软件包构建能力,支持实时 / 非实时平面混合关键部署,并集成分布式软总线。同时,将协同 openEuler 社区生态伙伴、用户、开发者,逐步扩展支持 PowerPC、RISC-V 等芯片架构,增加确定性时延、工业中间件、仿真系统等能力,打造嵌入式领域操作系统解决方案。 多硬件支持:新增支持树莓派作为嵌入式场景通用硬件。 3. 软实时内核:基于 Linux 5.10 内核提供软实时能力,软实时中断响应时延微秒级。 4. 混合关键性部署:实现 SOC 内实时和非实时多平面混合部署,并支持 Zephyr 实时内核。 5. 分布式软总线基础能力:集成鸿蒙的分布式软总线,实现欧拉嵌入式设备之间互联互通。 6. 嵌入式软件包支持:新增 80+ 嵌入式领域常用软件包的构建。 未来还将提供:0 码力 | 17 页 | 6.52 MB | 1 年前3
Apache ShardingSphere 中文文档 5.2.0语义理解及底层数据库拓扑感知能力,提供灵活、安全的读写分离能力,且可实现读访问的负载均衡。| |高可用|高可用,是对数据存储计算平台的基本要求。ShardingSphere 基于无状态服务,提供高可用计算服务访问;同时可感知并利用底层数据库自身高可用实现整体的高可用能力。| |数据迁移|数据迁移,是打通数据生态的关键能力。ShardingSphere 提供基于数据全场景的迁移能力,可应对业务数据量激增的场景。| |联邦查询 应用以及对分片数据库进行管理和运维的场景。 Apache ShardingSphere 是多接入端共同组成的生态圈。通过混合使用 ShardingSphere-JDBC 和 ShardingSphere-Proxy,并采用同一注册中心统一配置分片策略,能够灵活的搭建适用于各种场景的应用系统,使得架构师更加自由地调整适合于当前业务的最佳系统架构。  ## 线路规划 4.x 2019 Apache ShardingSphere 正式进入 Apache 基金会,并兼容各种关系型数据库。  5.x 20210 码力 | 508 页 | 4.44 MB | 2 年前3
StackExchange.Redis文档翻译仅仅在运行时才知道 options.AllowAdmin = true; conn = ConnectionMultiplexer.Connect(options); 在微软Azure上使用Redis并附上密码的例子: var conn = ConnectionMultiplexer.Connect("contoso5.redis.cache.windows.net,ssl=true,password= 能只执行一些操作,这取决于各自的需要)。这意味着我们仍然有这样一个问题:我们花费大量的时间去等待数据从客户端传输到服务器端。现在我们考虑一个繁忙的应用,这可能是一个web服务。这类应用通常都具有高并发性,当你有20个并行应用请求所有需要的数据,你可能想旋转(spinning up)这20个连接,或者你可以同步访问一个单独连接(这意味着最后的调用者需要等待前面19个全部执行完成才开始)。或者作为一个 / UNWATCH / MULTI / EXEC / DISCARD:这应该是混合在一起的。所以一个额外的抽象被给出:另外会让使事情更简单准确:约束。约束是预定义测试包括 WATCH 某种类型的测试并对结果进行检查。如果所有的约束都通过了,那么要么是以 MULTI / EXEC 发布(从事务开始,到执行整个事务块);要么是以 UNWATCH 发布(取消 WATCH 命令对所有 key 的监视)。阻0 码力 | 31 页 | 1.14 MB | 1 月前3
探讨和实践基于Istio的微服务治理事件监控监控工具繁杂,如何快速找到合适工具进行问题定位  偶发性问题场景复杂,如何保留发生现场  测试运维沟通鸿沟,如何提升沟通效率 立的pod当中,Mixer通过通过rpc调用,将属性与日志发送给Adapter。| |---|---| ## 基于Mixer的二次开发的流程 - 编写grpc服务端程序,接收来自mixer的数据,并实现自身业务逻辑 - 编写handler、instance、rule配置文件 - 编译打包adapter,上传至docker仓库 • 编写k8s的deployment和service配置文件 •0 码力 | 29 页 | 8.37 MB | 1 年前3
Apache ShardingSphere 中文文档 5.4.12 全部版本 …… 515 14.3 校验版本 …… 515 ### 1.1 介绍 Apache ShardingSphere 是一款分布式的数据库生态系统,可以将任意数据库转换为分布式数据库,并通过数据分片、弹性伸缩、加密等能力对原有数据库进行增强。 Apache ShardingSphere 设计哲学为 Database Plus,旨在构建异构数据库上层的标准和生态。它关注如何充分合理地 应用以及对分片数据库进行管理和运维的场景。 Apache ShardingSphere 是多接入端共同组成的生态圈。通过混合使用 ShardingSphere-JDBC 和 ShardingSphere-Proxy,并采用同一注册中心统一配置分片策略,能够灵活的搭建适用于各种场景的应用系统,使得架构师更加自由地调整适合于当前业务的最佳系统架构。  ## 线路规划 4.x 2019 Apache ShardingSphere 正式进入 Apache 基金会,并兼容各种关系型数据库。  5.x 20210 码力 | 530 页 | 4.49 MB | 2 年前3
共 1000 条
- 1
- 2
- 3
- 4
- 5
- 6
- 100
相关搜索词
Rust内存安全并发性类型推断基因GPORCAGreenplum资源组Workload Manager架构化查询语言大规模并行处理(MPP)Apache DorisROLAP模式MOLAP模式Bitmap聚合数仓应用云原生基础设施即代码开放应用模型自动化交付API管理openEuler内核创新边缘计算嵌入式Apache ShardingSphereDatabase Plus可插拔架构分布式系统数据库上层标准ShardingSphereL1内核层L2功能层L3生态层StackExchange.RedisRedis键值事务Istio微服务治理事件监控Mixer组件分布式追踪分片数据库协议兼容集群模式













