Doris的数据导入机制以及原子性保证
Phase 2 总结 03 Doris 中的导入 • 写入带版本 • 查询带版本 多版本机制解决读写冲突 两阶段导入保证多表原子生效 • 支持并行导入 • 有冲突时按导入顺序生效,无冲突导入时并行生效 写入带版本 查询带版本 支持并行导入 冲突时按顺序生效 (多版本机制) (两阶段导入) 事务能力保证 使用案例 04 BI Application 数据加载0 码力 | 33 页 | 21.95 MB | 1 年前3Java 应用与开发 - Java 内存模型与分配机制
大纲 Java 内存模型 Java 程序内存运行分析 Java 内存管理建议 Java 应用与开发 Java 内存模型与分配机制 王晓东 wangxiaodong@ouc.edu.cn 中国海洋大学 September 30, 2018 大纲 Java 内存模型 Java 程序内存运行分析 Java 内存管理建议 学习目标 1. 理解 JVM 内存模型,掌握 JVM 内存构成 2 Java 程序内存运行分析 Java 内存管理建议 大纲 Java 内存模型 Java 程序内存运行分析 Java 内存管理建议 Java 垃圾回收机制 JVM 的垃圾回收机制(GC)决定对象是否是垃圾对象,并进行 回收。 O 垃圾回收机制的特点 ▶ 垃圾内存并不是用完了马上就被释放,所以会产生内存释放 不及时的现象,从而降低内存的使用效率。而当程序庞大的 时候,这种现象更为明显。 ▶0 码力 | 44 页 | 818.30 KB | 1 年前3Java 应用与开发 - 异常处理
异常的概念及分类 Java 异常处理机制 Java 应用与开发 异常处理 王晓东 wangxiaodong@ouc.edu.cn 中国海洋大学 October 30, 2018 大纲 异常的概念及分类 Java 异常处理机制 学习目标 1. 掌握 Java 异常的概念和分类 2. 深入理解 Java 异常处理机制 大纲 异常的概念及分类 Java 异常处理机制 大纲 异常的概念及分类 异常的概念及分类 Java 异常处理机制 大纲 异常的概念及分类 Java 异常处理机制 C++ 中的异常处理 O 《The C++ Programming Language》 ▶ 一个库的作者可以检测出发生了运行时错误,但一般不知道 怎样去处理它们(因为和用户具体的应用有关); ▶ 另一方面,库的用户知道怎样处理这些错误,但却无法检查 它们何时发生(如果能检测,就可以再用户的代码里处理 了,不用留给库去发现)。 了,不用留给库去发现)。 提供异常处理机制的的基本思想 让一个函数在发现了自己无法处理的错误时抛出(throw)一个 异常,然后它的(直接或者间接)调用者能够处理这个问题。 O 《C++ primer》 将问题检测和问题处理相分离。 (Exceptions let us separate problem detection from problem resolution.) 大纲 异常的概念及分类0 码力 | 33 页 | 626.40 KB | 1 年前3Java 应用与开发 - Java 技术概述及开发环境
大纲 Java 技术概述 Java 平台核心机制 Java 开发环境 Java 基本开发流程 Java 应用与开发 Java 技术概述及开发环境 王晓东 wangxiaodong@ouc.edu.cn 中国海洋大学 September 18, 2018 大纲 Java 技术概述 Java 平台核心机制 Java 开发环境 Java 基本开发流程 参考书目 1. 陈国君等编著, Java Java 技术概述 Java 平台核心机制 Java 开发环境 Java 基本开发流程 本章学习目标 1. 了解 Java 的发展历程 2. 理解 Java 平台的相关概念和机制 3. 掌握基本 Java 开发环境配置 大纲 Java 技术概述 Java 平台核心机制 Java 开发环境 Java 基本开发流程 大纲 Java 技术概述 Java 平台核心机制 Java 开发环境 Java Java 技术概述 Java 平台核心机制 Java 开发环境 Java 基本开发流程 ���� Java 技术概述 Java 平台核心机制 Java 开发环境 Java 基本开发流程 大纲 Java 技术概述 Java 平台核心机制 Java 开发环境 Java 基本开发流程 那些伟大的 LOGO 大纲 Java 技术概述 Java 平台核心机制 Java 开发环境 Java 基本开发流程0 码力 | 33 页 | 1.17 MB | 1 年前3Apache RocketMQ 从入门到实战
1.2 生产环境中,autoCreateTopicEnable 为什么不能设置为 true 18 1.3 实战:RocketMQ 学习环境搭建指南篇 28 1.4 RocketMQ HA 核心工作机制 39 1.5 踩坑记:rocketmq-console 消费 TPS 为 0,但消息积压数却在降低是个什么 “鬼” 49 1.6 RocketMQ 一个新的消费组初次启动时从何处开始消费呢? 64 有了新的称号,那就得更加努力,朝着优秀努力,在 2019 年我又陆续发表了 20 几篇 关于 RocketMQ 相关的文章,这些文章含金量极高,不仅及时跟进了 RocketMQ4.3.0 之后的新特性:消息轨迹、ACL、主从切换等机制,更是发表了数篇实战类文章,详细指 出在生产环境下一些使用误区,更是输出了几篇生产环境真实故障与解决方案。最终于 20 19 年 RocketMQ 官方社区授予我优秀布道师荣誉称号。 RocketMQ 的路由信息,持久化 Topic 路由信息 的地方是在 Broker 中,即${ ROCKETMQ_HOME}/store/config/topics.json。 在 RocketMQ4.5.0 版本后引入了多副本机制,即一个复制组(m-s)可以演变为基 于 raft 协议的复制组,复制组内部使用 raft 协议保证 broker 节点数据的强一致性,该部署 架构在金融行业用的比较多。 二、消息订阅模型 在0 码力 | 165 页 | 12.53 MB | 1 年前3curvefs client删除文件和目录功能设计
相关调研 moosefs chubaofs 方案设计思考 1.Trash机制是实现1个(类似chubaofs),还是2个(类似moosefs)? 2. Trash放在哪里? 3. 是否需要做session机制(在metaserver打开),来维护inode的打开情况? 方案设计 Trash机制: Session机制: 遗留问题 工作量评估 背景 目前curvefs client moosefs 未对接forget moosefs 实现了在mds上open,因此删除时可以判断文件是否被打开 moosefs使用了两种机制,来实现上述功能,分别是trash机制和reserve机制(最新版本叫sustained),两种机制如下: trash机制: 对于所有TYPE_FILE类型的文件在删除时, ,则不会立即将该文件彻底删除,而是将其类型修改为TYPE_TRASH并且将该节点从 若其trashtime大于0 站。 通过META文件系统来访问trash 通过trash机制,可实现文件的恢复UNDEL 回收站实现了一个timer,定期判断trashtime,执行定期清理回收站 清理时,当文件仍处于打开状态,则还需要进入下sustained/reserve中。 sustained机制/reserve机制 当一个trashtime等于0的TYPE_FILE类型的文件被一个客户端正0 码力 | 15 页 | 325.42 KB | 5 月前3百度超级链 XuperChain 3.12-a中文文档
较好。支持可插拔,从而可以支持不同的 业务场景 智能合 约 自研并实现了一套智能合约虚拟机XVM,支持丰富的开发语言, 智能合约之间并发执行, 支持执行消耗资源,避免恶意攻击 提案 一种解决系统升级问题的机制。比如修改区块大小,升级共识算 法。提案整个过程涉及 到发起提案、参与投票、投票生效三个阶 段 账号与 权限 为了满足合约调用的权限控制,保证XuperChain网络的健康运 转,自研并实现了一套 计算 算子。同时可以使用mesatee-core-standalone快速扩展算子,这些基 本运算几乎可以满足用户对任何复杂计算功能的需求。 隐私和保密 XuperChain支持多种隐私保护和保密机制,包括但不限于: 1. 数据在p2p网络中采用ECDH加密传输,保障区块链数据的安全性; 2. 通过助记词技术,在用户私钥丢失的情况下可以恢复; 3. 多私钥保护的账号体系; 4. 基于椭圆曲线算法的公私钥加密和签名体系; 定阈值,就可以调用合约 AK集合: 定义多组AK集合,集合内的AK需要全部签名,集合间只要有 一个集合有全部签名即可 访问控制列表(ACL) 如果把合约账号当作一家股份制公司,那么ACL便是公司股东投票的机制, ACL可以规定合约账号背后各“股东”账号的权重,只有当“股东”签名的权重 之和大于设定阈值时操作才会有效地进行。 超级链中ACL配置格式如下: 1 2 3 4 5 6 7 8 9 10 {0 码力 | 336 页 | 12.62 MB | 1 年前3百度超级链 XuperChain 3.12-c 中文文档
较好。支持可插拔,从而可以支持不同的 业务场景 智能合 约 自研并实现了一套智能合约虚拟机XVM,支持丰富的开发语言, 智能合约之间并发执行, 支持执行消耗资源,避免恶意攻击 提案 一种解决系统升级问题的机制。比如修改区块大小,升级共识算 法。提案整个过程涉及 到发起提案、参与投票、投票生效三个阶 段 账号与 权限 为了满足合约调用的权限控制,保证XuperChain网络的健康运 转,自研并实现了一套 计算 算子。同时可以使用mesatee-core-standalone快速扩展算子,这些基 本运算几乎可以满足用户对任何复杂计算功能的需求。 隐私和保密 XuperChain支持多种隐私保护和保密机制,包括但不限于: 1. 数据在p2p网络中采用ECDH加密传输,保障区块链数据的安全性; 2. 通过助记词技术,在用户私钥丢失的情况下可以恢复; 3. 多私钥保护的账号体系; 4. 基于椭圆曲线算法的公私钥加密和签名体系; 定阈值,就可以调用合约 AK集合: 定义多组AK集合,集合内的AK需要全部签名,集合间只要有 一个集合有全部签名即可 访问控制列表(ACL) 如果把合约账号当作一家股份制公司,那么ACL便是公司股东投票的机制, ACL可以规定合约账号背后各“股东”账号的权重,只有当“股东”签名的权重 之和大于设定阈值时操作才会有效地进行。 超级链中ACL配置格式如下: 1 2 3 4 5 6 7 8 9 10 {0 码力 | 336 页 | 12.62 MB | 1 年前3百度超级链 XuperChain 3.12 中文文档
较好。支持可插拔,从而可以支持不同的 业务场景 智能合 约 自研并实现了一套智能合约虚拟机XVM,支持丰富的开发语言, 智能合约之间并发执行, 支持执行消耗资源,避免恶意攻击 提案 一种解决系统升级问题的机制。比如修改区块大小,升级共识算 法。提案整个过程涉及 到发起提案、参与投票、投票生效三个阶 段 账号与 权限 为了满足合约调用的权限控制,保证XuperChain网络的健康运 转,自研并实现了一套 计算 算子。同时可以使用mesatee-core-standalone快速扩展算子,这些基 本运算几乎可以满足用户对任何复杂计算功能的需求。 隐私和保密 XuperChain支持多种隐私保护和保密机制,包括但不限于: 1. 数据在p2p网络中采用ECDH加密传输,保障区块链数据的安全性; 2. 通过助记词技术,在用户私钥丢失的情况下可以恢复; 3. 多私钥保护的账号体系; 4. 基于椭圆曲线算法的公私钥加密和签名体系; 定阈值,就可以调用合约 AK集合: 定义多组AK集合,集合内的AK需要全部签名,集合间只要有 一个集合有全部签名即可 访问控制列表(ACL) 如果把合约账号当作一家股份制公司,那么ACL便是公司股东投票的机制, ACL可以规定合约账号背后各“股东”账号的权重,只有当“股东”签名的权重 之和大于设定阈值时操作才会有效地进行。 超级链中ACL配置格式如下: 1 2 3 4 5 6 7 8 9 10 {0 码力 | 336 页 | 12.62 MB | 1 年前3百度超级链 XuperChain 3.12-b 中文文档
较好。支持可插拔,从而可以支持不同的 业务场景 智能合 约 自研并实现了一套智能合约虚拟机XVM,支持丰富的开发语言, 智能合约之间并发执行, 支持执行消耗资源,避免恶意攻击 提案 一种解决系统升级问题的机制。比如修改区块大小,升级共识算 法。提案整个过程涉及 到发起提案、参与投票、投票生效三个阶 段 账号与 权限 为了满足合约调用的权限控制,保证XuperChain网络的健康运 转,自研并实现了一套 计算 算子。同时可以使用mesatee-core-standalone快速扩展算子,这些基 本运算几乎可以满足用户对任何复杂计算功能的需求。 隐私和保密 XuperChain支持多种隐私保护和保密机制,包括但不限于: 1. 数据在p2p网络中采用ECDH加密传输,保障区块链数据的安全性; 2. 通过助记词技术,在用户私钥丢失的情况下可以恢复; 3. 多私钥保护的账号体系; 4. 基于椭圆曲线算法的公私钥加密和签名体系; 定阈值,就可以调用合约 AK集合: 定义多组AK集合,集合内的AK需要全部签名,集合间只要有 一个集合有全部签名即可 访问控制列表(ACL) 如果把合约账号当作一家股份制公司,那么ACL便是公司股东投票的机制, ACL可以规定合约账号背后各“股东”账号的权重,只有当“股东”签名的权重 之和大于设定阈值时操作才会有效地进行。 超级链中ACL配置格式如下: 1 2 3 4 5 6 7 8 9 10 {0 码力 | 336 页 | 12.62 MB | 1 年前3
共 704 条
- 1
- 2
- 3
- 4
- 5
- 6
- 71