云时代下多数据计算引擎的设计与实现## 云时代下多数据计算引擎的设计与实现 郭罡 CTO 拓数派(OpenPie) ## 关于拓数派 - 成立于2021年,以 “Data Computing for New Discoveries” 「数据计算,只为新发现」为使命。 - 核心团队来自于各大厂名校,有丰富的数据库(Greenplum,DB2,ClickHouse等)研发和产业经验. - 产品 πDataCS:多计算引擎,包括 πDataCS:多计算引擎,包括自研分布式数据库PieCloudDB,自研分布式向量数据库等. • PieCloudDB 存储底座是各计算引擎的载体. • 已落地或者正在落地:IoT、金融、新能源、医疗等行业. ## 云时代 多数据模态支持 广泛的生态支持 ## 数据计算 “一份数据,多引擎计算”的述求 让数据流动起来 ## PieCloudDB 简介 ## 一 款云原生分布式 ## 分析型数据库 • 元数据、用户数据、计算完全分离 元数据、用户数据、计算完全分离. - 用户数据(code name: Janm)支持 S3/HDFS/Posix. • 架构:Share Nothing on share storage. • 丰富的外围产品支持. ## Postgres生态 • 将来会支持单机和HTAP. ## 软件交付版本 (最新版本:v2.11) • 社区版 · 企业版 · CoC(云上云)版 ## PDB数据库产品体系0 码力 | 15 页 | 3.09 MB | 1 年前3
面向亿行 C/C++ 代码的静态分析系统设计及实践-肖枭## 面向亿行C/C++代码的 静态分析系统设计及实践 肖枭 ## 500+高端科技领导者与你一起探讨 技术、管理与商业那些事儿 2019年6月14–15日 上海圣诺亚皇冠假日酒店  ? 渴望成为质量、效率和简单的冠军。 • 有自己的观点。 • 重视反省和自我检讨。 Go语言应该是这样的 · 易于阅读代码 - 对遗存软件友好 • 心智模型 • 生产率与性能 • 正确性与性能 • 规则 • 方便代码评审 - 完整性 - 可读性 - 简单性 - 性能 - 微优化 ## Golang-设计哲学 面向数据的设计(Data-Oriented Design) “数据占主导地位。如果您选择了正确的数据结构,并且组织得很好,那么算法几乎总是不言自明的。数据结0 码力 | 21 页 | 851.30 KB | 2 年前3
大模型时代下向量数据库的设计与应用大模型时代下向量数据库的设计与应用 msup $ ^{®} $ | ARCHNOTES 架構 ## 个人简介  邱培峰 拓数派向量数据库负责人 目前在拓数派负责向量数据库PieCloudVector产品,聚焦于大模型与大数据领域。拥有多 年数据库内核研发和配套解决方案架构经验,在加入拓数派前曾就职于开源大数据平台Greenplum团队,担任外部数据源访问框架,对象存储访问扩展,ETL工具等产品模块的研发,并曾参与PostgreSQL多个版本的代码贡献,拥有丰富的存储模块核心开发和性能优化等实践经验。 ## 拓数派:大模型数据计算系统先行者 - 拓数派(OpenPie)是立足于国内的基础数据计算领域高科技创新机构; 拥有强大的数 拥有强大的数据库内核研发团队、数据科学团队和数字化转型团队; - 国内虚拟数仓和eMPP技术提出者,不断在数据计算引擎方向进行创新,全面拥抱AI技术趋势。 # 虚拟数仓 拓数派/数仓虚拟化 PieCloudDB产品技术 数企虚拟化由拓数派(杭州拓数派科技发展有限公司,又称“OpenPie”)于2023年3月正式提出。 数仓虚拟化 $ ^{[1]} $ 可将物理数仓整合到云原生数据计算平台 $ ^{[2]}0 码力 | 28 页 | 1.69 MB | 1 年前3
Node 的设计错误## Node 的设计错误 Ryan Dahl JS Conf 柏林 2018.06 ## 背景: 1. 基于最初的开发,我创建了并管理 Node。 2. 我的主要关注目标是事件驱动的 HTTP server。 3. 这一主要目标对当时服务器端的 JavaScript 起着关键作用。即使在当时这一点不那么明显,但是服务器端 JS 的成功需要事件循环的助力。 ## 背景: 2012 年我离开 Node(或多或少)实现了我的预定目标:创建一个用户友好的非阻塞框架,具体内容如下 1 核心支持许多协议:HTTP,SSL... 2. 在 Windows(使用 IOCP)Linux(EPOLL)和MAC(KQuey)上跨平台工作。 3. 一个比较稳定的相对较小的核心API。 4. 通过 NPM 增加外部模块的生态系统。 但我错了...因为还有许多问题仍待解决..... ## 使得 Node 保持增长的几项关键工作 1. NPM(Isaac 开发)将核心 Node 库解耦并允许生态系统的分布。 2. N-API 是设计精美的绑定API。 3. Ben Noordhuis 和 Bert Belder 构建了 libuv。 4. Mikeal Rogers 组织了管理活动和社区。 5. Fedor Indutny 在代码基础上产生了巨大的影响,尤其是在加密中。 6. 还有许多为 Node 增长作出贡献的人:0 码力 | 28 页 | 767.84 KB | 2 年前3
Zadig 面向开发者的云原生 DevOps 平台## ZADIG:面向开发者的自助式云原生 DevOps 平台 协助产研团队实现云原生持续交付,帮助企业以更先进、更经济、更安全、更轻便的方式实现数字化研发转型  ## 为数千家企业所信赖 Revcbit inspur浪潮  ## 为数千家企业所信赖 Revcbit inspur 浪潮园  openEuler 是? openEuler 是由开放原子开源基金会 (OpenAtom Foundation)孵化及运营的开源项目  openEuler 愿景 为世界提供数字基础设施的开源操作系统  openEuler 使命 openEuler 技术优势 Information Technology Communication Technology Operational Technology 主流应用:云原生,大数据,CDN,MEC,工业控制… 主流应用场景100%支持 覆盖全场景应用 












