Ceph分布式存储实战 (云计算与虚拟化技术丛书)# Ceph分布式存储实战 Ceph中国社区 著 十余位专家联袂推荐,Ceph中国社区专家撰写,权威性与实战性毋庸置疑。 系统介绍Ceph设计思想,三大存储类型与实际应用,高级特性,性能测试,调优与运维。  (云计算与虚拟化技术丛书) Ceph分布式存储实战 Ceph中国社区著 ISBN: 978-7-111-55358-8 本书纸版由机械工业出版社于2016年出版,电子版由华章分社(北京华章图文信息有限公司,北京奥维博世图书发行有限公司)全球范围内制作与发行。 版权所有,侵权必究 客服热线:+86-10-68995265 客服信箱:service@bbbvip.com 官方网址:www.hzmedia.com.cn 第2章 存储基石RADOS 2.1 Ceph功能模块与RADOS 2.2 RADOS架构 2.2.1 Monitor介绍 2.2.2 Ceph OSD简介 2.3 RADOS与LIBRADOS 2.4 本章小结 第3章 智能分布CRUSH 3.1 引言 3.2 CRUSH基本原理 3.2.1 Object与PG 3.2.2 PG与OSD 30 码力 | - 页 | 13.97 MB | 1 年前3
云时代下多数据计算引擎的设计与实现## 云时代下多数据计算引擎的设计与实现 郭罡 CTO 拓数派(OpenPie) ## 关于拓数派 - 成立于2021年,以 “Data Computing for New Discoveries” 「数据计算,只为新发现」为使命。 - 核心团队来自于各大厂名校,有丰富的数据库(Greenplum,DB2,ClickHouse等)研发和产业经验. - 产品 πDataCS:多计算引擎,包括自研 πDataCS:多计算引擎,包括自研分布式数据库PieCloudDB,自研分布式向量数据库等. • PieCloudDB 存储底座是各计算引擎的载体. • 已落地或者正在落地:IoT、金融、新能源、医疗等行业. ## 云时代 多数据模态支持 广泛的生态支持 ## 数据计算 “一份数据,多引擎计算”的述求 让数据流动起来 ## PieCloudDB 简介 ## 一 款云原生分布式 ## 分析型数据库 • 元数据、用户数据、计算完全分离 元数据、用户数据、计算完全分离. - 用户数据(code name: Janm)支持 S3/HDFS/Posix. • 架构:Share Nothing on share storage. • 丰富的外围产品支持. ## Postgres生态 • 将来会支持单机和HTAP. ## 软件交付版本 (最新版本:v2.11) • 社区版 · 企业版 · CoC(云上云)版 ## PDB数据库产品体系0 码力 | 15 页 | 3.09 MB | 1 年前3
AGI 趋势下的云原生数据计算系统· 上海站 · 第 104 期 AGI趋势下的云原生数据计算系统 演讲人:徐阳 ## 拓数派:大模型数据计算系统先行者 企业介绍 ● 拓数派(OpenPie)是立足于国内的基础数据计 算领域高科技创新机构; ● 拥有强大的数据库内核研发团队、数据科学家团队和数字化转型团队; ● 国内虚拟数仓和eMPP技术提出者,不断在数据 计算引擎方向进行创新,全面拥抱AI技术趋势。 ## 经濟日報 s/e/b/7/c/eb7c6de079426c7bf43ef4dfa4ab8c6a/p2_2.jpg) 发明名称:一种元数据访问方法、装置和存储介质 发明人:王湜舟:杨峻峰:冯雷 专利号:ZL202211418015.0 “在大模型数据计算系,AI数学模型、数据和三者将前所未有地无接、互为增强,创造出的社会经济效益,成为社会高质量发展的新力。”杭州拓数派科技有限公司(以下简称效派)创始 在接受记者采访时说。目前,拓数派已发布基APP分布式技术的存算件一体机,适配信能够为企业降低运省开发时间;旗下拟数仓,可将物理到云原生数据计算量更大模型所需的算。冯留说,自成石数派专注于数据,即将推出拓数派据计算系统,成为科技底座,开启AI范式,助力企业充分发挥数据规模优能业务发展。 本报记者 李治国 数仓虚拟化 PieCloudDB产品技术 编辑 讨论 上传视频 拓数派/数仓虚拟化0 码力 | 26 页 | 2.84 MB | 1 年前3
高可用分布式流数据存储设计-李玥## 高可用分布式流数据存储设计 李玥 京东集团 技术架构部 架构师 ## TGO鲲鹏会 汇聚全球科技领导者的高端社群 全球12大城市 850+高端科技领导者 使命 Mission 为社会输送更多优秀的 科技领导者 ## 愿景 Vision 构建全球领先的有技术背景 优秀人才的学习成长平台  ## 自我介绍 ## 李玥 京东集团 技术架构部 架构师 负责主导设计新一代京东消息中间件系统,专注于流数据的一致性分发和可靠存储、分布式实时计算和高可用分布式系统架构等技术领域。 从事互联网研发、架构10余年,曾在浪潮集团、当当网等公司从事架构相关工作。2017年加入京东,期间提升京东商城相关系统的性能和吞吐量数倍。 能与开源。 Why 有什么用? What 如何定位?如何融入生态系统? How 如何实现?如何优化? ## 目录 ## WHY ## 为什么需要流数据存储? ## 那些年的服务 单体应用 烟筒式 SOA 微服务 ## 这些年的数据 Services ## ☐ → ☐ Data Hive ES HBase HDFS KV ## 我们的愿景 Services ## O0 码力 | 36 页 | 6.02 MB | 2 年前3
海尔实时计算平台技术选型与实践INTERNATIONAL SOFTWARE DEVELOPMENT CONFERENCE BEIJING 2017 # 海尔实时计算平台技术选型与实践 海尔电器 - 肖云 主办方 Geekbang. InfoQ 极客邦科技 ## 促进软件开发领域知识与创新的传播  AD-Hoc Dashboard 搜索 数据处理 信息层系统 Hadoop+MySQL 数据层系统 Hadoop CRM 数据收集 用户统一视图 境像层系统 Hadoop  数据门户 视图 内部应用 应用汇总层 业务中间层 源系统 DW层 用户 ODS层(离线)0 码力 | 41 页 | 3.21 MB | 2 年前3
大数据集成与Hadoop - IBM大数据集成与 Hadoop 可最大限度降低Hadoop计划风险并提高ROI的最佳实践  IBM $ ^{®} $ ## 简介 Apache Hadoop技术通过支持新的流程和架构,不断改进大数据措施的经济性和活力,这样不仅有助于削减 一个开源软件项目,支持在多个商业服务器群集间分散处理和存储大型数据集,并可根据需求变化从单一服务器扩展到数以千计的服务器。主要的Hadoop组件包括Hadoop Distributed File System(用于存储大型文件)和Hadoop分布式并行处理框架(称为MapReduce)。 但是,Hadoop基础架构本身并没有提供完整的大数据集成解决方案,摆在人们面前的既有挑战,也有机遇,只有处理 ## 大数据集成对于Hadoop措施的重要性 Hadoop的迅速崛起推动企业在如何抽取、管理、转换、存储和分析大数据方面实现了范式转变。无论是要更深入的分析,还是希望获得更出色的洞察、新产品、新服务以及更高的服务水平,都可以通过这项技术一一实现,从而大幅降低成本并创造新的收入。 依靠收集、移动、转换、清除、集成、治理、探索以及分析多种不同来源的大量不同类型的数据来实现大数据与Hadoop项0 码力 | 16 页 | 1.23 MB | 2 年前3
Greenplum数据仓库UDW - UCloud中立云计算服务商Greenplum数据仓库 UDW 产品文档 优刻得科技股份有限公司 版权所有 ## 目录 目录 2 概览 6 产品架构 7 云数据仓库产品架构 7 高可用 8 快速上手 10 一、创建数据仓库 10 二、连接数据仓库 16 操作指南 38 关闭数据仓库 38 启动数据仓库 39 重启数据仓库 39 查看数据仓库详情 39 扩容数据仓库 40 更改数据仓库密码 43 续费 44 删除数据仓库 45 查看操作日志 46 查看监控 47 访问UDW数据仓库 50 1 客户端工具访问UDW 50 2 图形界面的方式访问UDW 71 数据导入 73 insert加载数据 73 copy加载数据 73 73 外部表并行加载数据 74 从hdfs加载数据 74 从mysql中导入数据 74 从oracle中导入数据 74 从file加载数据 75 开发指南 76 1、连接数据库 76 2、数据库管理 79 3、模式管理 81 4、表格设计 82 5、加载数据 90 6、分区表 920 码力 | 206 页 | 5.35 MB | 2 年前3
构建基于富媒体大数据的弹性深度学习计算平台d/1/1/cd11ba0b707be61cb140b86841b53505/p1_1.jpg) BEIJING 2017 # 构建基于富媒体大数据的弹性深度学习计算平台 SPEAKER / 土土@七牛 AtLab ## 促进软件开发领域知识与创新的传播  + Ideea ## Connect 数据处理 数据存储 直播点播 数据加速 QINIU QCon[北京站]2017  ## 每天超过10亿图像上传 超过万亿小时的音视频存储 0 0 内容审核团队 ## What are they? 运营分析团队 ## Content 分类 描述 检测 搜索 分割 分析 跟踪 ## 连接 ## 智能 0 0 ## 人工智能 = 大数据 + 机器学习 0 ## Ataraxia AI Lab (AtLab) CHICHE0 码力 | 21 页 | 1.71 MB | 2 年前3
兼容龙蜥的云原生大模型数据计算系统:πDataCS## 兼容龙蜥的云原生大模型数据计算系统 ## --πDataCS简介 ## 吴疆 拓数派产品市场总监  ## 吴疆 拓数派(Openpie)产品市场总监 深耕云计算和数据库行业十余年 毕业于清华大学计算机系,先后在IBM,EMC ,Pivotal,VMWare参与多个云平台和数据库项目 01 拓数派简介 02 πDataCS简介 03 πDataCS与龙晰 ### 01. 拓数派简介 # 全球数据计算系统引领者 杭州拓数派科技发展有限公司(又称"OpenPie")是立足于国内,基础数据计算领域的高科技创新机构。作为国内云上数据库和数据计算领域的引领者,拓数派以“Data Computing for for New Discoveries”「数据计算,只为新发现」为使命,致力于在数字原生时代,运用突破性计算理论、独创的云原生数据库旗舰产品以及之上的算法和数学模型,建立下一代云原生数据平台的前沿标准,驱动企业实现从"软件公司"到"数据公司"再到"数学公司"的持续进阶。 拓数派旗下大模型数据计算系统(PieDataComputing System,0 码力 | 29 页 | 7.46 MB | 1 年前3
Al原生数据库与RAG## AI原生数据库与RAG  张颖峰 英飞流(上海)信息科技有限公司创始人  RAG技术实践 01 Infinity系统架构 02 ## 第一部分 RAG技术实践 ## 基于向量数据库的RAG解决方案 文档 文本块 LLM  提示词 ## LLM对企业信息架构的改变  网站  数据库  文档 












