WebAssembly 简介 - 陈思衡WASM 是sandbox的,所以可以保证代码的安全 性。WASM 的模块化也让云端应用更易于构建和部署。 3. 用户定义函数(UDF):WASM UDF 安全性更高。WASM 运行在沙箱中,访问受限,可以防止恶意 UDF 对数据和系 统产生破坏。与解释执行的 UDF 相比,WASM 作为二进制格式可以获得更高的运行性能。 WASM 中 IO 阻塞问题 WASM 使用场景和问题 在 WASI0 码力 | 24 页 | 773.46 KB | 1 年前3
PromQL Got a BOOST: 用 Rust 重写 Prometheus 的查询引擎cooooooool! WHAT ARE BOOSTED PromQL is extended ? multi-field support ? new operators & UDF ? better performance ? larger dataset ? more computation resources SQL is extended BOOSTED SQL T(elemetry)QL PromQL is extended ? multi-field support ? new operators & UDF ? better performance ? larger dataset ? more computation resources SQL is extended your query with TQL ANALYZE BY REWRITING More ? ? coming soon! Metric engine More UDF in PromQL Dashboard, alert center …. 05 Outlook Rust has joined the game In cloud0 码力 | 39 页 | 6.95 MB | 1 年前3
Greenplum 精粹文集scalability),Greenplum 可以采用各种开发语言来扩展用户自定 义函数(UDF)(我个人是 Python 和 C 的 fans,后续章节与大家分享)。 这些自定义函数部署到 Greenplum 后可用充分享受到实例级别的并行 性能优势,我们强烈建议用户将库外的处理逻辑,部署到用 MPP 数 据库的 UDF 这种 In-Database 的方式来处理,你将获得意想不到的性 能和方便性;例如 要简单的改写原有代码后部署到 GP 中,通过并行计算获得数十倍性 能提高。 另外,GPTEXT(lucent 全文检索)、Apache Madlib(开源挖掘算法)、 SAS algorithm、R 都是通过 UDF 方式实现在 Greenplum 集群中分布 式部署,从而获得库内计算的并行能力。这里可以分享的是,SAS 曾 经做过测试,对 1 亿条记录做逻辑回归,采用一台小型机耗时约 4 个 多小时,通过部署到 可提供一份安装指南《Protegrity 数据库保护器 - Pivotal Greenplum》。该文件列明了在 Greenplum 主档和节点上安装 PEP 服务器所需执行的步骤,它还包含应该如何导入 Greenplum 必要的 UDF(用户自定义函数,即内嵌入数据库的小节点例程)以操作数据 并与 PEP 应用程序通信的相关说明。 为了验证安装是否成功,请查看 Protegrity 功能是否已创建。此外, 请检查 pty_whoami0 码力 | 64 页 | 2.73 MB | 1 年前3
PostgreSQL 开发最佳实践估值计算,HLL代替count(distinct xx) • 频繁更新的字段与不频繁更新的字段建议拆成多个表, 提高更新效率。 • 业务层避免死锁 • 根据业务需求调整表级autovacuum相关参数 • 内存足够时,UDF中尽量使用数组代替临时表 • JOIN的固化、子查询的固化。(plan hint OR query写法 +patameter) • GIN 索引 UPDATE 加速 2016Postgres中国用户大会 • 命名规约 • 设计规约 • 管理规约 • 稳定性与性能建议 • 云数据库使用建议 2016Postgres中国用户大会 云数据库使用建议 • 冷热分离 • 链路选择 • UDF & RT • 尽量避免公网访问 • 可用区的选择 2016Postgres中国用户大会 GIT • https://github.com/digoal/blog/blob/master/0 码力 | 16 页 | 381.36 KB | 1 年前3
Greenplum Database 管理员指南 6.2.1相似。如果一个查询使用了外部组件(如 PL/Container),该查询将会有两个部分, 一部分是查询本身在 GP 数据库中运行,而另一部分 UDF 则在 PL/Container 容器中 运行,在 GP 数据库中运行的查询本身由 ROLE 的资源组来管理,在 PL/Container 运行的 UDF 由 PL/Container 的资源组管理,后者在 pg_stat_activity 视图中 无法体现,数据库无法获取 代价愈加的凸显,应 该绝对禁止将尺寸较大的事实表使用复制分布策略! 复制表的主要应用场景: 在复制表上没有UDF无法在Instance上查询的限制,以前,UDF如果访问了业务 表,则不允许在Instance上执行,而如果访问的是复制表,UDF在Instance上 允许对该表进行只读的查询,当然,修改数据的操作仍然是不被允许的。 对于与其他表关联时需要被广播的 在6版本中,删除了Filespace的概念,所以,也删除了pg_filespace和 pg_filespace_entry两张系统表。 对于DDL备份来说,如果UDF引用了的自定义类型或者其UDF,而该自定义类 型或者UDF的定义在DDL备份文件的后面部分,则UDF的恢复会失败,不过可 以尝试多执行几次DDL恢复来解决这类依赖问题。 在4.3版本,可读外部表支持INTO error_table,而该特性从5版本开始已经被0 码力 | 416 页 | 6.08 MB | 1 年前3
Pivotal Greenplum 5.0 - 开源MPP 数据库的不二之选Functions • Improved XML Type/Functions • UUID Type • Anonymous Code Blocks (Do statement) • UDF default and Variadic parameters • DBLink • Raster PostGIS • Python 2.7.12 • Lazy XID (less0 码力 | 18 页 | 913.39 KB | 1 年前3
【05 计算平台 蓉荣】Flink 批处理及其应⽤Batch应⽤用 - 数据湖 Data Lake vs. Data Warehouse Flink Batch应⽤用 - 数据湖 Flink Batch应⽤用 - 数据湖 Blink SQL+UDF Queue 存储类 存储 计算 存储 Queue 存储类 • Kafka • Datahub • SLS • MQ • OSS • OTS • HBase • RDS •0 码力 | 12 页 | 1.44 MB | 1 年前3
2023 中国开源开发者报告在读写混合场景上有 30~40% 的性能提升,可以作为开源 MySQL 的最佳替代选择。 5 倍提升,NebulaGraph v3.5.0 支持 UDF、重构索引 在年中发布的 v3.5.0 版本主要是优化了 FIND ALL PATH 性能,支持了 UDF 功能。其中,FIND ALL PATH 的深度性能有大约 50-500%的提升,其中 1 to 5 steps 大约有 600%的提升;Match2HOP_count0 码力 | 87 页 | 31.99 MB | 1 年前3
PieCloudDB Database V2.8 Release NoteKafka FDW 支持 JSON 格式。 l 执行计划信息 支持在 EXPLAIN ANALYZE VERBOSE 执行结果中显示调度相关状态信息。 4 l 用户定义函数 UDF n 新增 janm_page_size_read,用以获取 Page 大小。 n 新增 janm_block_file_size_read,用以获取 Block 文件大小。 n0 码力 | 4 页 | 144.49 KB | 1 年前3
Greenplum上云与优化2016Postgres中国用户大会 支持OSS外部表读写 主节点 子节点 子节点 子节点 子节点 子节点 子节点 子节点 子节点 Insert into T_GP Select my_udf(name) from T_OSS Where ts > 2016 Insert into T_OSS Select count(*) from T_GP Group by city OSS作为“数据湖”,GP作为分析引擎0 码力 | 26 页 | 1.13 MB | 1 年前3
共 19 条
- 1
- 2













