Greenplum数据仓库UDW - UCloud中立云计算服务商⽅式连接 Linux操作系统:CentOS 6.5 64位 1. 安装 postgresql odbc驱动 # yum install postgresql-odbc.x86_64 -y 2. 编辑/etc/odbcinst.ini⽂件,配置odbc驱动 Description = ODBC for PostgreSQL Driver = /usr/lib/psqlodbc.so Setup 1 3. 测试ODBC驱动是否安装成功 # odbcinst -q -d [PostgreSQL] 如果出现以上输出,代表在这台机器上已成功安装了PostgreSQL的ODBC驱动。 4. 编辑/etc/odbc.ini⽂件配置ODBC连接 快速上⼿ Greenplum数据仓库 UDW Copyright © 2012-2021 UCloud 优刻得 21/206 [testdb]Description ufileos.com/greenplum-client.tar tar -zxvf greenplum-client.tar.gz 2)配置udw客⼾端 进⼊ greenplum-client 安装⽬录,编辑 greenplum_client_path.sh 修改UDW_HOME(export UDW_HOME= client安装⽬录)(如/root/greenplum-client) 3) 使配置⽣效0 码力 | 206 页 | 5.35 MB | 1 年前3
Greenplum Database 管理员指南 6.2.1.......................................................................................... - 34 - 编辑 pg_hba.conf 文件 ................................................................................... 管理与监控 对 GP 系统的管理,可以通过一系列的命令行来实现,它们都存放在$GPHOME/bin 目录下。GP 提供的命令可以实现如下的管理任务: 在多个主机上批量执行命令(gpssh) 初始化 GP 集群(gpinitsystem) 启动(gpstart)或关闭 GP 集群(gpstop) Greenplum Database 文档的认证方法部分。 编辑 pg_hba.conf 文件 下面的例子展示如何编辑 Master 上的 pg_hba.conf 文件从而允许远程的客户 端通过加密认证的方式访问数据库。 编辑 pg_hba.conf 文件 1. 使用文本编辑器(例如 VI)打开$MASTER_DATA_DIRECTORY/pg_hba.conf 文 件,并进入编辑状态。 2. 为每0 码力 | 416 页 | 6.08 MB | 1 年前3
Greenplum 精粹文集表空间的方式,并将随机 IO 类应用对 应的表放在 SSD 设备上,从而有效的隔离底层 IO,达到更好 SLA。 某电信用户存在大量对 400 个字段以上大宽表的随机查询场景,之 前由于 IO 资源争用,在批量作业调起时随机查询响应时间显著增加, 通过这种方式改造后,达到了很好的效果。 ·预留一台硬件服务器作为整个集群的灾备机,提前装好操作系统和 数据库软件,并放在与现有集群相同的网络环境中,一旦硬件出现 16-11-22 下午3:38 Greenplum 精粹文集 33 ·统计信息收集:统计信息的准确性影响到运行效率,用户表应该及 时收集统计信息。在应用程序中增加手机统计信息的处理逻辑,通 过脚本定时批量收集统计信息,或者两者相结合。针对分区表日常 可按需收集子分区的统计信息,可节省时间提升效率。 ·表倾斜:表倾斜情况应该 DBA 的关注点之一,但无需每天处理。 ·表膨胀:基于 postgresql0 码力 | 64 页 | 2.73 MB | 1 年前3
并行不悖- OLAP 在互联网公司的实践与思考数据库数据传输与同步-db_sync 30 Greenplum运维体系 数据库数据传输与同步-db_sync 31 Greenplum运维体系 Greenplum任务调度 • greenplum内部存储过程调度 Ø大批量任务采用 kettle调度 Ø单个存储过程,可以在shell中 select func_name() 的方式调度 • 外部任务调度 Ø将整个过程封装成shell脚本,或 Python脚本 Ø用crontab在操作系统调用脚本0 码力 | 43 页 | 9.66 MB | 1 年前3
Greenplum机器学习⼯具集和案例3 4 5 6 改进后的 in-database 流程 2017.thegiac.com 数据编辑/整理理 之前 之后 性能提升 ● 181 ⾏行行代码 ● 75 分钟 ● 116 ⾏行行代码 ● 8 分钟 9.35x 特征编辑 ● 439 特征 ● 4,517 ⾏行行代码 ● 100 分钟 ● 934 特征 ●0 码力 | 58 页 | 1.97 MB | 1 年前3
Greenplum 6新特性:
在线扩容工具GPexpand剖析• 数据重分布 – gpexpand • 清理 – gpexpand -c GPExpand简介与具体用法 • 增加新节点 – gpexpand –i 配置文件(gpexpand生成或手动编辑) sdw:sdw:25438:/data/expand1/primary:9:3:p sdw:sdw:25439:/data/expand1/mirror:10:3:m GPExpand简介与具体用法0 码力 | 37 页 | 1.12 MB | 1 年前3
共 6 条
- 1













