Brin Index主Greenplum 7中的理论与实现0 码力 | 32 页 | 1.04 MB | 1 年前3
 Greenplum数据仓库UDW - UCloud中立云计算服务商DEFAULT } ALTER DATABASE 名字 RESET 参数 ALTER DATABASE 名字 RENAME TO 新名字 ALTER DATABASE 名字 OWNER TO 新属主 命令: ALTER FUNCTION 描述: 改变⼀个函数的定义 语法: 开发指南 Greenplum数据仓库 UDW Copyright © 2012-2021 UCloud 优刻得 ALTER FUNCTION 名字 ( [ 类型 [, ...] ] ) RENAME TO 新名字 ALTER FUNCTION 名字 ( [ 类型 [, ...] ] ) OWNER TO 新属主 命令: ALTER GROUP 描述: 改变⼀个⽤⼾组 语法: ALTER GROUP 组名称 ADD USER ⽤⼾名称 [, ... ] ALTER GROUP 组名称 DROP Copyright © 2012-2021 UCloud 优刻得 108/206 ALTER SCHEMA 名字 RENAME TO 新名字 ALTER SCHEMA 名字 OWNER TO 新属主 命令: ALTER SEQUENCE 描述: 改变⼀个序列⽣成器的定义 语法: ALTER SEQUENCE 名字 [ INCREMENT [ BY ] 递增 ] [ MINVALUE0 码力 | 206 页 | 5.35 MB | 1 年前3
 Greenplum 精粹文集CPU 超线程有很好的支持,提供更好的请求响应速度。在 PoC 中接触 到其它一些国内外基于开放平台的 MPP 软件,大都是建立在节点级的 并行,单个或少量的任务时无法充分利用资源,导致系统加载和 SQL 执行性能不高。 记忆较深的一次 PoC 公开测试中,有厂商要求在测试中关闭 CPU 超 线程,估计和这个原因有关(因为没有办法利用到多个 CPU core 的 计算能力,还不如关掉超线程以提高单 AND 0xffff) modulo)】,这 样能保证流量均匀的打在多块网卡上,另外注意采用 mode4 绑定的 时候,一定要把交换机设置在 802.3ad 模式下。 2. 主节点服务器 Greenplum 集群是有 master 架构,关于有、无 master 架构业界一直 有所争论。 从功能上而言 master 节点是对外服务的入口,用户所有的请求都必须 先经过 master,所以 16-11-22 下午3:38 54 在安装 ESA 之后,下一步将安装 Pivotal Greenplum 的 Protegrity 数 据库保护器,这包括在所有的 Greenplum 节点和主节点上安装 PEP (Protegrity 执行点)服务器流程。这也意味着 Greenplum 集群内的 所有服务器都应能够到达 Protegrity ESA 服务器,无论其是否联网。 Protegrity 0 码力 | 64 页 | 2.73 MB | 1 年前3
 Greenplum Database 管理员指南 6.2.1...................................................................................... - 269 - 开启超线程 .................................................................................................. 用于配置每个主机上最大分配给 GP Instance 的 CPU 资源的百分比。不管使用哪种 CPU 配额模式,该参数都控制着所有 资源组的最大 CPU 使用率。其余的资源需要留给操作系统和数据库的主服务进程使用。 参数 gp_resource_group_cpu_limit 的缺省值为 0.9(90%)。 注意:如果在 GP 集群的主机上还有其他程序,gp_resource_group_cpu_limit 需要调整该参数。 注意:应该尽量避免将 gp_resource_group_cpu_limit 设置为大于 0.9,这样可 能会导致 GP 工作负载抢占所有的 CPU 资源,从而影响数据库的主服务进程获取不到足 够的 CPU 资源。 按照 Core 来配额 CPU 使用 CPUSET 属性来指定哪些 CPU 的 Core 为资源组专用,被指定的 Core 必须0 码力 | 416 页 | 6.08 MB | 1 年前3
 Greenplum 分布式数据库内核揭秘QD/QE/火山模型/Gang Confidential │ ©2021 VMware, Inc. 25 Greenplum,或者说 PostgreSQL 是进程模型,而不是类似于 MySQL 的线程模型。 主进程 postmaster 是整个数据库实例的总控进程,负责启动和关闭数据库实例。当客户端和 Coordinator 建立连接时,postmaster 会 fork 出一个子进程来为该连接提供服务。0 码力 | 31 页 | 3.95 MB | 1 年前3
 Greenplum数据库架构分析及5.x新功能分享GP Workload Manager 7 Pivotal Confidential–Inter nal Use Only MPP(大规模并行处理)无共享体系架构 从主节点 … 主节点 SQL • 主节点和从主节点,主节点负责协调整个集群 • 一个数据节点可以配置多个节点实例(Segment Instances) • 节点实例并行处理查询(SQL) • 数据节点有自己的CPU、磁盘和 大规模并行数据加载 • 高速数据导入和导出 – 主节点不是瓶颈 – 10+ TB/小时/Rack – 线性扩展 • 低延迟 – 加载后立刻可用 – 不需要中间存储 – 不需要额外数据处理 • 导入/导出 到&从: – 文件系统 – 任意 ETL 产品 – Hadoop 发行版 外部数据源 Interconnect ... ... ... ... 主节点 查询优化和调度 数据节点 存储数据 Confidential–Inter nal Use Only 解析器 主节点Segment 系统表 优化器 分布式事务 调度器 执行器 解析器执行词法分 析、语法分析并生 成 解析树 客户端 主节点接受客户连接, 处理请求,执行认证 解析器 主节点 17 Pivotal Confidential–Inter nal Use Only 优化器 本地存储 主节点Segment 系统表 分布式事务 Interconnect0 码力 | 44 页 | 8.35 MB | 1 年前3
 完全兼容欧拉开源操作系统的 HTAP 数据平台 Greenplumprimary 和 mirror 节点,一旦主节点 出现故障,会用从节点来替代,但这仅限于一个数据中心内部。整个事务提交是同步的,当主集群提交事务时,需要 等备集群把日志传到主集群才能提交,对于跨区域或者是两地三中心数据中心来说,保证完全同步的开销是很难接受 的,针对这种情况,Greenplum 7 版本采用了多个集群间异步的方式来处理,来确保数据同步。这样备份集群和主 集群之间可能会存在延迟,延迟的0 码力 | 17 页 | 2.04 MB | 1 年前3
 Greenplum上云与优化支持,需要停机(数分钟) 索引 支持(B-tree、Bitmap) 不支持 2016Postgres中国用户大会 推荐应用架构 应用服务器 ECS VPC ApsaraDB for GP 主节点 子节点 子节点 子节点 子节点 子节点 子节点 子节点 子节点 应用服务器 应用服务器 阿里云服务 阿里云CDP服务 应用服务器 Tableau 应用服务器 2016Postgres中国用户大会 2016Postgres中国用户大会 ApsaraDB for GP架构 ApsaraDB for GP 主节点 子节点 子节点 子节点 子节点 子节点 子节点 子节点 子节点 万兆网(同交换机) 物理机(SSD/SATA) 2016Postgres中国用户大会 支持OSS外部表读写 主节点 子节点 子节点 子节点 子节点 子节点 子节点 子节点 子节点 Insert0 码力 | 26 页 | 1.13 MB | 1 年前3
 Greenplum备份恢复浅析数据恢复(2/2) 2017 年象行中国(杭州 站)第一期 虽然并行备份和恢复大大提高了备份和恢复的速度,但是仍 然存在很多问题: 1. 大量数据需要落盘 2. 使用dbid作为备份文件命名规则,在主备切换或者 primary和mirror后会出现问题 3. 可能会出现各个segment数据不一致的情况 …... 并⾏备份恢复存在的问题 2017 年象行中国(杭州 站)第一期 并⾏备份恢复优化(1/3) 并⾏备份恢复优化(1/3) OSS uploader uploader uploader 2017 年象行中国(杭州 站)第一期 并⾏备份恢复优化(2/3) 使用dbid作为备份文件命名规则,在主备切换或者primary 和mirror后会出现问题,例如: dbid=2 dbid=5 primary mirror test_gp_dump_0_2_20170206160253.gz master0 码力 | 17 页 | 1.29 MB | 1 年前3
 Greenplum开源MPP数据库介绍VMware, Inc. 8 Greenplum的高可用 Ø 数据存两份,Coordinator有standby Ø 自动同步数据 (WAL replication) Ø 自动灾难恢复 (FTS,主备切换) Confidential │ ©2022 VMware, Inc. 9 分布式优化器:OLAP Ø OLTP系统的SQL语句相对简单(CURD) Ø OLAP系统的SQL语句就复杂得多(OLTP则尽量避免)0 码力 | 23 页 | 4.55 MB | 1 年前3
共 13 条
- 1
 - 2
 













