 Greenplum 新一代数据管理和数据分析解决方案推动数据依赖型企业的发展 全球各地的一些Greenplum客户 4 亚太地区 欧洲、中东、非洲 北美 中国的客户 5 金融 交通 互联网 其它 Teradata Netezza Oracle Greenplum Neoview Vertica Paraccel Aster Data Hadoop Current Database Vendor Landscape Proven Gartner的Donald Feinberg 17 通过Greenplum超级数据处 理引擎增强竞争优势 Greenplum数据引擎:内容和方式 价值主张 – 性价比: 性能可达到传统方案(Oracle、Teradata)的 10到100倍, 而成本只是其一小部分 – 可伸缩性:从较低的万亿字节扩展到千万亿字节 – 开放式系统:在通用系统和开放源软件的基础上创建 前提条件 – 硬件:基于开放式标准硬件 其中包括文本分析、图形分析、数据 挖掘、机器学习以及更多内容 客户实例:福克斯互动媒体 (Fox Interactive Media) • 业务问题 • 改进定位广告 • 竞争对手 • Teradata, Oracle • 数据规模 • 1万亿行事实数据表,每天增加 3TB • 硬件 • 40节点的Sun数据仓库设备 • 优势 • 可以通过控制支持快速膨胀的数据集 “Greenplum将成为我们0 码力 | 45 页 | 2.07 MB | 1 年前3 Greenplum 新一代数据管理和数据分析解决方案推动数据依赖型企业的发展 全球各地的一些Greenplum客户 4 亚太地区 欧洲、中东、非洲 北美 中国的客户 5 金融 交通 互联网 其它 Teradata Netezza Oracle Greenplum Neoview Vertica Paraccel Aster Data Hadoop Current Database Vendor Landscape Proven Gartner的Donald Feinberg 17 通过Greenplum超级数据处 理引擎增强竞争优势 Greenplum数据引擎:内容和方式 价值主张 – 性价比: 性能可达到传统方案(Oracle、Teradata)的 10到100倍, 而成本只是其一小部分 – 可伸缩性:从较低的万亿字节扩展到千万亿字节 – 开放式系统:在通用系统和开放源软件的基础上创建 前提条件 – 硬件:基于开放式标准硬件 其中包括文本分析、图形分析、数据 挖掘、机器学习以及更多内容 客户实例:福克斯互动媒体 (Fox Interactive Media) • 业务问题 • 改进定位广告 • 竞争对手 • Teradata, Oracle • 数据规模 • 1万亿行事实数据表,每天增加 3TB • 硬件 • 40节点的Sun数据仓库设备 • 优势 • 可以通过控制支持快速膨胀的数据集 “Greenplum将成为我们0 码力 | 45 页 | 2.07 MB | 1 年前3
 Greenplum数据仓库UDW - UCloud中立云计算服务商客⼾端⼯具访问UDW 2 图形界⾯的⽅式访问UDW 数据导⼊ 数据导⼊ insert加载数据 copy加载数据 外部表并⾏加载数据 从hdfs加载数据 从mysql中导⼊数据 从oracle中导⼊数据 从ufile加载数据 开发指南 开发指南 1、连接数据库 2、数据库管理 3、模式管理 4、表格设计 5、加载数据 6、分区表 7、序列 8、索引 9、 ANALYZE/VACUUM 为了⽅便mysql数据导⼊到udw,我们提供了mysql导⼊数据到udw的⼯具mysql2udw,使⽤⽅法请参考:mysql数据导⼊到udw 从 从oracle中导⼊数据 中导⼊数据 为了⽅便oracle数据导⼊udw,我们提供了oracle导⼊数据到udw的⼯具ora2udw,使⽤⽅法请参考:oracle数据导⼊到udw 数据导⼊ Greenplum数据仓库 UDW Copyright © 2012-2021 UCloud Greenplum数据仓库 UDW Copyright © 2012-2021 UCloud 优刻得 91/206 5.6 从 从oracle中导⼊数据 中导⼊数据 为了⽅便 oracle 数据导⼊ udw,我们提供了 oracle 导⼊数据到 udw 的⼯具 ora2udw,使⽤⽅法请参考:oracle数据导⼊到udw 5.7 从 从ufile加载数据 加载数据 为了⽅便 ufile 数据导⼊到 udw,我们提供了0 码力 | 206 页 | 5.35 MB | 1 年前3 Greenplum数据仓库UDW - UCloud中立云计算服务商客⼾端⼯具访问UDW 2 图形界⾯的⽅式访问UDW 数据导⼊ 数据导⼊ insert加载数据 copy加载数据 外部表并⾏加载数据 从hdfs加载数据 从mysql中导⼊数据 从oracle中导⼊数据 从ufile加载数据 开发指南 开发指南 1、连接数据库 2、数据库管理 3、模式管理 4、表格设计 5、加载数据 6、分区表 7、序列 8、索引 9、 ANALYZE/VACUUM 为了⽅便mysql数据导⼊到udw,我们提供了mysql导⼊数据到udw的⼯具mysql2udw,使⽤⽅法请参考:mysql数据导⼊到udw 从 从oracle中导⼊数据 中导⼊数据 为了⽅便oracle数据导⼊udw,我们提供了oracle导⼊数据到udw的⼯具ora2udw,使⽤⽅法请参考:oracle数据导⼊到udw 数据导⼊ Greenplum数据仓库 UDW Copyright © 2012-2021 UCloud Greenplum数据仓库 UDW Copyright © 2012-2021 UCloud 优刻得 91/206 5.6 从 从oracle中导⼊数据 中导⼊数据 为了⽅便 oracle 数据导⼊ udw,我们提供了 oracle 导⼊数据到 udw 的⼯具 ora2udw,使⽤⽅法请参考:oracle数据导⼊到udw 5.7 从 从ufile加载数据 加载数据 为了⽅便 ufile 数据导⼊到 udw,我们提供了0 码力 | 206 页 | 5.35 MB | 1 年前3
 Pivotal HVR meetup 20190816com/s/zgCfcbMKOJRYROdxjW6RNA 14 Compare Products 需求:利用GP自建数据仓库面临的数据集成问题 ➢ 支持MySQL的全量以及增量备份 ➢ 支持Oracle的全量以及增量备份 ➢ 支持SQL Server的全量同步 ➢ 对于增量备份可以支持准实时的同步也可以支持延时同步 ➢ 同步软件不会对源库造成负载上升的问题 ➢ 同步中断后能够记录中断点 JDBC驱动强依赖。 ➢ 版本更新不及时,对GreenPlum新版本无法持续性支持,不稳定。 ➢ 需开发人员支持,二次开发或脚本支持,开发时间成本和人力成本高。 ➢ 支持数据库版本少,无法支持跨多版本的Oracle、MySQL、PostgresSQL、SQL Server等 ➢ 断点续传不支持 ➢ 大量数据同步的情况下,同步组件效率低 参考:https://mp.weixin.qq.com/s/zg large LOBS data lineage insert update delete 28 SQL Transforms Greenplum emp cur_emp Oracle id name current euro 11 Tom yes € 20 22 Dick yes € 0 33 Harry no € 99 44 Wanda yes €50 id name0 码力 | 31 页 | 2.19 MB | 1 年前3 Pivotal HVR meetup 20190816com/s/zgCfcbMKOJRYROdxjW6RNA 14 Compare Products 需求:利用GP自建数据仓库面临的数据集成问题 ➢ 支持MySQL的全量以及增量备份 ➢ 支持Oracle的全量以及增量备份 ➢ 支持SQL Server的全量同步 ➢ 对于增量备份可以支持准实时的同步也可以支持延时同步 ➢ 同步软件不会对源库造成负载上升的问题 ➢ 同步中断后能够记录中断点 JDBC驱动强依赖。 ➢ 版本更新不及时,对GreenPlum新版本无法持续性支持,不稳定。 ➢ 需开发人员支持,二次开发或脚本支持,开发时间成本和人力成本高。 ➢ 支持数据库版本少,无法支持跨多版本的Oracle、MySQL、PostgresSQL、SQL Server等 ➢ 断点续传不支持 ➢ 大量数据同步的情况下,同步组件效率低 参考:https://mp.weixin.qq.com/s/zg large LOBS data lineage insert update delete 28 SQL Transforms Greenplum emp cur_emp Oracle id name current euro 11 Tom yes € 20 22 Dick yes € 0 33 Harry no € 99 44 Wanda yes €50 id name0 码力 | 31 页 | 2.19 MB | 1 年前3
 VMware Greenplum 7 Documentationruns on the following operating system platforms: Red Hat Enterprise Linux 64-bit 8.7 or later Oracle Linux 64-bit 8.7 or later, using the Red Hat Compatible Kernel (RHCK) Rocky Linux 8.7 or later Java versions for PL/Java and PXF: Open JDK 8 or Open JDK 11, available from AdoptOpenJDK Oracle JDK 8 or Oracle JDK 11 Python Greenplum Database uses the system default python3 for the Greenplum management package is supported on the following platforms: Red Hat Enterprise Linux x86_64 8.x (RHEL 8) Oracle Linux 64-bit 8, using the Red Hat Compatible Kernel (RHCK) Rocky Linux 8 Windows 10 (64-bit) Windows0 码力 | 2221 页 | 14.19 MB | 1 年前3 VMware Greenplum 7 Documentationruns on the following operating system platforms: Red Hat Enterprise Linux 64-bit 8.7 or later Oracle Linux 64-bit 8.7 or later, using the Red Hat Compatible Kernel (RHCK) Rocky Linux 8.7 or later Java versions for PL/Java and PXF: Open JDK 8 or Open JDK 11, available from AdoptOpenJDK Oracle JDK 8 or Oracle JDK 11 Python Greenplum Database uses the system default python3 for the Greenplum management package is supported on the following platforms: Red Hat Enterprise Linux x86_64 8.x (RHEL 8) Oracle Linux 64-bit 8, using the Red Hat Compatible Kernel (RHCK) Rocky Linux 8 Windows 10 (64-bit) Windows0 码力 | 2221 页 | 14.19 MB | 1 年前3
 VMware Greenplum v6.18 DocumentationNote.) Red Hat Enterprise Linux 64-bit 6.x CentOS 64-bit 7.x CentOS 64-bit 6.x Ubuntu 18.04 LTS Oracle Linux 64-bit 7, using the Red Hat Compatible Kernel (RHCK) Important: Significant Greenplum Database Java versions for PL/Java and PXF: Open JDK 8 or Open JDK 11, available from AdoptOpenJDK Oracle JDK 8 or Oracle JDK 11 Hardware and Network The following table lists minimum recommended specifications 4+pivotal.2, 2.5.4+pivotal.1, 2.1.5+pivotal.2-2 For information about the Oracle Compatibility Functions, see Oracle Compatibility Functions. These Greenplum Database extensions are installed with0 码力 | 1959 页 | 19.73 MB | 1 年前3 VMware Greenplum v6.18 DocumentationNote.) Red Hat Enterprise Linux 64-bit 6.x CentOS 64-bit 7.x CentOS 64-bit 6.x Ubuntu 18.04 LTS Oracle Linux 64-bit 7, using the Red Hat Compatible Kernel (RHCK) Important: Significant Greenplum Database Java versions for PL/Java and PXF: Open JDK 8 or Open JDK 11, available from AdoptOpenJDK Oracle JDK 8 or Oracle JDK 11 Hardware and Network The following table lists minimum recommended specifications 4+pivotal.2, 2.5.4+pivotal.1, 2.1.5+pivotal.2-2 For information about the Oracle Compatibility Functions, see Oracle Compatibility Functions. These Greenplum Database extensions are installed with0 码力 | 1959 页 | 19.73 MB | 1 年前3
 VMware Greenplum v6.19 DocumentationNote.) Red Hat Enterprise Linux 64-bit 6.x CentOS 64-bit 7.x CentOS 64-bit 6.x Ubuntu 18.04 LTS Oracle Linux 64-bit 7, using the Red Hat Compatible Kernel (RHCK) Important: Significant Greenplum Database Java versions for PL/Java and PXF: Open JDK 8 or Open JDK 11, available from AdoptOpenJDK Oracle JDK 8 or Oracle JDK 11 Hardware and Network The following table lists minimum recommended specifications 4+pivotal.2, 2.5.4+pivotal.1, 2.1.5+pivotal.2-2 For information about the Oracle Compatibility Functions, see Oracle Compatibility Functions. These Greenplum Database extensions are installed with0 码力 | 1972 页 | 20.05 MB | 1 年前3 VMware Greenplum v6.19 DocumentationNote.) Red Hat Enterprise Linux 64-bit 6.x CentOS 64-bit 7.x CentOS 64-bit 6.x Ubuntu 18.04 LTS Oracle Linux 64-bit 7, using the Red Hat Compatible Kernel (RHCK) Important: Significant Greenplum Database Java versions for PL/Java and PXF: Open JDK 8 or Open JDK 11, available from AdoptOpenJDK Oracle JDK 8 or Oracle JDK 11 Hardware and Network The following table lists minimum recommended specifications 4+pivotal.2, 2.5.4+pivotal.1, 2.1.5+pivotal.2-2 For information about the Oracle Compatibility Functions, see Oracle Compatibility Functions. These Greenplum Database extensions are installed with0 码力 | 1972 页 | 20.05 MB | 1 年前3
 Greenplum 精粹文集Postgresql 来做内部的 OLAP 分析数据库,甚 至对新的 OLTP 系统也直接采用 Postgresql。 相比之下,Greenplum 更强悍,把 Postgresql 作为实例(该实例非 Oracle实例概念,这里指的是一个分布式子库架构在Interconnect下), 在 Interconnect 的指挥协调下,数十个甚至数千个 Sub Postgresql 数 据库实例同时开展并行计算。而且,这些 include 头文件编译后,将动态 so 库文件部署到所有节点就可进行测 试使用了。有些模块还是非常好用的,例如:oraface,基本上集成了 Oracle 常用的函数到 Greenplum 中,曾经在一次 PoC 测试中,用户 提供的 22 条 Oracle SQL 语句,不做任何改动就能运行在 Greenplum 上。 最 后, 需 要 强 调 的 是:Greenplum0 码力 | 64 页 | 2.73 MB | 1 年前3 Greenplum 精粹文集Postgresql 来做内部的 OLAP 分析数据库,甚 至对新的 OLTP 系统也直接采用 Postgresql。 相比之下,Greenplum 更强悍,把 Postgresql 作为实例(该实例非 Oracle实例概念,这里指的是一个分布式子库架构在Interconnect下), 在 Interconnect 的指挥协调下,数十个甚至数千个 Sub Postgresql 数 据库实例同时开展并行计算。而且,这些 include 头文件编译后,将动态 so 库文件部署到所有节点就可进行测 试使用了。有些模块还是非常好用的,例如:oraface,基本上集成了 Oracle 常用的函数到 Greenplum 中,曾经在一次 PoC 测试中,用户 提供的 22 条 Oracle SQL 语句,不做任何改动就能运行在 Greenplum 上。 最 后, 需 要 强 调 的 是:Greenplum0 码力 | 64 页 | 2.73 MB | 1 年前3
 VMware Greenplum v6.17 DocumentationNote.) Red Hat Enterprise Linux 64-bit 6.x CentOS 64-bit 7.x CentOS 64-bit 6.x Ubuntu 18.04 LTS Oracle Linux 64-bit 7, using the Red Hat Compatible Kernel (RHCK) Important: Significant Greenplum Database Java versions for PL/Java and PXF: Open JDK 8 or Open JDK 11, available from AdoptOpenJDK Oracle JDK 8 or Oracle JDK 11 Hardware and Network The following table lists minimum recommended specifications 4+pivotal.2, 2.5.4+pivotal.1, 2.1.5+pivotal.2-2 For information about the Oracle Compatibility Functions, see Oracle Compatibility Functions. These Greenplum Database extensions are installed with0 码力 | 1893 页 | 17.62 MB | 1 年前3 VMware Greenplum v6.17 DocumentationNote.) Red Hat Enterprise Linux 64-bit 6.x CentOS 64-bit 7.x CentOS 64-bit 6.x Ubuntu 18.04 LTS Oracle Linux 64-bit 7, using the Red Hat Compatible Kernel (RHCK) Important: Significant Greenplum Database Java versions for PL/Java and PXF: Open JDK 8 or Open JDK 11, available from AdoptOpenJDK Oracle JDK 8 or Oracle JDK 11 Hardware and Network The following table lists minimum recommended specifications 4+pivotal.2, 2.5.4+pivotal.1, 2.1.5+pivotal.2-2 For information about the Oracle Compatibility Functions, see Oracle Compatibility Functions. These Greenplum Database extensions are installed with0 码力 | 1893 页 | 17.62 MB | 1 年前3
 VMware Tanzu Greenplum v6.20 DocumentationNote.) Red Hat Enterprise Linux 64-bit 6.x CentOS 64-bit 7.x CentOS 64-bit 6.x Ubuntu 18.04 LTS Oracle Linux 64-bit 7, using the Red Hat Compatible Kernel (RHCK) Important: Significant Greenplum Database Java versions for PL/Java and PXF: Open JDK 8 or Open JDK 11, available from AdoptOpenJDK Oracle JDK 8 or Oracle JDK 11 Hardware and Network The following table lists minimum recommended specifications 4+pivotal.2, 2.5.4+pivotal.1, 2.1.5+pivotal.2-2 For information about the Oracle Compatibility Functions, see Oracle Compatibility Functions. These Greenplum Database extensions are installed with0 码力 | 1988 页 | 20.25 MB | 1 年前3 VMware Tanzu Greenplum v6.20 DocumentationNote.) Red Hat Enterprise Linux 64-bit 6.x CentOS 64-bit 7.x CentOS 64-bit 6.x Ubuntu 18.04 LTS Oracle Linux 64-bit 7, using the Red Hat Compatible Kernel (RHCK) Important: Significant Greenplum Database Java versions for PL/Java and PXF: Open JDK 8 or Open JDK 11, available from AdoptOpenJDK Oracle JDK 8 or Oracle JDK 11 Hardware and Network The following table lists minimum recommended specifications 4+pivotal.2, 2.5.4+pivotal.1, 2.1.5+pivotal.2-2 For information about the Oracle Compatibility Functions, see Oracle Compatibility Functions. These Greenplum Database extensions are installed with0 码力 | 1988 页 | 20.25 MB | 1 年前3
 VMware Greenplum 6 Documentationgp_workfile_compression. When workfile compression is enabled, Greenplum Database uses Zstandard compression. The Oracle Compatibility Functions are now available in Greenplum Database as an extension, based on the PostgreSQL 6 Documentation VMware by Broadcom 279 orafce extension is based on the orafce 3.7 release. See Oracle Compatibility Functions for information about differences between the Greenplum Database compatibility Rocky Linux 9.x Rocky Linux 8.7 or later CentOS 64-bit 7.x CentOS 64-bit 6.x Ubuntu 18.04 LTS Oracle Linux 64-bit 7, using the Red Hat Compatible Kernel (RHCK) Note If you use endpoint security software0 码力 | 2445 页 | 18.05 MB | 1 年前3 VMware Greenplum 6 Documentationgp_workfile_compression. When workfile compression is enabled, Greenplum Database uses Zstandard compression. The Oracle Compatibility Functions are now available in Greenplum Database as an extension, based on the PostgreSQL 6 Documentation VMware by Broadcom 279 orafce extension is based on the orafce 3.7 release. See Oracle Compatibility Functions for information about differences between the Greenplum Database compatibility Rocky Linux 9.x Rocky Linux 8.7 or later CentOS 64-bit 7.x CentOS 64-bit 6.x Ubuntu 18.04 LTS Oracle Linux 64-bit 7, using the Red Hat Compatible Kernel (RHCK) Note If you use endpoint security software0 码力 | 2445 页 | 18.05 MB | 1 年前3
共 20 条
- 1
- 2













