Greenplum 精粹文集在数据加载和数 据计算中表现出强悍的性能,某行业客户对此深有体会 : 同样 2TB 左 右的数据,在 Greenplum 中不到一个小时就加载完成了,而在用户传 统数据仓库平台上耗时半天以上。 在该用户的生产环境中,1 个数百亿表和 2 个 10 多亿条记录表的全表 关联中(只有 on 关联条件,不带 where 过滤条件,其中一个 10 亿 条的表计算中需要重分布),Greenplum 仅耗时数分钟就完成了, CPU core 的 计算能力,还不如关掉超线程以提高单 core 的能力),但即使是这样, 在那个测试中,测试性能也大幅低于 Greenplum(那个测试中,各厂 商基于客户提供的完全相同的硬件环境,Greenplum 是唯一一家完成 所有测试的,特别在混合负载测试中,Greenplum 的 80 并发耗时 3 个多小时就成功完成了,其它厂商大都没有完成此项测试,唯一完成 的一家耗时 40 多小时)。 MAP->Shuffle->Reduce 过程中通过文件 来交换数据,效率很低,MapReduce 要求每个步骤间的数据都要序列 化到磁盘,这意味着 MapReduce 作业的 I/O 成本很高,导致交互分 析和迭代算法开销很大,MPP 数据库采用 Pipline 方式在内存数据流 中处理数据,效率比文件方式高很多。 总结以上几点,MPP 数据库在计算并行度、计算算法上比 Hadoop 更加 SM0 码力 | 64 页 | 2.73 MB | 1 年前3
Apache ShardingSphere 中文文档 5.0.0-alpha. 111 测试场景 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 111 测试环境搭建 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 112 测试结果验证 . . . . . 119 3.10.5 性能测试 (sysbench) . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 120 环境 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 120 测试方案 . . . . . . . . . . . . . 288 7.12 ShardingSphere 提供的默认分布式自增主键策略为什么是不连续的,且尾数大多为偶数? 288 7.13 Windows 环境下,通过 Git 克隆 ShardingSphere 源码时为什么提示文件名过长,如何解 决? . . . . . . . . . . . . . . . . . . . . . . . . .0 码力 | 301 页 | 3.44 MB | 1 年前3
Greenplum Database 管理员指南 6.2.1........................................................................... - 288 - 为 gpadmin 用户配置环境变量 ................................................................................... - 290 - 第十三章:启动与停止 是单 Master,可以最大限度的规避多 Master 架构的系统表频繁不一致的缺陷。 GP 是基于 PostgreSQL 发展而来,用户端可以如同访问 PostgreSQL 那样与 GP 进行交互。可以通过 PostgreSQL 客户端程序(如 psql、pgAdminIII)和应用程序 接口(APIs(如 JDBC、ODBC))连接 GP。不过,GP 在 5 版本和 6 版本中,因为 PostgreSQL $ PGOPTIONS='-c gp_session_role=utility' psql 在 GP 推荐的硬件配置环境下,每个 Instance 需要对应数个 CPU Core 的资源 资源,具体的比例需要根据数据库的适用场景进行综合评估。例如在生产环境,每个 Instance 所在的主机配置了 2 个 16 Core 的 CPU,可根据不同的场景,配置 4 ~ 12 个不等的 P0 码力 | 416 页 | 6.08 MB | 1 年前3
Apache ShardingSphere 中文文档 5.1.2. . 280 影子库配置 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 280 影子库环境 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 282 影子算法使用 . . . . . boot 自动加载默认的 JtaTransactionManager? . . . . . . . . . . . . . . . . . . 316 7.8.4 [Proxy] Windows 环境下,运行 ShardingSphere‐Proxy,找不到或无法加载主类 org.apache.shardingsphere.proxy.Bootstrap,如何解决? . . . . . . . value must implements Comparable”? . . . . . . . . . . . . . . . . . . . . 322 7.8.25 [其他] Windows 环境下,通过 Git 克隆 ShardingSphere 源码时为什么提示文件名 过长,如何解决? . . . . . . . . . . . . . . . . . . . . . . . . .0 码力 | 446 页 | 4.67 MB | 1 年前3
Apache ShardingSphere 中文文档 5.1.1. . 269 影子库配置 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 269 影子库环境 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 270 影子算法使用 . . . . . boot 自动加载默认的 JtaTransactionManager? . . . . . . . . . . . . . . . . . . 305 7.8.4 [Proxy] Windows 环境下,运行 ShardingSphere‐Proxy,找不到或无法加载主类 org.apache.shardingsphere.proxy.Bootstrap,如何解决? . . . . . . . value must implements Comparable”? . . . . . . . . . . . . . . . . . . . . 310 7.8.25 [其他] Windows 环境下,通过 Git 克隆 ShardingSphere 源码时为什么提示文件名 过长,如何解决? . . . . . . . . . . . . . . . . . . . . . . . . .0 码力 | 409 页 | 4.47 MB | 1 年前3
Apache ShardingSphere 中文文档 5.1.0. . 264 影子库配置 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 264 影子库环境 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 265 影子算法使用 . . . . . boot 自动加载默认的 JtaTransactionManager? . . . . . . . . . . . . . . . . . . 301 7.8.4 [Proxy] Windows 环境下,运行 ShardingSphere‐Proxy,找不到或无法加载主类 org.apache.shardingsphere.proxy.Bootstrap,如何解决? . . . . . . . value must implements Comparable”? . . . . . . . . . . . . . . . . . . . . 306 7.8.25 [其他] Windows 环境下,通过 Git 克隆 ShardingSphere 源码时为什么提示文件名 过长,如何解决? . . . . . . . . . . . . . . . . . . . . . . . . .0 码力 | 406 页 | 4.40 MB | 1 年前3
Apache ShardingSphere 中文文档 5.0.0. . 267 影子库配置 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 268 影子库环境 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 268 影子算法使用 . . . . . spring‐boot 自动加载默认的 JtaTransactionManager? . . . . . . . . . . . . . . 288 7.7.4 4. [Proxy] Windows 环境下,运行 ShardingSphere‐Proxy,找不到或无法加载主 类 org.apache.shardingsphere.proxy.Bootstrap,如何解决? . . . . . . by value must implements Comparable”? . . . . . . . . . . . . . . . . 293 7.7.22 22. [其他] Windows 环境下,通过 Git 克隆 ShardingSphere 源码时为什么提示文 件名过长,如何解决? . . . . . . . . . . . . . . . . . . . . . . . . .0 码力 | 385 页 | 4.26 MB | 1 年前3
TiDB v6.1 中文手册· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 82 3.1.2 在单机上模拟部署生产环境集群 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 85 3.1.3 探索更多 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 98 3.4.3 HTAP 环境准备 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 101 4.1.3 应用程序与 TiDB 交互的方式· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 1010 码力 | 3572 页 | 84.36 MB | 1 年前3
TiDB v7.1 中文手册· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 76 3.1.2 在单机上模拟部署生产环境集群 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 80 3.1.3 探索更多 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 93 3.4.3 HTAP 环境准备 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 96 4.1.3 应用程序与 TiDB 交互的方式· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 960 码力 | 4369 页 | 98.92 MB | 1 年前3
TiDB v6.5 中文手册· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 79 3.1.2 在单机上模拟部署生产环境集群 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 83 3.1.3 探索更多 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 96 3.4.3 HTAP 环境准备 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 99 4.1.3 应用程序与 TiDB 交互的方式· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 990 码力 | 4049 页 | 94.00 MB | 1 年前3
共 80 条
- 1
- 2
- 3
- 4
- 5
- 6
- 8













