Apache ShardingSphere 高可用功能详解 & 实操演练 赵锦超 2022.08.06 01 赵锦超 Apache ShardingSphere Committer SphereEx 研发工程师 o 从事过电商、金融行业，热爱开源 o 目前专注于 Apache ShardingSphere 高可用 & 分布式治理的相关研发工作 02 Apache ShardingSphere

2018年PostgreSQL中国技术大会 PostgreSQL和Greenplum 数据库故障排查 赵振平 zzp@taryartar.com 北京太阳塔信息科技有限责任公司 2018年PostgreSQL中国技术大会 自我介绍 微信号：laohouzi999 2018年PostgreSQL中国技术大会 • 赵振平，太阳塔技术总监 • 电子工业出版社签约作家 • 腾讯最具价值专家（TVP） • 计算机畅销书作家

基于GP打造SaaS化电商服务平台 聚水潭 秃鹰 赵坚密 2019.08.10 聚水潭成立于2014年1月，创始人兼CEO骆海东拥有超过二十年传统 及电商ERP的研发和实施部署经验，公司核心管理团队来自于阿里巴 巴、亚马逊、中国平安和麦包包等知名公司。 聚水潭创建之初，以电商SaaS ERP切入市场，凭借出色的产品和服务， 快速获得市场领先地位。随着客户需求的不断变化，如今聚水潭已经 发展成为以SaaS

信息不准确、限制内存会导致应用程序OOM等。我们 基于lxcfs组件来增强容器的隔离性。 资源隔离 CPU最大超卖3倍，通过cpu-period配合cpu-quota一起使用，来限制容器的CPU的使用量 。比cpuset-cpus绑定CPU的方式灵活。 限制容器内存，且内存不超卖。通过—memory限制内存，同时结合MySQL自身参数控制 几个内存大户(比如buffer_pool等)，最后配合lxcfs增强隔离性。

场景架构图 3: 电网调度控制系统 PingCAP.COM 3物 中通快递 从Exadata 到TiDB HTAP 的升级之路 中通快递业务是世界领先的快递企业，2019 年双十一完成订单最超 2 亿。中通科技是中通快递旗下的 互联网物流科技平台，为中通生态圈的业务打造全场景全链路的数字化平台服务。 业务挑战 随着业务发展带来的数据量激增，存放在 Oracle Exadata 一体机数据周期越来越短 PingCAP.COM 多点DMall TiDB 助力新零售“业财一体化" 运营 多点DMall 是全球领先的数字零售解决方案服务商,截止 2020 年 7 月底, 多点Dmall 已与 112 家连锁商超 达成合作, 覆盖全国 13000 多家门店, 多点 APP 注册用户已破亿。 业务挑战 多点DMall 业财一体化平台对接多点的店务 订单.POS 与进销存等十多个系统, 需要同时处理上百种业务 类型的单据

到其它一些国内外基于开放平台的 MPP 软件，大都是建立在节点级的 并行，单个或少量的任务时无法充分利用资源，导致系统加载和 SQL 执行性能不高。 记忆较深的一次 PoC 公开测试中，有厂商要求在测试中关闭 CPU 超 线程，估计和这个原因有关（因为没有办法利用到多个 CPU core 的 计算能力，还不如关掉超线程以提高单 core 的能力），但即使是这样， 在那个测试中，测试性能也大幅低于 Greenplum（那个测试中，各厂 点之间 移动数据。 2) 有一张表的关联字段包含分布键，另外一张不包含分布键。 3) 两张表的关联字段都没有包含分布键（此处所说的包含分布键， 意思是包含所有用作分布键的字段，即分布键的超集）。 后两种场景，都需要有数据移动，GP 的执行规划器会选择哪一种呢？ 下面详细分析： 在执行计划中，每个有结果集的节点都会有 rows 与 width 两个指标， 这两个指标的乘积表示执行计划对每个

⼀致（或者是超集） CREATE TABLE products( product_no integer UNIQUE, name text, price numeric ) DISTRIBUTED BY (product_no); 主键约束：主键约束是唯⼀约束和⾮空约束的组合。要使⽤主键约束，表必须使⽤ Hash 分布策略，并且约束列必须和表的分布键对应的列⼀致（或者是超集）。如果⼀张表指定了主键约束，

'default_group'); 在调用 pg_resgroup_move_query()函数时，该查询将受到新的资源组的配额 限制：  如果目标资源组的最大并发事务数量已经超了，该查询会进行排队等待状态。 Greenplum Database 管理员指南 V6.2.1 版权所有：Esena(陈淼 +86 18616691889) 编写：陈淼 - 67 - 列限制的总量，所以，并不能简单 的说，MEMORY_LIMIT的总和绝对不能超过Primary可以获得的物理内存总量，这取 决于如何安排和优化并行作业，编者提醒，如果某个Primary超出了内存限制超，相 关语句会被取消而导致失败，所以，如何更合理的配置内存参数，以真实生产环境的多 日统计结果为依据来进行调整，最为稳妥。 创建包含成本限制的资源队列 资源队列通过设置MAX_ =# CREATE RESOURCE QUEUE webuser WITH (MAX_COST=1e+5); 这意味着，分配到webuser资源队列的所有ROLE执行的全部语句Cost总和不能超 Greenplum Database 管理员指南 V6.2.1 版权所有：Esena(陈淼 +86 18616691889) 编写：陈淼 - 76 - 过100000.0的限制。例如，有20个Cost为5000

query; rollback; • create index CONCURRENTLY idx on tbl(id); • 密码复杂度、认证方法 • 业务系统，开发测试账号，不要使用数据库超 级用户。 • 长连接relcache , syscache • 数据隔离(cluster -> database -> schema) • 主备切换(prewarm) 2016Postgres中国用户大会

Hadoop Data Lake 计算引擎 MR & Spark Data Warehouse OLTP Big Data Analysis 多 维 聚 合 iData New 超融合OLAP 大数据分析 引擎TGMars 多 维 提 取 关 联 分 析 画 像 分 析 数据报表 用户分群 用户特征 特征关联 一切以用户价值为依归 18 业务应用实践 iData 2