基于GP打造SaaS化电商服务平台 聚水潭 秃鹰 赵坚密 2019.08.10 聚水潭成立于2014年1月，创始人兼CEO骆海东拥有超过二十年传统 及电商ERP的研发和实施部署经验，公司核心管理团队来自于阿里巴 巴、亚马逊、中国平安和麦包包等知名公司。 聚水潭创建之初，以电商SaaS ERP切入市场，凭借出色的产品和服务， 快速获得市场领先地位。随着客户需求的不断变化，如今聚水潭已经 发展成为以SaaS 1200多人。聚水潭已在全国设立了40多个线下服务分支机构，服务范 围覆盖超过268个城市，为客户提供及时、周到和专业的服务。 来自阿里巴巴旗下商家服务市场的最新数据显示，聚水潭已是企业 ERP类目中使用商家数最多的软件。自双十一购物节诞生以来，团队 经历了每一次电商大促的考验，尽管每年承载单量成几何倍数增加， 聚水潭系统依然保持平稳、安全和顺畅地运行。2018年11月11日， 聚水潭系统处理订单总量达1 聚水潭系统处理订单总量达1.51亿单，成交额达341亿。 聚水潭简介 关键字 数据架构 推 送 库 中 间 库 商 品 库 核 心 库 辅 助 库 推 送 库 中 间 库 商 品 库 核 心 库 辅 助 库 推 送 库 中 间 库 商 品 库 核 心 库 辅 助 库 账 号 库 店 铺 库 其 他 库 业务系统 数据仓库 G P 1 G P 2 G P 2 5 交 换

● 数据量量⼤大，现有数 据分析团队缺乏技 能 客户 数据科学解决⽅方案 ● 某⼤大型跨国⾦金金 融服务公司 ● 移动应⽤用 API 分析 ● 使⽤用Madlib进⾏行行聚 类分析，建⽴立会话 识别模型和主题模 型 ● 建⽴立scoring pipeline, 对新访问 的安全性进⾏行行评估 ● 使⽤用可视化⼯工具对 结果进⾏行行更更好地呈 现 背景 抽取会话特征 根据原始特征 对用户聚类 验证聚 类结果 评分 对API请求结合超时和 K-means聚类处理理 主题模型 对主题进⾏行行K- means聚类 S 标记回话 ⼈人⼯工审查 新会话 建模过程 2017.thegiac.com 会话识别 API 请求 ⽇日志 对API请求结合超时和 K-means聚类处理理 建模过程 2017 会话1 会话2 会话3 基于时间的会话化 时间+聚类 2017.thegiac.com 会话识别 API 请求 ⽇日志 建模过程 对API请求结合超时和 K-means聚集处理理 2017.thegiac.com 会话识别 API 请求 ⽇日志 抽取会话特征 根据原始特征 对用户聚类 建模过程 对API请求结合超时和 K-means聚集处理理

· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 1547 12.11.5 聚簇索引 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 7 升级到了 go1.16.4。如果你是 TiDB 的开发者，为了 能保证顺利编译，请对应升级你的 Go 编译器版本。 • 请避免在对使用 TiDB Binlog 的集群进行滚动升级的过程中新创建聚簇索引表。 • 请避免在 TiDB 滚动升级时执行 alter table ... modify column 或 alter table ... change column。 • 当按表构建 TiFlash 计划 #23886 32 – 修复 Plan Cache 中对 PointGet 和 TableDual 错误的重复使用 #23187 #23144 #23304 #23290 – 修复优化器在为聚簇索引构建 IndexMerge 执行计划时出现的错误 #23906 – 修复 BIT 类型相关错误的类型推导 #23832 – 修复某些优化器 Hint 在 PointGet 算子存在时无法生效的问题

· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 1593 12.11.5 聚簇索引 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · TiDB #18955。 35 索引和约束 5.2 5.1 5.0 4.0 不可见索引 Y Y Y N 复合主键 Y Y Y Y 唯一约束 Y Y Y Y 整型主键上的聚簇索引 Y Y Y Y 复合或非整型主键上的聚簇索引 Y Y Y N 2.3.3 SQL 语句 SQL 语句 2 5.2 5.1 5.0 4.0 SELECT，INSERT，UPDATE，DELETE，REPLACE COPY} 语法只作为一种指定，并不更改 ALTER 算法，详情参 阅ALTER TABLE。 • 不支持添加或删除 CLUSTERED 类型的主键。要了解关于 CLUSTERED 主键的详细信息，请参考聚簇索引。 • 不支持指定不同类型的索引 (HASH|BTREE|RTREE|FULLTEXT)。若指定了不同类型的索引，TiDB 会解析并忽 略这些索引。 • 分区表支持 HASH、RANGE、LIST

· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 1659 12.11.5 聚簇索引 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · Y Y Y Y Y Titan 插件 Y Y Y Y Y 不可见索引 Y Y Y Y N 复合主键 Y Y Y Y Y 唯一约束 Y Y Y Y Y 整型主键上的聚簇索引 Y Y Y Y Y 复合或非整型主键上的聚簇索引 Y Y Y Y N 2.3.3 SQL 语句 SQL 语句 2 5.3 5.2 5.1 5.0 4.0 SELECT，INSERT，UPDATE，DELETE，REPLACE COPY} 语法只作为一种指定，并不更改 ALTER 算法，详情参 阅ALTER TABLE。 • 不支持添加或删除 CLUSTERED 类型的主键。要了解关于 CLUSTERED 主键的详细信息，请参考聚簇索引。 • 不支持指定不同类型的索引 (HASH|BTREE|RTREE|FULLTEXT)。若指定了不同类型的索引，TiDB 会解析并忽 略这些索引。 • 分区表支持 HASH、RANGE 和

· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 2713 14.11.5 聚簇索引 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · Y Y Y Y Y 不可见索引 Y Y Y Y Y Y Y N 复合主键 Y Y Y Y Y Y Y Y 唯一约束 Y Y Y Y Y Y Y Y 整型主键上的聚簇索引 Y Y Y Y Y Y Y Y 复合或非整型主键上的聚簇索引 Y Y Y Y Y Y Y N 2.3.3 SQL 语句 SQL 语句 2 6.1 6.0 5.4 5.3 5.2 5.1 5.0 4.0 SELECT， COPY} 语法只作为一种指定，并不更改 ALTER 算法，详情参 阅ALTER TABLE。 • 不支持添加或删除 CLUSTERED 类型的主键。要了解关于 CLUSTERED 主键的详细信息，请参考聚簇索引。 • 不支持指定不同类型的索引 (HASH|BTREE|RTREE|FULLTEXT)。若指定了不同类型的索引，TiDB 会解析并忽 略这些索引。 • 分区表支持 HASH、RANGE 和

· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 3183 14.11.5 聚簇索引 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · N 不可见索引 Y Y Y Y Y Y Y Y N 复合主键 Y Y Y Y Y Y Y Y Y 唯一约束 Y Y Y Y Y Y Y Y Y 整型主键上的聚簇索引 Y Y Y Y Y Y Y Y Y 复合或非整型主键上的聚簇索引 Y Y Y Y Y Y Y Y N 多值索引 Y N N N N N N N N 外键约束 E N N N N N N N N TiFlash 延迟物化 COPY} 语法只作为一种指定，并不更改 ALTER 算法，详情参 阅ALTER TABLE。 • 不支持添加或删除 CLUSTERED 类型的主键。要了解关于 CLUSTERED 主键的详细信息，请参考聚簇索引。 • 不支持指定不同类型的索引 (HASH|BTREE|RTREE|FULLTEXT)。若指定了不同类型的索引，TiDB 会解析并忽 略这些索引。 • 分区表支持 HASH、RANGE、LIST

· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 2093 12.11.5 聚簇索引 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · Y Titan 插件 Y Y Y Y Y Y 不可见索引 Y Y Y Y Y N 复合主键 Y Y Y Y Y Y 唯一约束 Y Y Y Y Y Y 整型主键上的聚簇索引 Y Y Y Y Y Y 复合或非整型主键上的聚簇索引 Y Y Y Y Y N 2.3.3 SQL 语句 SQL 语句 2 5.4 5.3 5.2 5.1 5.0 4.0 SELECT，INSERT，UPDATE，DELETE，REPLACE COPY} 语法只作为一种指定，并不更改 ALTER 算法，详情参 阅ALTER TABLE。 • 不支持添加或删除 CLUSTERED 类型的主键。要了解关于 CLUSTERED 主键的详细信息，请参考聚簇索引。 • 不支持指定不同类型的索引 (HASH|BTREE|RTREE|FULLTEXT)。若指定了不同类型的索引，TiDB 会解析并忽 略这些索引。 • 分区表支持 HASH、RANGE 和

· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 3010 14.11.5 聚簇索引 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · N N N N N 不可见索引 Y Y Y Y Y Y Y N 复合主键 Y Y Y Y Y Y Y Y 唯一约束 Y Y Y Y Y Y Y Y 整型主键上的聚簇索引 Y Y Y Y Y Y Y Y 复合或非整型主键上的聚簇索引 Y Y Y Y Y Y Y N 2.3.3 SQL 语句 SQL 语句 3 6.5 6.1 5.4 5.3 5.2 5.1 5.0 4.0 SELECT， COPY} 语法只作为一种指定，并不更改 ALTER 算法，详情参 阅ALTER TABLE。 • 不支持添加或删除 CLUSTERED 类型的主键。要了解关于 CLUSTERED 主键的详细信息，请参考聚簇索引。 • 不支持指定不同类型的索引 (HASH|BTREE|RTREE|FULLTEXT)。若指定了不同类型的索引，TiDB 会解析并忽 略这些索引。 • 分区表支持 HASH、RANGE 和

· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 3382 14.13.5 聚簇索引 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 在执行带有虚拟生成列的查询时可能报错的问题 #8787 @guo-shaoge • Tools – Backup & Restore (BR) * 修复在包含 AUTO_RANDOM 列的联合聚簇索引中，BR 无法备份 AUTO_RANDOM ID 分配进度的问题 #52255 @Leavrth * 修复在日志备份任务被暂停后，移除任务无法立即恢复 GC safepoint 的问题 #52082 复合主键 Y Y Y Y Y Y Y Y Y CHECK 约束 Y Y N N N N N N N 唯一约束 Y Y Y Y Y Y Y Y Y 整型主键上的聚簇索引 Y Y Y Y Y Y Y Y Y 复合或非整型主键上的聚簇索引 Y Y Y Y Y Y Y Y Y 多值索引 Y Y Y N N N N N N 外键约束 E E E N N N N N N TiFlash 延迟物化