发现并处理问题。 用户文档，#10539 2.2.2.4 数据迁移 • 简化 Data Migration (DM) 工具运维 DM v2.0.6 支持自动识别使用 VIP 的数据源实例切换事件（failover/计划切换），自动连接上新的数据源实 例，减少数据复制的延迟和减少运维操作步骤 • TiDB Lightning 支持自定义 CSV 数据的终止符，兼容 MySQL LOAD DATA 注意： 本页内容仅涉及 MySQL 与 TiDB 的总体差异。关于安全特性、悲观事务模型相关的兼容信息请 查看各自具体页面。 2.6.1 不支持的功能特性 • 存储过程与函数 • 触发器 • 事件 • 自定义函数 • 外键约束 #18209 • 临时表 #1248 • 全文语法与索引 #1793 • 空间类型的函数（即 GIS/GEOMETRY）、数据类型和索引 #6347 • 非 quota 缓存 在内 存中 的 TiCDC Old Value 的条 目占 用内 存的 上限 cdc.sink- memory- quota 缓存 在内 存中 的 TiCDC 数据 变更 事件 占用 内存 的上 限 cdc.incremental- scan- speed- limit 增量 扫描 历史 数据 的速 度上 限 238 配置 项 简介 cdc.incremental-

deadlock- �→ history- �→ capacity 新增 控制单个 TiDB 节点 的INFORMATION �→ _SCHEMA. �→ DEADLOCKS 表最多可记录 的死锁事件个 数，默认值为 “10”。 26 配置文件 配置项 修改类型 描述 TiKV 配置文件 abort-on- �→ panic 新增 设置 TiKV panic 时 abort 进程是 否允许系统生 TiCDC Old Value 的条 目占用内存的 上限。默认值 为 512MB。 TiKV 配置文件 sink-memory- �→ quota 新增 设置缓存在内 存中的 TiCDC 数 据变更事件占 用内存的上限。 默认值为 512MB。 TiKV 配置文件 incremental- �→ scan- �→ threads 新增 控制增量扫描 历史数据任务 的线程个数。 默认值为 4，代 注意： 本页内容仅涉及 MySQL 与 TiDB 的总体差异。关于安全特性、悲观事务模型 相关的兼容信息请 查看各自具体页面。 2.6.1 不支持的功能特性 • 存储过程与函数 • 触发器 • 事件 • 自定义函数 • 外键约束 #18209 • 临时表 #1248 • 全文语法与索引 #1793 • 空间类型的函数（即 GIS/GEOMETRY）、数据类型和索引 #6347 • 非

· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 197 5.4.3 如何过滤 binlog 事件 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 注意： 本页内容仅涉及 MySQL 与 TiDB 的总体差异。关于安全特性、悲观事务模式相关的兼容信息请 查看各自具体页面。 2.6.1 不支持的功能特性 • 存储过程与函数 • 触发器 • 事件 • 自定义函数 • 外键约束 #18209 • 全文语法与索引 #1793 • 空间类型的函数（即 GIS/GEOMETRY）、数据类型和索引 #6347 • 非 ascii、latin DM 在实时同步过程中，多个已有特性可以使得同步过程更加灵活，适应各类业务需求： • 上游使用 pt/gh-ost 工具的持续同步场景 • 下游存在更多列的迁移场景 • 如何过滤 binlog 事件 • 如何通过 SQL 表达式过滤 binlog 5.2 数据迁移工具概览 TiDB 提供了丰富的数据迁移相关的工具，用于全量迁移、增量迁移、备份恢复、数据同步等多种场景。 本文介绍了使用这

注意： 本页内容仅涉及 MySQL 与 TiDB 的总体差异。关于安全特性、悲观事务模式相关的兼容信息请 查看各自具体页面。 2.6.1 不支持的功能特性 • 存储过程与函数 • 触发器 • 事件 • 自定义函数 • 外键约束 #18209 • 全文语法与索引 #1793 • 空间类型的函数（即 GIS/GEOMETRY）、数据类型和索引 #6347 • 非 ascii/latin quota 缓存 在内 存中 的 TiCDC Old Value 的条 目占 用内 存的 上限 cdc.sink- memory- quota 缓存 在内 存中 的 TiCDC 数据 变更 事件 占用 内存 的上 限 cdc.incremental- scan- speed- limit 增量 扫描 历史 数据 的速 度上 限 249 配置 项 简介 cdc.incremental- {type=~"server_start|server_hang"}[15m])> 0 • 规则描述： TiDB 服务中发生的事件数量。当出现以下事件的时候会报警： 1. start：TiDB 服务启动。 2. hang：当发生了 Critical 级别的事件时（目前只有 Binlog 写不进去一种情况），TiDB 进入 hang 模式， 并等待人工 Kill。 • 处理方法： – 重启

· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 557 6.4.3 如何过滤 binlog 事件 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 注意： 本页内容仅涉及 MySQL 与 TiDB 的总体差异。关于安全特性、悲观事务模式相关的兼容信息请 查看各自具体页面。 2.6.1 不支持的功能特性 • 存储过程与函数 • 触发器 • 事件 • 自定义函数 • 外键约束 #18209 • 全文语法与索引 #1793 • 空间类型的函数（即 GIS/GEOMETRY）、数据类型和索引 #6347 • 非 ascii、latin 观事务模型就是在真正提交事务前，先尝试对 需要修改的资源上锁，只有在确保事务一定能够执行成功后，才开始提交。 对于乐观事务模型来说，比较适合冲突率不高的场景，因为直接提交大概率会成功，冲突是小概率事件，但 是一旦遇到事务冲突，回滚的代价会比较大。 悲观事务的好处是对于冲突率高的场景，提前上锁的代价小于事后回滚的代价，而且还能以比较低的代价解 决多个并发事务互相冲突导致谁也成功不了的场景。不过悲

· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 621 6.5.3 如何过滤 binlog 事件 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · p.com/zh/product/#SelectProduct" target="_blank"> �→ 企业版） TiDB 企业版增强了数据库审计功能，通过更细粒度的事件过滤控制、更友好的过滤条件设置方式、新增的 �→ JSON 文件输出格式、审计日志的生命周期管理，大幅提升了系统的审计能力。 2.2.1 功能详情 2.2.1.1 性能 • 增强 Partitioned 企业版增强了数据库审计功能，大幅提升了能力范围，改善了使用体验，以满足企业 对数据库安全合规的需要： – 引入 “过滤器” (Filter) 与 “规则” (Rule) 的概念，提供了更细分的审计事件定义，并支持更细粒度 的审计设置。 – 支持 JSON 格式的规则定义，提供了更加友好的设置方式。 – 新增自动日志轮替 (Log Rotation) 和空间管理功能，支持保存时间和日志大小两个维度的设置。

· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 577 6.4.3 如何过滤 binlog 事件 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 日志恢复 功能中可 用内存与 系统总内 存的占比。 60 配置文件 配置项 修改类型 描述 TiCDC sink. �→ terminator �→ 新增 换行符， 用来分隔 两个数据 变更事件。 默认值为 空，表示 使用 \r\n 作为换行 符。 TiCDC sink.date �→ - �→ separator �→ 新增 文件路径 的日期分 隔类型。 可选类型 有 none、 year、 注意： 本页内容仅涉及 MySQL 与 TiDB 的总体差异。关于安全特性、悲观事务模式相关的兼容信息请 查看各自具体页面。 2.4.1 不支持的功能特性 • 存储过程与函数 • 触发器 • 事件 • 自定义函数 • 外键约束 #18209 • 全文语法与索引 #1793 • 空间类型的函数（即 GIS/GEOMETRY）、数据类型和索引 #6347 • 非 ascii、latin

· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 615 6.5.3 如何过滤 binlog 事件 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 1/ticdc-simple-protocol">Simple 协议 �→ （从 v8.0.0 开始引入） TiCDC 支持了新的 Simple 消息协议，该协议通过在 DDL 和 BOOTSTRAP 事件中嵌入表的 schema 信息， �→ 实现了对 schema 信息的动态追踪 (in-band schema tracking)。 TiCDC 支持

0 码力 | 4807 页 | 101.31 MB | 1 年前

3

· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 631 6.5.3 如何过滤 binlog 事件 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 0/ticdc-simple-protocol">Simple 协议 �→ TiCDC 支持了新的 Simple 消息协议，该协议通过在 DDL 和 BOOTSTRAP 事件中嵌入表的 schema 信息， �→ 实现了对 schema 信息的动态追踪 (in-band schema tracking)。 TiCDC 支持 Debezium 协议 �→ 34 TiCDC 支持了新的 Debezium 协议，TiCDC 可以使用该协议生成 Debezium 格式的数据变更事件并发送给 �→ Kafka sink。 2.2.1 功能详情 2.2.1.1 可扩展性 • PD 支持微服务模式（实验特性）#5766 @binshi-bing 从 v8.0.0

· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 614 6.5.3 如何过滤 binlog 事件 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · worker 的 数量。 TiCDC sink. �→ column �→ - �→ selectors �→ 新增 控制 TiCDC 将增量数 据分发到 Kafka 时， 只发送指 定的列的 数据变更 事件。 TiCDC sql-mode 新增 设置 TiCDC 解析 DDL 时使用的 SQL 模式， 默认值和 TiDB 的默 认 SQL 模 式一致。 TiDB Lightning -- �→ 注意： 本页内容仅涉及 MySQL 与 TiDB 的总体差异。关于安全特性、悲观事务模式相关的兼容信息， 请查看各自具体页面。 2.4.1 不支持的功能特性 • 存储过程与函数 • 触发器 • 事件 • 自定义函数 • 全文语法与索引 #1793 • 空间类型的函数（即 GIS/GEOMETRY）、数据类型和索引 #6347 • 非 ascii、latin1、binary、utf8、utf8mb4、gbk