 RDBMSとNoSQLのメリットを併せ持つクラウドネイティブなNewSQLデータベース
「TiDB」をKubernetesで動かしてみよう!(MySQL 互換) Distributed Transactions (分散トランザクション) Cloud Native (クラウドネイティブ志向) Minimize ETL (OLTP と OLAP のサポート) High Availability (高可用性) Open Source Conference 2022 Online/Spring 12 TiDB の特徴 Horizontal (MySQL 互換) Distributed Transactions (分散トランザクション) Cloud Native (クラウドネイティブ志向) Minimize ETL (OLTP と OLAP のサポート) High Availability (高可用性) Open Source Conference 2022 Online/Spring 13 TiDB の特徴 (Horizontal (MySQL 互換) Distributed Transactions (分散トランザクション) Cloud Native (クラウドネイティブ志向) Minimize ETL (OLTP と OLAP のサポート) High Availability (高可用性) Open Source Conference 2022 Online/Spring 16 TiDB の特徴 (MySQL Compatible0 码力 | 71 页 | 6.65 MB | 1 年前3 RDBMSとNoSQLのメリットを併せ持つクラウドネイティブなNewSQLデータベース
「TiDB」をKubernetesで動かしてみよう!(MySQL 互換) Distributed Transactions (分散トランザクション) Cloud Native (クラウドネイティブ志向) Minimize ETL (OLTP と OLAP のサポート) High Availability (高可用性) Open Source Conference 2022 Online/Spring 12 TiDB の特徴 Horizontal (MySQL 互換) Distributed Transactions (分散トランザクション) Cloud Native (クラウドネイティブ志向) Minimize ETL (OLTP と OLAP のサポート) High Availability (高可用性) Open Source Conference 2022 Online/Spring 13 TiDB の特徴 (Horizontal (MySQL 互換) Distributed Transactions (分散トランザクション) Cloud Native (クラウドネイティブ志向) Minimize ETL (OLTP と OLAP のサポート) High Availability (高可用性) Open Source Conference 2022 Online/Spring 16 TiDB の特徴 (MySQL Compatible0 码力 | 71 页 | 6.65 MB | 1 年前3
 TiDB 开源分布式关系型数据库OLTP 交易几乎没有影响。提供和 TiDB 保持强一致 的数据读取,是真正的内核级 HTAP 分布式混合负载数据处理平台。 这套系统可以很好的解决: 行存储和列存储的取舍问题; OLTP 负载和 OLAP 负载的资源隔离问题; 快速批量写与事务型写操作混合模式的问题; Adhoc 查询与 Adhoc 混合负载及批处理作业共存的问题; 。 数据 0ffload 到数据仓库引起的不一致风险。 Sattayer 分布式存储引擎 YY 1 集群调度器 TiSpark OLAP 分析引擎 2 人折3合 Tash 分布式下式 7 “ 存储引擎 异地灾备 (主从集群异步模式) OLTP 与 OLAP 业务,支撑 2019 年双十一大促,QPS 峰值在 12 万 +,支持 百亿级的播入和更新。Prometheus 与 Grafana 提供丰富的监控指标满足运维管理的需求,使用DataX 将 TiDB 的数据以 T+1 同步到 Hive 做数据备份。 基于TiDB 中通快递进行实时数仓宽表的建设,业务的 OLTP 数据通过 TiDB 实时写入,后续 OLAP 的业 务通过0 码力 | 58 页 | 9.51 MB | 1 年前3 TiDB 开源分布式关系型数据库OLTP 交易几乎没有影响。提供和 TiDB 保持强一致 的数据读取,是真正的内核级 HTAP 分布式混合负载数据处理平台。 这套系统可以很好的解决: 行存储和列存储的取舍问题; OLTP 负载和 OLAP 负载的资源隔离问题; 快速批量写与事务型写操作混合模式的问题; Adhoc 查询与 Adhoc 混合负载及批处理作业共存的问题; 。 数据 0ffload 到数据仓库引起的不一致风险。 Sattayer 分布式存储引擎 YY 1 集群调度器 TiSpark OLAP 分析引擎 2 人折3合 Tash 分布式下式 7 “ 存储引擎 异地灾备 (主从集群异步模式) OLTP 与 OLAP 业务,支撑 2019 年双十一大促,QPS 峰值在 12 万 +,支持 百亿级的播入和更新。Prometheus 与 Grafana 提供丰富的监控指标满足运维管理的需求,使用DataX 将 TiDB 的数据以 T+1 同步到 Hive 做数据备份。 基于TiDB 中通快递进行实时数仓宽表的建设,业务的 OLTP 数据通过 TiDB 实时写入,后续 OLAP 的业 务通过0 码力 | 58 页 | 9.51 MB | 1 年前3
 TiDB 实践 HTAP 的架构进展和未来展望-韦万and the improvement in v6.2 Wei Wan @ PingCAP About Me Wei Wan, work at PingCAP, as the leader of OLAP Storage team. Over 11 years of experience in game, e-commerce, mobile apps, and database development provide users with a one-stop database solution that covers OLTP (Online Transactional Processing), OLAP (Online Analytical Processing), and HTAP services. Agenda 1. A typical user case 2. The challenges infrastructure adaption The challenges to storage module on HTAP scenario Isolation between OLTP and OLAP workloads • Isolation is difficult if we mix them in the same node • TP and AP scale separately0 码力 | 32 页 | 6.61 MB | 1 年前3 TiDB 实践 HTAP 的架构进展和未来展望-韦万and the improvement in v6.2 Wei Wan @ PingCAP About Me Wei Wan, work at PingCAP, as the leader of OLAP Storage team. Over 11 years of experience in game, e-commerce, mobile apps, and database development provide users with a one-stop database solution that covers OLTP (Online Transactional Processing), OLAP (Online Analytical Processing), and HTAP services. Agenda 1. A typical user case 2. The challenges infrastructure adaption The challenges to storage module on HTAP scenario Isolation between OLTP and OLAP workloads • Isolation is difficult if we mix them in the same node • TP and AP scale separately0 码力 | 32 页 | 6.61 MB | 1 年前3
 TiDB中文技术文档NoSQL 的最佳特性。 TiDB 兼容 MySQL,支持无限的水平扩展,具备强一致性和高可用性。TiDB 的目标是为 OLTP (Online Transactional Processing) 和 OLAP (Online Analytical Processing) 场景提供一站式的解决方案。 TiDB 具备如下核心特性: 高度兼容 MySQL 大多数情况下,无需修改代码即可从 MySQL 轻松迁移至 行存数据库,同时兼具强大的 OLAP 性能,配合 TiSpark,可提供一站式 HTAP 解决方案,一份存储同时处理 OLTP & OLAP,无需传统繁琐的 ETL 过程。 云原生 SQL 数据库 TiDB 是为云而设计的数据库,同 Kubernetes 深度耦合,支持公有云、私有云和混合云,使部署、配置和 维护变得十分简单。 TiDB 的设计目标是 100% 的 OLTP 场景和 80% 的 OLAP 场景,更复杂的 场景,更复杂的 OLAP 分析可以通过 TiSpark 项目 来完成。 TiDB 对业务没有任何侵入性,能优雅的替换传统的数据库中间件、数据库分库分表等 Sharding 方案。同时它也 让开发运维人员不用关注数据库 Scale 的细节问题,专注于业务开发,极大的提升研发的生产力。 三篇文章了解 TiDB 技术内幕: 说存储 说计算 谈调度 TiDB 简介 TiDB 整体架构 README - 11 - 本文档使用0 码力 | 444 页 | 4.89 MB | 6 月前3 TiDB中文技术文档NoSQL 的最佳特性。 TiDB 兼容 MySQL,支持无限的水平扩展,具备强一致性和高可用性。TiDB 的目标是为 OLTP (Online Transactional Processing) 和 OLAP (Online Analytical Processing) 场景提供一站式的解决方案。 TiDB 具备如下核心特性: 高度兼容 MySQL 大多数情况下,无需修改代码即可从 MySQL 轻松迁移至 行存数据库,同时兼具强大的 OLAP 性能,配合 TiSpark,可提供一站式 HTAP 解决方案,一份存储同时处理 OLTP & OLAP,无需传统繁琐的 ETL 过程。 云原生 SQL 数据库 TiDB 是为云而设计的数据库,同 Kubernetes 深度耦合,支持公有云、私有云和混合云,使部署、配置和 维护变得十分简单。 TiDB 的设计目标是 100% 的 OLTP 场景和 80% 的 OLAP 场景,更复杂的 场景,更复杂的 OLAP 分析可以通过 TiSpark 项目 来完成。 TiDB 对业务没有任何侵入性,能优雅的替换传统的数据库中间件、数据库分库分表等 Sharding 方案。同时它也 让开发运维人员不用关注数据库 Scale 的细节问题,专注于业务开发,极大的提升研发的生产力。 三篇文章了解 TiDB 技术内幕: 说存储 说计算 谈调度 TiDB 简介 TiDB 整体架构 README - 11 - 本文档使用0 码力 | 444 页 | 4.89 MB | 6 月前3
 [PingCAP Meetup SH 5.26]TiDB在Ping++金融聚合支付下的实践0526DBA • 负责Ping++数据库相关⼯工作、数据库⾃自动化运维建设 TiDB在Ping++⾦金金融聚合⽀支付业务的实践 • TiDB在Ping++的应⽤用场景分析 - OLAP:saas服务下实时数仓的⽀支撑 - HTAP:基于TiDB Docker的聚合⽀支付私有化部署⽅方案 • 关于TiDB的线上运维 - TiDB体系 - 业务零感知运维 分布式,海海量量数据实时查询性能 • ⾃自动failover的⾼高可⽤用 场景⼆二:聚合⽀支付私有化部署⽅方案 服务私有化部署的数据库要求: • 脱离云产品:DRDS • oltp+olap • 海海量量交易易下的单表性能:分库分表? • ⾼高可⽤用:MHA?Innodb Cluster? • 监控、运维⽅方式简单⾼高效 场景⼆二:聚合⽀支付私有化部署⽅方案 基于TiDB Docker的HTAP⼀一站式⽅方案 • 兼容mysql,应⽤用零改动迁移 • 节点⾼高可⽤用 • ⾃自动Region分⽚片、分布式事务 • Online DDL • SQL优先级策略略,安全的oltp+olap • Grafana监控 • Docker简易易运维,⽔水平扩展 TiDB线上运维 • TiDB体系 TiDB线上运维 TiDB的业务零感知运维 • ⾃自动运维:TiDB升级、节点扩展/下线0 码力 | 11 页 | 630.95 KB | 6 月前3 [PingCAP Meetup SH 5.26]TiDB在Ping++金融聚合支付下的实践0526DBA • 负责Ping++数据库相关⼯工作、数据库⾃自动化运维建设 TiDB在Ping++⾦金金融聚合⽀支付业务的实践 • TiDB在Ping++的应⽤用场景分析 - OLAP:saas服务下实时数仓的⽀支撑 - HTAP:基于TiDB Docker的聚合⽀支付私有化部署⽅方案 • 关于TiDB的线上运维 - TiDB体系 - 业务零感知运维 分布式,海海量量数据实时查询性能 • ⾃自动failover的⾼高可⽤用 场景⼆二:聚合⽀支付私有化部署⽅方案 服务私有化部署的数据库要求: • 脱离云产品:DRDS • oltp+olap • 海海量量交易易下的单表性能:分库分表? • ⾼高可⽤用:MHA?Innodb Cluster? • 监控、运维⽅方式简单⾼高效 场景⼆二:聚合⽀支付私有化部署⽅方案 基于TiDB Docker的HTAP⼀一站式⽅方案 • 兼容mysql,应⽤用零改动迁移 • 节点⾼高可⽤用 • ⾃自动Region分⽚片、分布式事务 • Online DDL • SQL优先级策略略,安全的oltp+olap • Grafana监控 • Docker简易易运维,⽔水平扩展 TiDB线上运维 • TiDB体系 TiDB线上运维 TiDB的业务零感知运维 • ⾃自动运维:TiDB升级、节点扩展/下线0 码力 | 11 页 | 630.95 KB | 6 月前3
 TiDB 101 Fernando Iparworkload is very latency-sensitive. ●Your data fits in a single server. ●You’re closer to OLTP than OLAP. ●You have very large transactions. �6 Poor Use Cases © The Pythian Group Inc., 2019 �7 TiDB Overview Image Credit: https://github.com/tikv/tikv © The Pythian Group Inc., 2019 �9 TiDB: OLTP + Ad Hoc OLAP Image Credit: https://www.slideshare.net/morgo/tidb-introduction © The Pythian Group Inc., 20190 码力 | 13 页 | 2.59 MB | 6 月前3 TiDB 101 Fernando Iparworkload is very latency-sensitive. ●Your data fits in a single server. ●You’re closer to OLTP than OLAP. ●You have very large transactions. �6 Poor Use Cases © The Pythian Group Inc., 2019 �7 TiDB Overview Image Credit: https://github.com/tikv/tikv © The Pythian Group Inc., 2019 �9 TiDB: OLTP + Ad Hoc OLAP Image Credit: https://www.slideshare.net/morgo/tidb-introduction © The Pythian Group Inc., 20190 码力 | 13 页 | 2.59 MB | 6 月前3
 TiDB v5.3 Documentationtools· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 827 11.1.3 OLAP Query tool · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · provide users with a one-stop database solution that covers OLTP (Online Transactional Processing), OLAP (Online Analytical Processing), and HTAP services. TiDB is suitable for various use cases that require using an OLTP database and use an ETL (Extract, Transform, Load) tool to replicate the data into an OLAP database for data analysis. This solution 27 has multiple disadvantages such as high storage costs0 码力 | 2996 页 | 49.30 MB | 1 年前3 TiDB v5.3 Documentationtools· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 827 11.1.3 OLAP Query tool · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · provide users with a one-stop database solution that covers OLTP (Online Transactional Processing), OLAP (Online Analytical Processing), and HTAP services. TiDB is suitable for various use cases that require using an OLTP database and use an ETL (Extract, Transform, Load) tool to replicate the data into an OLAP database for data analysis. This solution 27 has multiple disadvantages such as high storage costs0 码力 | 2996 页 | 49.30 MB | 1 年前3
 TiDB v5.2 Documentationtools· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 801 11.1.3 OLAP Query tool · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · provide users with a one-stop database solution that covers OLTP (Online Transactional Processing), OLAP (Online Analytical Processing), and HTAP services. TiDB is suitable for various use cases that require using an OLTP database and use an ETL (Extract, Transform, Load) tool to replicate the data into an OLAP database for data analysis. This solution has multiple disadvantages such as high storage costs and0 码力 | 2848 页 | 47.90 MB | 1 年前3 TiDB v5.2 Documentationtools· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 801 11.1.3 OLAP Query tool · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · provide users with a one-stop database solution that covers OLTP (Online Transactional Processing), OLAP (Online Analytical Processing), and HTAP services. TiDB is suitable for various use cases that require using an OLTP database and use an ETL (Extract, Transform, Load) tool to replicate the data into an OLAP database for data analysis. This solution has multiple disadvantages such as high storage costs and0 码力 | 2848 页 | 47.90 MB | 1 年前3
 TiDB and Amazon Auroraworkload ● Amazon Aurora is still using the MySQL code base ● It would be cool to do some lightweight OLAP queries directly on the transactional database. ○ No need to involve data warehouse! ○ Example: computing ● TiDB can synchronize data in real time as Aurora's replica on AWS using TiDB-DM ● TiDB's OLAP capabilities will be a good complement to Aurora Conclusion Thank You ! GitHub:github.com/pingcap/tidb0 码力 | 57 页 | 2.52 MB | 6 月前3 TiDB and Amazon Auroraworkload ● Amazon Aurora is still using the MySQL code base ● It would be cool to do some lightweight OLAP queries directly on the transactional database. ○ No need to involve data warehouse! ○ Example: computing ● TiDB can synchronize data in real time as Aurora's replica on AWS using TiDB-DM ● TiDB's OLAP capabilities will be a good complement to Aurora Conclusion Thank You ! GitHub:github.com/pingcap/tidb0 码力 | 57 页 | 2.52 MB | 6 月前3
 TiDB v5.1 Documentationtools· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 769 11.1.3 OLAP Query tool · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · provide users with a one-stop database solution that covers OLTP (Online Transactional Processing), OLAP (Online Analytical Processing), and HTAP services. TiDB is suitable for various use cases that require using an OLTP database and use an ETL (Extract, Transform, Load) tool to replicate the data into an OLAP database for data analysis. This solution has multiple disadvantages such as high storage costs and0 码力 | 2745 页 | 47.65 MB | 1 年前3 TiDB v5.1 Documentationtools· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 769 11.1.3 OLAP Query tool · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · provide users with a one-stop database solution that covers OLTP (Online Transactional Processing), OLAP (Online Analytical Processing), and HTAP services. TiDB is suitable for various use cases that require using an OLTP database and use an ETL (Extract, Transform, Load) tool to replicate the data into an OLAP database for data analysis. This solution has multiple disadvantages such as high storage costs and0 码力 | 2745 页 | 47.65 MB | 1 年前3
共 42 条
- 1
- 2
- 3
- 4
- 5













