Go runtime related problems in TiDB production environment About me ● Arthur Mao(毛康力), Senior Engineer@PingCAP ● TiDB core developer (top3 contributor) ● GitBook about golang internals (@tiancaiamao) not exhausted, but where is the bottleneck? Description ● The table is wide in the customer environment ○ CPU usage is higher with less columns ● The deployment does not consider NUMA ○ CPU usage is

· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 109 3.4.3 Environment preparation · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 109 requirements · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 123 4.2 TiDB Environment and System Configuration Check · · · · · · · · · · · · · · · · · · · · · 123 4.2.1 Mount the data · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 1884 12.1.3 TiDB Computing · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 1890

· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 134 3.4.3 Environment preparation · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 135 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 475 4.12 Cloud Native Development Environment · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 481 4.12.1 Gitpod · · · · · · requirements · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 551 5.2 TiDB Environment and System Configuration Check · · · · · · · · · · · · · · · · · · · · · 551 5.2.1 Mount the data

requirements · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 99 4.2 TiDB Environment and System Configuration Check · · · · · · · · · · · · · · · · · · · · · 99 4.2.1 Mount the data · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 1224 12.1.3 TiDB Computing · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 1230 scaling in easily The TiDB architecture design of separating computing from storage enables you to separately scale out or scale in the computing or storage capacity online as needed. The scaling process

· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 127 3.4.3 Environment preparation · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 128 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 547 4.12 Cloud Native Development Environment · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 550 4.12.1 Gitpod · · · · · · requirements · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 617 5 5.2 TiDB Environment and System Configuration Check · · · · · · · · · · · · · · · · · · · · · 617 5.2.1 Mount the data

· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 109 3.4.3 Environment preparation · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 109 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 542 4.12 Cloud Native Development Environment · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 545 4.12.1 Gitpod · · · · · · architecture · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 613 5.2 TiDB Environment and System Configuration Check · · · · · · · · · · · · · · · · · · · · · 616 5.2.1 Mount the data

· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 121 3.4.3 Environment preparation · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 121 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 555 4.12 Cloud Native Development Environment · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 557 4.12.1 Gitpod · · · · · · architecture · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 625 5.2 TiDB Environment and System Configuration Check · · · · · · · · · · · · · · · · · · · · · 628 5.2.1 Mount the data

· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 129 3.4.3 Environment preparation · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 129 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 561 4.12 Cloud Native Development Environment · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 564 4.12.1 Gitpod · · · · · · architecture · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 632 5.2 TiDB Environment and System Configuration Check · · · · · · · · · · · · · · · · · · · · · 635 5.2.1 Mount the data

· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 92 3.4.3 Environment preparation · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 93 3 requirements · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 107 4.2 TiDB Environment and System Configuration Check · · · · · · · · · · · · · · · · · · · · · 107 4.2.1 Mount the data · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 1271 12.1.3 TiDB Computing · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 1277

· · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 137 3.4.3 Environment preparation · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 137 · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 635 4.13 Cloud Native Development Environment · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 638 4.13.1 Gitpod · · · · · · architecture · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · · 706 5.2 TiDB Environment and System Configuration Check · · · · · · · · · · · · · · · · · · · · · 709 5.2.1 Mount the data