Kubernetes Operator 实践 —— MySQL 容器化 刘林 搜狗资深工程师 关于我 搜狗商业平台研发部 资深开发工程师 l 主要从事商业平台研发工作，在构建高性能、高可用大规模 系统方面有丰富的实践经验 l 目前专注于云计算、DevOps 等相关领域，负责搜狗商业云 平台的设计研发工作 刘林 1. 背景介绍 2. Operator 的基本原理 3. MySQL 搜索推广 信息流 品牌 BizNginx （Load Balancer） Kafka Zookeeper etcd AppEngine（Resin/Tomcat…) 统一服 务管理 Kubernetes 模板管理 自动化测试 部署中心 服务发现 灰度发布 监控中心 日志系统 PaaS SaaS 编 译 发 布 授 权 监 控 IaaS Registry SOA服务框架 Deployment StatefulSet PV/PVC StorageClass ？？ 站在 Kubernetes 的肩膀上 An Operator is an application-specific controller that extends the Kubernetes API to create, configure and manage instances of complex

server 64bit 14.04.1 Docker 版本 1.6.2 数据库：Mariadb 10.10 （Mariadb 是 MySQL 之父在 MySQL 被 Oracle 收购之后 创建的分支，性能上优于 MySQL 开源版本） 第一步 安装 Docker 对于 Ubuntu，建议直接联网安装 Docker 最新版本，apt-get 中版本较老。 首先获取安装脚本： wget https://get docker-io 第二步 运行 Mariadb 容器 首先要将数据镜像拉下来 docker pull mariadb:latest 注意，如果不加:latest 标签，docker 会把所有的镜像版本都拉下来。 然后我们就可以启动镜像了，参数方面需要注意的有一下几点： 1，-name <给容器取个好记的名称> 2，-e MYSQL_ROOT_PASSWORD =‘<给数据库一个 root 用户密码>’ 作为从数据库。 首先修改主数据库： docker exec -it mdb1 /bin/bash 进入主数据库容器内之后， vi /etc/mysql/my.cnf 把“server-id = 1”行的注释去掉即可，保存，退出容器，然后 docker restart mdb1 同样的，把从数据库的 my.cnf 修改“server-id = 2”,需要是比主 server-id 大的数字，mdb2

凭借经济高效、可靠、高性能且可扩展的电子商务、联机事务处理和嵌入式数据库应用 成为全球使用广泛的开源数据库。它是一种事务安全、符合 ACID 标准的集成式数据库，支持全 面的提交、回滚、崩溃恢复和行锁定功能。MySQL 不仅简便易用、易于扩展、性能卓越，而且 还提供了一整套数据库驱动程序和可视化工具，可帮助开发人员和 DBA 自主构建和管理 MySQL 应用。MySQL 数据库具备以下特性： 生产支持服务  无限制的支持事件  知识库  维护版本、错误修复、补丁和更新  MySQL 咨询支持服务 MySQL 版本 MySQL 提供了 4 个商业版本：  MySQL 企业版  MySQL 标准版  MySQL Cluster 运营商级版本  MySQL Classic 版本（仅适用于 ISV/OEM） Oracle MySQL

Decimal 类型字段不要单独建立为索引，但覆盖索引可以 类型字段不要单独建立为索引，但覆盖索引可以 包 包 含这些字段。 含这些字段。  只有建立索引以后，表内的行才按照特地的顺序存储，按照 只有建立索引以后，表内的行才按照特地的顺序存储，按照 需要可以是 需要可以是 asc asc 或 或 desc desc 方式。 方式。  如果索引由多个字段组成将最用来查询过滤的字段放在前面 操作，注意此时需要注意一点查询 操作，注意此时需要注意一点查询 条 条 件可以使用聚集索引，如果是非聚集索引将起到相反的结果 件可以使用聚集索引，如果是非聚集索引将起到相反的结果  当只要一行数据时使用 当只要一行数据时使用 LIMIT 1 LIMIT 1  尽可能的使用 尽可能的使用 NOT NULL NOT NULL 填充数据库 填充数据库  拆分大的 拆分大的 DELETE DELETE

ClusterSet • Build, deploy, and manage a private DBaaS and microservices using MySQL Operator for Kubernetes • Meet exponential growth in users and data with MySQL Enterprise Scalability • Reduce risk applications. Highlights MySQL Database MySQL Enterprise HA MySQL Operator for Kubernetes MySQL Enterprise Backup MySQL Enterprise Scalability MySQL Enterprise Authentication MySQL Python, C, C++ • Community Drivers for PHP, Perl, Python, Ruby, Go, Rust MySQL Operator for Kubernetes • Containers and microservices • Private DBaaS Security • OpenSSL by Default • SQL

VIP集群必须主从端口一致，Proxy接入的集群端口无需一致。 6.VIP集群端口基于网段递增，Proxy集群端口基于IP递增 Docker里放了什么 内核版本 操作系统 宿主机 容器 镜像 Kernel版本 4.7 CentOS 7.2 部署服务器监控、容器监控agent容器 Docker版本 1.12,部署监控及系统服务agent MariaDB镜像(按产品)、MySQL5.7镜像(按产品)、监控容器镜 像、 系统页面查看慢SQL的执行时长、每日次数、每日平 均耗时等多个维度的指标。同时也支持ui上查看执行计 划和表结构信息。 • 实例迁移我们支持了全实例、库、表级别的迁移,并且同时兼容各种MySQL版本。 全量迁移基于开源工具mydumper和myloader做了定制化开发，解决了一些问题，比如 utf8mb4导致乱码的问题等。 增量复制使用的是公司自研的基于binlog复制的产品。该工具支持指定库、表级别复制，另外

........... 31 文件状态 [ ] 草稿 [ √ ] 正式发布 [ ] 正在修改 名称 mysql 高可用方案探究 作者 飞鸿无痕 版本 V1.0 日期 2012-09-04 博客地址 http://blog.chinaunix.net/uid/20639775.html 1 前言 Mysql 高可用一直是 DRBD 磁盘 Heartbeat 版本 dbserver1 10.1.1.113 Centos 5.5 64bit /dev/sdb1 2.1.3 dbserver2 10.1.1.108 Centos 5.5 64bit /dev/sdb1 2.1.3 5.5.2 DRBD 的安装 官网的说法，如果系统内核（linux）版本低于 2.6.33，在安装软件之前需要加 33，在安装软件之前需要加 载 DRBD 模块，我的内核版本是 2.6.18 的，安装后会自动加载 drbd 模块。安 装命令如下： yum install -y drbd83 kmod-drbd83 安装后使用 lsmod | grep drbd 命令查看是否加载 drbd 模块，如果没有加载需 要手动运行命令加载，命令如下： insmod drbd/drbd.ko 或者 modprobe drbd

包含事务产生的binlog 以及冲突检测时使用到主键以及事务的数据快照版本(gtid_set) • 比较规则。将事务所涉及的主键以及数据版本信息(gtid_set)跟write set 里面的信息进行比较: 主键不存在与write set中，不冲突。 主键存在，则比较事务版本信息，即比较gtid_set，如果是包含关系， 则不冲突。否则，冲突。

overload的cpu迁移进程过来，从而提升cpu利用率。 方法 kernel的优化在openEuler 20.09中默认是关闭的，需要用以下步骤开启： 步骤1 打开/etc/grub2-efi.cfg文件，在内核启动行增加参数sched_steal_node_limit=8，保存 后重启系统生效。 步骤2 设置成STEAL模式： echo STEAL > /sys/kernel/debug/sched_features

forcePrimaryCluster（） • 路由器实例将跟从主（ 取决于目标模式） 49 / 55 MySQL InnoDB ClusterSet -限制 • 需要服务器、路由器和Shell 版本 8.0.27 或更高 • InnoDB 集群仅支持单主模式 • 集群之间使用异步复制，而不是半同步（如果要求 RPO=0 ，则使用跨区域分布的单个 集群） Copyright @ 2021 Oracle