Replication Controller：负责维护系统中每个replication controller对象具有正确数量的Pod。 Endpoints Controller：填充Endpoint对象（即：连接Service＆Pod）。 Service Account & Token Controllers：为新的namespace创建默认帐户和API access tokens。 cloud-controller-manager Route Controller：⽤于在底层云基础设施中设置路由 Service Controller：⽤于创建、更新以及删除云提供商负载均衡器 Volume Controller：⽤于创建、连接和装载Volume，并与云提供商进⾏交互，从⽽协调Volume 04-K8s组件 15 kube-scheduler kube-scheduler 监视新创建的、还没分配Node的Pod，并选择⼀个Node供这些Pod运⾏。 probes）。 在必要时创建mirror pod ，从⽽将pod的状态报告回系统的其余部分。 将节点的状态报告回系统的其余部分。 kube-proxy kube-proxy 在主机上维护⽹络规则并执⾏连接转发，从⽽来实现Kubernetes服务抽象。 docker 04-K8s组件 16 docker ⽤于运⾏容器。 rkt rkt 是⼀个Docker的替代品，⽀持在实验中运⾏容器

now deprecated, you should set the endpoint instead. #crictl默认会依次读取以上3个接口 ★设置crictl连接containerd的cri接口 # cat > /etc/crictl.yaml <连接自己的namespace的tcp/ip协议栈， 另一端互相连接；所以veth-pair常用于充当桥梁，连通2个不同的NameSpace网 络 NameSpace是Linux 2.6.x之后的内核版本支持的特性，主要用于资源的隔离，有 d ipvs模式支持更多的负载均衡模式： rr（round-robin） wrr（加权轮询） lc（least connec�on） wlc（加权最少连接） dh（des�na�on hashing） lblc 基于局部性最少连接 sh（source hashing） lblcr 带复制的基于局部性最少连 接 sed （ shortest expected delay） nq（never

多个预训练模型的 仓库；Generative AI Studio，一个旨在快速探索和原型生成 AI 模型的控制台；以及 Vertex AI Extensions，提 供完全托管的开发人员工具，通过 API 连接 AI 模型和实时数据或操作。 该平台已经发展到提供 GenAI 模型和 集成支持，我们非常期待能更广泛地使用它。 28. Immuta 试验 自从我们上次介绍了 Immuta 以来，我们的 Kraftful 是一个自诩为产品构建者副驾驶的工具，现在已经处于领先地位。它目前仅处于测试阶段，您需要提供 邮箱才能访问其功能。我们已经试用过它并取得了很好的效果。您可以将 30 多种用户反馈来源连接到这个平台， 它可以分析数据并识别功能请求、常见投诉、用户喜欢的产品特点，甚至列出您的竞争对手。为了获取更多细 节，您可以像向 ChatGPT 或 Google Bard 提问一样，这里的好处是它针对您的数据进行了优化。一旦您确定了 Development Environment，CDE）。它提供了完 全托管的容器化开发环境，可以通过 SSH、HTTPS、VSCode、Jetbrains IDEs 等多种方式进行访问，使开发人 员可以享受和连接本地环境一致的体验。Google Cloud 工作站允许管理员将容器化开发环境纳入私有网络，并 可以选择使其对外公开或仅在内部访问。这种网络配置的灵活性，再加上支持使用自定义或预定义的镜像构建 环境，使得

美元风险投资。此外，在素有“全球网络风向标”之称的 RSAC 沙 盒大赛十强中，近两年涌现出多家云原生安全初创厂商，引起了业 界的广泛关注。 生态建设方面，合作伙伴成为云服务商扩大市场的新方式。合 作伙伴作为连接云厂商与企业的桥梁，是云厂商长期稳定发展的保 障。过去一年，全球主流云服务商积极汇聚伙伴生态、变革伙伴合 作模式、坚持伙伴优先战略，合作伙伴生态被提升到新高度。一是 云服务商关注到上云企业对 ISV 破。云计算提供了数字时代的标准化沟通语言，软件、硬件等各领 域正持续围绕云生态演进，相互割裂的单领域维度的散点创新借助 云计算这一超级操作系统实现交融、互促、发展。云计算充分发挥 孵化器效用，激发并连接各领域的创新，各领域的创新又以云上服 务的形式反哺于云，生于云长于云的数字应用天然就能够享用云及 其配套生态，实现更高维度的创新。以大模型为例，传统 AI 为应对 不同场景需针对性进行开发、训练、调参，碎片化的场景阻碍了 新业态新场景持续涌现，各行各业的数字应用需求存在较大差异。 单个云服务商的能力不可能覆盖全部诉求，只有转变商业拓展思路， 持续完善以云计算为底座的产业生态，才能触达更大的用户群体。 一类企业通过合作形式，密切连接生态伙伴，发挥各自优势，通过 组合拳服务好目标客户的应用需求。以华为云为例，2020 年其伙伴 收入增速达 188%，高于自身 168%的增速。截至 2022 年底，华为云 已拥有超过 4 万家伙伴企业，生态伙伴收入同比增长超

Ø如何用HAProxy给HTTPS服务做负载均 衡 Ø 解决方案 ØTCP透传模式 Ø不要用HTTP模式，而要用TCP模式做负载均 衡，TCP可以透传TLS连接 Ø后端服务器都要有服务器证书 ØHAProxy认证模式 ØTLS服务器终点为HAProxy，后端连接为明文 TCP Ø要把服务器证书配置到HAProxy上 OpenStack里MySQL Galera 集群高可用 Ø问题 Ø异步多主多活情况下会出现数据

更好的灵活性 • 按需创建 • 无资源闲置 Serverless容器 敏捷开发 极致弹性 成本优化 容器 Build once, Run anywhere 没有语言和库的限制 连接Kubernetes生态 连接Cloud Native生态 无厂商绑定风险 Serverless Container Landscape Serverless容器典型场景和客户价值 在线业务 弹性扩容 Serverless

Node 节点新增安全组，一段时间后发现 Node 节点状态 异常 原因 • 集群 Master 节点和 Node 节点处在不同的安全组中且安 全组并未相互放开。新建安全组仅对新建连接生效，不会 拦截已有连接，因此一段时间后问题才会浮现 预防 • 配置安全组后可通过集群巡检功能检测集群安全组配置是否 符合预期 安全组 B Node Node Node 安全组 A Master Master

UnitedDeployment (coming soon) https://openkruise.iok8s 规模及性能优化实践性能优化 RT/QPS 资源使用率 链路RT/QPS 服务异常 队列长度 gRPC监控 长连接分布 请求分布 限流 Authorization Authenticatio n 序列化 压缩 版本转换 Admission Cache Storage Filter Chain API balance ETCD Webhook Client Kubelets APIServer Http2 -> http1.1 Upgrade Etcd client v3.3.15 周期性重建连接 slb slb 直连 设置maxSurge• 客户端和服务端的同步机制 List & Watch优化 ETCD Cache Pod A V1 Pod A V2 Pod A V3 Reflector

• 调试gRPC • 调试信息 • 错误定位 问题：每种开源组件的配置、调用方式、debug方式、记录日志方式都不一样 微服务的开发阶段 问题：gRPC未设置连接错误，阻塞模式报错不正确 Redis、MySQL连接数配置未设置？超时未设置？ 配置 对接 Debug • 配置驱动 • 配置补齐 • 配置工具 • Proto的管理 • 错误码管理 • 调试gRPC •

app-log log* daemonsets filebeat 容器启动挂载宿主/data/all-log到容器/data/all-log 容器启动时创建namespace和pod-name 创建软连接到logs目录 daemonset在每一个k8s-node节点启动 挂载/data/all-log目录 实时扫描发现新目录日志 logstash通过不同的消费groupid来消费同一 topic互不干扰，日志通过同一topic一分为 cadvisor和k8sapi接口 获取监控信息写入 influxdb influxdb存储时 序数据 普罗米休斯pull拉 取cadvisor接口和 k8sapi接口获取监 控信息写入存储 通过grafna连接不 同的数据源展示不 同的监控界面 方案1 方案2 kube-apiserver Metrics-Server metrics-server通过对 api重定向缓存监控进 入内存 pull