Curve核心组件之mds – 网易数帆当前实现了高性能块存储,对接OpenStack和 K8s 网易内部线上无故障稳定运行一年多 • 已开源 • github主页: https://opencurve.github.io/ • github代码仓库: https://github.com/opencurve/curve 概述整体架构 01 02 03 MDS各组件详细介绍 Q&A基本架构 • 元数据节点 MDS 管理元数据信息 收集集群状态信息,自动调度 数据存储 副本一致性 • 客户端 Client 对元数据增删改查 对数据增删改查 • 快照克隆服务器MDS各个组件 MDS是中心节点,负责元数据管理、集群状态收集与调度。MDS包含以下几个部分: • Topology: 管理集群的 topo 元数据信息。 • Nameserver: 管理文件的元数据信息。 • Copyset: 副本放置策略。 • Heartbeat: 心跳模块。 故障域的隔离:比如副本的放置分布在不同机器,不同机架,或是不同的交换机下面。 2. 隔离和共享:不同用户的数据可以实现固定物理资源的隔离和共享。 • pool: 用于实现对机器资源进行物理隔离,server不能跨 Pool交互。运维上,建议以pool为单元进行物理资源的扩 容。 • zone: 故障隔离的基本单元,一般来说属于不同zone的机 器至少是部署在不同的机架,一个server必须归属于一个0 码力 | 23 页 | 1.74 MB | 6 月前3
Hadoop 迁移到阿里云MaxCompute 技术方案...................................................................................... 22 6.3.2 资源评估 ................................................................................................ 的稳定性和安全性、资源的弹性伸缩能力都遇到了瓶颈,严重阻碍了客户数据业务的发展。随着 云计算技术的发展和普及,越来越多的企业客户选择数据上云,在云上构建数据仓库。以云数 仓、云计算为核心的企业服务架构成为新一代大数据建站的主流趋势。MaxCompute 作为云数 仓、云计算的核心引擎,承载了越来越多企业客户的数据业务和数据资产,免运维、低成本、高 度安全和稳定性,让客户的资源更加聚焦在业务开发上,加速业务发展。 2.2.1 MaxComptue 的逻辑架构 2.2.2 MaxCompute 产品特性 MaxCompute 提供了云原生、多租户的服务架构,在底层大规模计算、存储资源之上预先构建 好了 MaxCompute 计算服务、服务接口,提供了配套的安全管控手段和开发工具管理工具,产 品开箱即用。 功能 MaxCompute 产品组件 特性介绍 数据存储0 码力 | 59 页 | 4.33 MB | 1 年前3
PlantUML 1.2023.11 Guía de Referencia del Lenguaje!include !include !include k8s> node "Cloudogu Ecosystem" <<$cloudogu>> { DOGU_JENKINS(jenkins, Jenkins) #ffffff DOGU_SCM(scm, SCM-Manager) #ffffff } TOOL_K8S(k8s, Kubernetes) #ffffff actor developer developer --> smeagol : "Edit Slides" smeagol -> scm : Push scm -> jenkins : Trigger jenkins -> nexus : Deploy jenkins --> k8s : Deploy Guía de 0 码力 | 531 页 | 7.53 MB | 1 年前3
PlantUML 1.2021.2 Guía de Referencia del Lenguaje#ffffff } TOOL_K8S(k8s, Kubernetes) #ffffff actor developer developer --> smeagol : "Edit Slides" smeagol -> scm : Push scm -> jenkins : Trigger jenkins -> nexus : Deploy jenkins --> k8s : Deploy @enduml0 码力 | 389 页 | 4.12 MB | 1 年前3
PlantUML 1.2021.1 Guía de Referencia del Lenguaje#ffffff } TOOL_K8S(k8s, Kubernetes) #ffffff actor developer developer --> smeagol : "Edit Slides" smeagol -> scm : Push scm -> jenkins : Trigger jenkins -> nexus : Deploy jenkins --> k8s : Deploy @enduml0 码力 | 384 页 | 4.07 MB | 1 年前3
PlantUML 1.2021.3 Guía de Referencia del Lenguaje#ffffff } TOOL_K8S(k8s, Kubernetes) #ffffff actor developer developer --> smeagol : "Edit Slides" smeagol -> scm : Push scm -> jenkins : Trigger jenkins -> nexus : Deploy jenkins --> k8s : Deploy @enduml0 码力 | 407 页 | 4.28 MB | 1 年前3
共 6 条
- 1













