 Hadoop 迁移到阿里云MaxCompute 技术方案报表等大数据应用。我们常见的大数据架构 的逻辑组件关系如下图所示: 这些逻辑组件包括:  数据源:数据源包括关系型数据库、日志文件、实时消息等。  数据存储:面向海量数据存储的分布式文件存储服务,支持 结构化数据和非结构数据数据存 储,我们也常称之为数据湖。如 HDFS、对象存储服务等。  批处理:由于大数据场景必须处理大规模的数据集,批处理往往需要从数据存储中读取大量 数据进 行长 MLib/ML、Tensorflow 等。  分析型数据存储:对数据进行处理加工后,面向应用场景,将数据以结构化的方式进行存储, 以便分析工具或分析应用能够获取数据。如利用 MPP 数据仓库、Spark SQL 等支持 BI 工具 访问,利用 Hbase 实现低延迟的在线服务等  分析与报表:对数据进行分析和展现以获取洞察。如 BI 工具、jupyter 等。  数据作业编排:将多个数据处理动作 MaxCompute 产品组件 特性介绍 数据存储 MaxCompute 表 (基于盘古分布式存储) MaxCompute 支持大规模计算存储,适用于 TB 以上规 模的存储及计算需求,最大可达 EB 级别。同一个 MaxCompute 项目支持企业从创业团队发展到独角兽的 数据规模需求; 数据分布式存储,多副本冗余,数据存储对外仅开放表的 操作接口,不提供文件系统访问接口0 码力 | 59 页 | 4.33 MB | 1 年前3 Hadoop 迁移到阿里云MaxCompute 技术方案报表等大数据应用。我们常见的大数据架构 的逻辑组件关系如下图所示: 这些逻辑组件包括:  数据源:数据源包括关系型数据库、日志文件、实时消息等。  数据存储:面向海量数据存储的分布式文件存储服务,支持 结构化数据和非结构数据数据存 储,我们也常称之为数据湖。如 HDFS、对象存储服务等。  批处理:由于大数据场景必须处理大规模的数据集,批处理往往需要从数据存储中读取大量 数据进 行长 MLib/ML、Tensorflow 等。  分析型数据存储:对数据进行处理加工后,面向应用场景,将数据以结构化的方式进行存储, 以便分析工具或分析应用能够获取数据。如利用 MPP 数据仓库、Spark SQL 等支持 BI 工具 访问,利用 Hbase 实现低延迟的在线服务等  分析与报表:对数据进行分析和展现以获取洞察。如 BI 工具、jupyter 等。  数据作业编排:将多个数据处理动作 MaxCompute 产品组件 特性介绍 数据存储 MaxCompute 表 (基于盘古分布式存储) MaxCompute 支持大规模计算存储,适用于 TB 以上规 模的存储及计算需求,最大可达 EB 级别。同一个 MaxCompute 项目支持企业从创业团队发展到独角兽的 数据规模需求; 数据分布式存储,多副本冗余,数据存储对外仅开放表的 操作接口,不提供文件系统访问接口0 码力 | 59 页 | 4.33 MB | 1 年前3
 Guía de referencia de Debian v2.124sesión en Systemd . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 88 3.3. Los mensajes del núcleo . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . significado de la entrada del menú de la parte anterior de /boot/grub/grub.cfg . . . . . . . . . . . . . 85 3.3. Relación de sistemas de arranque en el sistema Debian . . . . . . . . . . . . . . . . . . . . . . Unix Printing System) , Samba, GNOME, KDE, Mozilla, LibreOffice, Vim, TeX, LaTeX, DocBook, Perl, Python, Tcl, Java, Ruby, PHP, Berkeley DB, MariaDB, PostgreSQL, SQLite, Exim, Postfix, Mutt, FreeBSD, OpenBSD0 码力 | 285 页 | 1.43 MB | 1 年前3 Guía de referencia de Debian v2.124sesión en Systemd . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 88 3.3. Los mensajes del núcleo . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . significado de la entrada del menú de la parte anterior de /boot/grub/grub.cfg . . . . . . . . . . . . . 85 3.3. Relación de sistemas de arranque en el sistema Debian . . . . . . . . . . . . . . . . . . . . . . Unix Printing System) , Samba, GNOME, KDE, Mozilla, LibreOffice, Vim, TeX, LaTeX, DocBook, Perl, Python, Tcl, Java, Ruby, PHP, Berkeley DB, MariaDB, PostgreSQL, SQLite, Exim, Postfix, Mutt, FreeBSD, OpenBSD0 码力 | 285 页 | 1.43 MB | 1 年前3
 Curve核心组件之mds – 网易数帆,以实现统一存储系统的需求,即在单个存储系统中多副 本PageFile支持块设备、三副本AppendFile(待开发)支持在线对象存储、AppendECFile(待开发)支持 近线对象存储可以共存。 如上所示LogicalPool与pool为多对一的关系,一个物理pool可以存放各种类型的file。当然由于curve支持 多个pool,可以选择一个logicalPool独享一个pool。 模块进行均衡及配置变更的依据 • 通过chunkserver定期上报copyset的copyset的epoch, 检测chunkserver的copyset与mds差异,同 步两者的copyset信息 • 支持配置变更功能,在心跳回复报文中下发mds发起的配置变更命令,并在后续心跳中获取配置 变更进度。HEARTBEAT MDS端:mds 端的心跳主要由三个部分组成: • TopoUpdater: 根据0 码力 | 23 页 | 1.74 MB | 6 月前3 Curve核心组件之mds – 网易数帆,以实现统一存储系统的需求,即在单个存储系统中多副 本PageFile支持块设备、三副本AppendFile(待开发)支持在线对象存储、AppendECFile(待开发)支持 近线对象存储可以共存。 如上所示LogicalPool与pool为多对一的关系,一个物理pool可以存放各种类型的file。当然由于curve支持 多个pool,可以选择一个logicalPool独享一个pool。 模块进行均衡及配置变更的依据 • 通过chunkserver定期上报copyset的copyset的epoch, 检测chunkserver的copyset与mds差异,同 步两者的copyset信息 • 支持配置变更功能,在心跳回复报文中下发mds发起的配置变更命令,并在后续心跳中获取配置 变更进度。HEARTBEAT MDS端:mds 端的心跳主要由三个部分组成: • TopoUpdater: 根据0 码力 | 23 页 | 1.74 MB | 6 月前3
 PlantUML 1.2020.23 Guía de Referencia del LenguajeClass08 Class09 -- Class10 @enduml Guía de Referencia del Lenguaje PlantUML (1.2020.23) 47 / 304 3.3 Etiquetas en las relaciones 3 DIAGRAMA DE CLASES @startuml Class11 <|.. Class12 Class13 --> Class14 #-- Class22 Class23 x-- Class24 Class25 }-- Class26 Class27 +-- Class28 Class29 ^-- Class30 @enduml 3.3 Etiquetas en las relaciones Es posible añadir etiquetas en las relaciones, usando :, seguido del texto similar al controlador -- El MTV fue\npropuesto\npara Django --- Django es\nun Framework\nweb de Python @endmindmap Guía de Referencia del Lenguaje PlantUML (1.2020.23) 170 / 304 11.6 Markdown syntax0 码力 | 305 页 | 3.11 MB | 1 年前3 PlantUML 1.2020.23 Guía de Referencia del LenguajeClass08 Class09 -- Class10 @enduml Guía de Referencia del Lenguaje PlantUML (1.2020.23) 47 / 304 3.3 Etiquetas en las relaciones 3 DIAGRAMA DE CLASES @startuml Class11 <|.. Class12 Class13 --> Class14 #-- Class22 Class23 x-- Class24 Class25 }-- Class26 Class27 +-- Class28 Class29 ^-- Class30 @enduml 3.3 Etiquetas en las relaciones Es posible añadir etiquetas en las relaciones, usando :, seguido del texto similar al controlador -- El MTV fue\npropuesto\npara Django --- Django es\nun Framework\nweb de Python @endmindmap Guía de Referencia del Lenguaje PlantUML (1.2020.23) 170 / 304 11.6 Markdown syntax0 码力 | 305 页 | 3.11 MB | 1 年前3
 PlantUML 1.2020.22 Guía de Referencia del LenguajeClass08 Class09 -- Class10 @enduml Guía de Referencia del Lenguaje PlantUML (1.2020.22) 38 / 292 3.3 Etiquetas en las relaciones 3 DIAGRAMA DE CLASES @startuml Class11 <|.. Class12 Class13 --> Class14 #-- Class22 Class23 x-- Class24 Class25 }-- Class26 Class27 +-- Class28 Class29 ^-- Class30 @enduml 3.3 Etiquetas en las relaciones Es posible añadir etiquetas en las relaciones, usando :, seguido del texto similar al controlador -- El MTV fue\npropuesto\npara Django --- Django es\nun Framework\nweb de Python @endmindmap Guía de Referencia del Lenguaje PlantUML (1.2020.22) 158 / 292 11.6 Markdown syntax0 码力 | 293 页 | 3.02 MB | 1 年前3 PlantUML 1.2020.22 Guía de Referencia del LenguajeClass08 Class09 -- Class10 @enduml Guía de Referencia del Lenguaje PlantUML (1.2020.22) 38 / 292 3.3 Etiquetas en las relaciones 3 DIAGRAMA DE CLASES @startuml Class11 <|.. Class12 Class13 --> Class14 #-- Class22 Class23 x-- Class24 Class25 }-- Class26 Class27 +-- Class28 Class29 ^-- Class30 @enduml 3.3 Etiquetas en las relaciones Es posible añadir etiquetas en las relaciones, usando :, seguido del texto similar al controlador -- El MTV fue\npropuesto\npara Django --- Django es\nun Framework\nweb de Python @endmindmap Guía de Referencia del Lenguaje PlantUML (1.2020.22) 158 / 292 11.6 Markdown syntax0 码力 | 293 页 | 3.02 MB | 1 年前3
 PlantUML 1.2021.2 Guía de Referencia del LenguajeClass08 Class09 -- Class10 @enduml Guía de Referencia del Lenguaje PlantUML (1.2021.2) 51 / 388 3.3 Etiquetas en las relaciones 3 DIAGRAMA DE CLASES @startuml Class11 <|.. Class12 Class13 --> Class14 #-- Class22 Class23 x-- Class24 Class25 }-- Class26 Class27 +-- Class28 Class29 ^-- Class30 @enduml 3.3 Etiquetas en las relaciones Es posible añadir etiquetas en las relaciones, usando :, seguido del texto similar al controlador -- El MTV fue\npropuesto\npara Django --- Django es\nun Framework\nweb de Python @endmindmap Guía de Referencia del Lenguaje PlantUML (1.2021.2) 255 / 388 17.4 Multilines 17 MINDMAP0 码力 | 389 页 | 4.12 MB | 1 年前3 PlantUML 1.2021.2 Guía de Referencia del LenguajeClass08 Class09 -- Class10 @enduml Guía de Referencia del Lenguaje PlantUML (1.2021.2) 51 / 388 3.3 Etiquetas en las relaciones 3 DIAGRAMA DE CLASES @startuml Class11 <|.. Class12 Class13 --> Class14 #-- Class22 Class23 x-- Class24 Class25 }-- Class26 Class27 +-- Class28 Class29 ^-- Class30 @enduml 3.3 Etiquetas en las relaciones Es posible añadir etiquetas en las relaciones, usando :, seguido del texto similar al controlador -- El MTV fue\npropuesto\npara Django --- Django es\nun Framework\nweb de Python @endmindmap Guía de Referencia del Lenguaje PlantUML (1.2021.2) 255 / 388 17.4 Multilines 17 MINDMAP0 码力 | 389 页 | 4.12 MB | 1 年前3
 PlantUML 1.2021.1 Guía de Referencia del LenguajeClass08 Class09 -- Class10 @enduml Guía de Referencia del Lenguaje PlantUML (1.2021.1) 51 / 383 3.3 Etiquetas en las relaciones 3 DIAGRAMA DE CLASES @startuml Class11 <|.. Class12 Class13 --> Class14 #-- Class22 Class23 x-- Class24 Class25 }-- Class26 Class27 +-- Class28 Class29 ^-- Class30 @enduml 3.3 Etiquetas en las relaciones Es posible añadir etiquetas en las relaciones, usando :, seguido del texto similar al controlador -- El MTV fue\npropuesto\npara Django --- Django es\nun Framework\nweb de Python @endmindmap Guía de Referencia del Lenguaje PlantUML (1.2021.1) 250 / 383 16.4 Multilines 16 MINDMAP0 码力 | 384 页 | 4.07 MB | 1 年前3 PlantUML 1.2021.1 Guía de Referencia del LenguajeClass08 Class09 -- Class10 @enduml Guía de Referencia del Lenguaje PlantUML (1.2021.1) 51 / 383 3.3 Etiquetas en las relaciones 3 DIAGRAMA DE CLASES @startuml Class11 <|.. Class12 Class13 --> Class14 #-- Class22 Class23 x-- Class24 Class25 }-- Class26 Class27 +-- Class28 Class29 ^-- Class30 @enduml 3.3 Etiquetas en las relaciones Es posible añadir etiquetas en las relaciones, usando :, seguido del texto similar al controlador -- El MTV fue\npropuesto\npara Django --- Django es\nun Framework\nweb de Python @endmindmap Guía de Referencia del Lenguaje PlantUML (1.2021.1) 250 / 383 16.4 Multilines 16 MINDMAP0 码力 | 384 页 | 4.07 MB | 1 年前3
 PlantUML 1.2021.3 Guía de Referencia del LenguajeClass08 Class09 -- Class10 @enduml Guía de Referencia del Lenguaje PlantUML (1.2021.2) 52 / 406 3.3 Etiquetas en las relaciones 3 DIAGRAMA DE CLASES @startuml Class11 <|.. Class12 Class13 --> Class14 #-- Class22 Class23 x-- Class24 Class25 }-- Class26 Class27 +-- Class28 Class29 ^-- Class30 @enduml 3.3 Etiquetas en las relaciones Es posible añadir etiquetas en las relaciones, usando :, seguido del texto similar al controlador -- El MTV fue\npropuesto\npara Django --- Django es\nun Framework\nweb de Python @endmindmap Guía de Referencia del Lenguaje PlantUML (1.2021.2) 268 / 406 17.4 Multilines 17 MINDMAP0 码力 | 407 页 | 4.28 MB | 1 年前3 PlantUML 1.2021.3 Guía de Referencia del LenguajeClass08 Class09 -- Class10 @enduml Guía de Referencia del Lenguaje PlantUML (1.2021.2) 52 / 406 3.3 Etiquetas en las relaciones 3 DIAGRAMA DE CLASES @startuml Class11 <|.. Class12 Class13 --> Class14 #-- Class22 Class23 x-- Class24 Class25 }-- Class26 Class27 +-- Class28 Class29 ^-- Class30 @enduml 3.3 Etiquetas en las relaciones Es posible añadir etiquetas en las relaciones, usando :, seguido del texto similar al controlador -- El MTV fue\npropuesto\npara Django --- Django es\nun Framework\nweb de Python @endmindmap Guía de Referencia del Lenguaje PlantUML (1.2021.2) 268 / 406 17.4 Multilines 17 MINDMAP0 码力 | 407 页 | 4.28 MB | 1 年前3
 PlantUML 1.2023.11 Guía de Referencia del Lenguaje@enduml Guía de Referencia del Lenguaje PlantUML (1.2023.11) 58 / 530 3.3 Etiquetas en las relaciones 3 DIAGRAMA DE CLASE 3.3 Etiquetas en las relaciones Es posible añadir etiquetas en las relaciones (1.2023.11) 483 / 530 25.9 Keywords arguments 25 PREPROCESSING 25.9 Keywords arguments Like in Python, you can use keywords arguments : @startuml !unquoted procedure $element($alias, $description="" Relación entre clases . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 58 3.3 Etiquetas en las relaciones . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .0 码力 | 531 页 | 7.53 MB | 1 年前3 PlantUML 1.2023.11 Guía de Referencia del Lenguaje@enduml Guía de Referencia del Lenguaje PlantUML (1.2023.11) 58 / 530 3.3 Etiquetas en las relaciones 3 DIAGRAMA DE CLASE 3.3 Etiquetas en las relaciones Es posible añadir etiquetas en las relaciones (1.2023.11) 483 / 530 25.9 Keywords arguments 25 PREPROCESSING 25.9 Keywords arguments Like in Python, you can use keywords arguments : @startuml !unquoted procedure $element($alias, $description="" Relación entre clases . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 58 3.3 Etiquetas en las relaciones . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .0 码力 | 531 页 | 7.53 MB | 1 年前3
 Guía Práctica de RISC-V:
El Atlas de una Arquitectura Abierta
Primera Edición, 1.0.5. . . 34 3.2 Convención de llamadas . . . . . . . . . . . . . . . . . . . . . . . . . . . . 34 3.3 Ensamblador . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 37 3.4 Linker . . flotante en RISC-V. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 36 3.3 32 pseudo-instrucciones de RISC-V que dependen de x0, el registro cero. . . 38 3.4 28 pseudoinstrucciones formato y mnemónico para cada extensión de instrucciones en una fracción de página. Ver Figuras 2.3, 3.3, 3.4, 4.2, 5.2, 5.3, 6.2, 7.6, 7.5, 7.7, 9.5, y 10.1 (Los diagramas de instrucciones y mapas de opcodes0 码力 | 217 页 | 29.97 MB | 1 年前3 Guía Práctica de RISC-V:
El Atlas de una Arquitectura Abierta
Primera Edición, 1.0.5. . . 34 3.2 Convención de llamadas . . . . . . . . . . . . . . . . . . . . . . . . . . . . 34 3.3 Ensamblador . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 37 3.4 Linker . . flotante en RISC-V. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 36 3.3 32 pseudo-instrucciones de RISC-V que dependen de x0, el registro cero. . . 38 3.4 28 pseudoinstrucciones formato y mnemónico para cada extensión de instrucciones en una fracción de página. Ver Figuras 2.3, 3.3, 3.4, 4.2, 5.2, 5.3, 6.2, 7.6, 7.5, 7.7, 9.5, y 10.1 (Los diagramas de instrucciones y mapas de opcodes0 码力 | 217 页 | 29.97 MB | 1 年前3
共 17 条
- 1
- 2













