 纠错码(Erasure Coding)  多个Standby Namenode  Datanode内部balance工具  云计算平台的支持 • YARN • MapReduce HDFS纠错码(Erasure Coding) • 一个简单的例子 1备份: 1,0 需要额外的2位 XOR编码: 1,0 需要额外的1位 HDFS纠错码(Erasure Coding) • Reed-Solomon task能 带来30%的性能提升。 Hadoop 的未来 HDFS的未来 • 对象存储 - HDFS-7240 • 更高性能的Namenode：更高效的内存使用，锁的改进等 • Erasure Coding的完善 YARN的未来 • 更大规模的集群支持 • 更好的资源调度，隔离和多租户 • 支持更多的应用，包括long running的service 谢谢 Q&A

3 ⽬录 I. Ozone 构架 II. Ozone 1.3 新功能 III. 未来展望 4 Ozone 构架 5 Ozone 1.3 新功能 I. 纠删码(Erasure coding) II. 系统均衡器(Container Balancer) III. 性能优化 - ⽂件系统优化(File System Optimization) IV. 性能优化 - 合并Container

• Distribution • Location 存储节点 • Houses data • Maintains data 对象存储架构 Erasure Code 提高存储效能 数据持久性 Erasure Code Replication 对象存储架构 *文中涉及的其它名称及商标属于各自所有者资产。 关注产业应用，产研相互促进 • 英特尔®中国于计算创新中心

他们还有一些成员函数，这些函数可能是虚函数，也可能不是。 • 如何在不知道 OpenVDB 每个类具体继承关系的情况下，实现我们想要的继承关系，从而 实现封装和代码重用？简单，只需用一种被小彭老师称为类型擦除 (type-erasure) 的大法 。 类型擦除：还是以猫和狗为例 • 例如右边的猫和狗类，假设这两个类是某个第 三方库里写死的，这个第三方库的作者可能没 上过《面向对象程序设计》，居然没有定义一 个公用的 Animal

no installation required. You can also collaborate on Kotlin notebooks in real time, get smart coding assistance when writing code, and share results as interactive or static reports. Check out a sample now print s.length because of contract in assertIs println("${s.length}") } Because of type erasure, this assert function only checks whether the value is of the List type in the following example as in Java, and you access it via an implicit this inside the lambda. Learn more about lambda coding conventions. 由集合内元素创建字符串 In Java, you use the Stream API to filter, map, and then collect the items:

no installation required. You can also collaborate on Kotlin notebooks in real time, get smart coding assistance when writing code, and share results as interactive or static reports. Check out a sample now print s.length because of contract in assertIs println("${s.length}") } Because of type erasure, this assert function only checks whether the value is of the List type in the following example as in Java, and you access it via an implicit this inside the lambda. Learn more about lambda coding conventions. 由集合内元素创建字符串 In Java, you use the Stream API to filter, map, and then collect the items:

练习 Python3 基础教程【完整版】 http://www.yeayee.com/ 32/531 请利用 print()输出 1024 * 768 = xxx： # -*- coding: utf-8 -*- ---- print(???) 参考源码 do_input.py Python 基础 Python 是一种计算机编程语言。计算机编程语言和我们日常使用的自然 UTF-8 编码。当 Python 解释器读取源代码时，为了让它按 UTF-8 编码读取，我们通常 在文件开头写上这两行： #!/usr/bin/env python3 # -*- coding: utf-8 -*- 第一行注释是为了告诉 Linux/OS X 系统，这是一个 Python 可执行程序， Windows 系统会忽略这个注释； Python3 基础教程【完整版】 编码并不意味着你的.py 文件就是 UTF-8 编码的，必须并 且要确保文本编辑器正在使用 UTF-8 without BOM 编码： 如果.py文件本身使用UTF-8编码，并且也申明了# -*- coding: utf-8 -*-， 打开命令提示符测试就可以正常显示中文： Python3 基础教程【完整版】 http://www.yeayee.com/ 51/531 格式化

有状态的服务（涉及到存储）做到可降级 • 核心业务有自愈逻辑 简单实用，避免过度设计 目录 • 背景 • 架构 心得—coding • 代码分层 – 提高开发效率 – 代码合理复用，各司其职 • 实现 – 过程编程 – 对象编程 心得—coding-分层 • 代码分层 心得—coding-实现 • 过程编程 – route svr – auth svr – push svr – dispatch dispatch svr – Inbox svr 特点：以请求为单位，每个请求一个goroutine处理，不存在任何状态 心得—coding-实现 • process： accept Loop read conn Loop read conn Loop read conn Bussness handle, write rsp || nil Bussness handle, write rsp rsp || nil Bussness handle, write rsp || nil So easy, So efficient 心得—coding—实现 • what’s diff？ – conn svr • 常驻内存，内存中有个大连接对象map（资源问题） • 请求都是基于连接的(如果模块间存在资源的互相引用，当资源变更的情况 下，容易发生panic)（竟态问题） • 对象编程

行修改 (比如重置或增加内容): hobby = output('Coding') # equal to output(put_text('Coding')) put_table([ ['Name', 'Hobbies'], ['Wang', hobby] # hobby is initialized to Coding ]) hobby.reset('Movie') # hobby is put_text('Drama')) # append Music, Drama to hobby hobby.insert(0, put_markdown('**Coding**')) # insert the Coding into the top of the␣ �→hobby 上下文管理器 一些接受 put_xxx() 调用作为参数的输出函数支持作为上下文管理器来使用： with PyWebIO, 发布 1.2.3 hobby = output(put_text('Coding')) # equal to output('Coding') put_table([ ['Name', 'Hobbies'], ['Wang', hobby] # hobby is initialized to Coding ]) hobby.reset('Movie') # hobby is reset