Golang 在接入层长连接服务中的实践 黄欣 基础平台－架构部 目录 • 背景 • 架构 • 心得 目录 • 架构 • 心得 背景—why 长连接？ • 业务场景 – 大量实时计算 • 司机乘客撮合 • 实时计价 – 高频度的数据交互 • 坐标数据 • 计价数据 – App和服务端双向可达 • 上行（抢单） • 下行（派单） 背景—why golang？ • 开发效率 rsp || nil So easy, So efficient 心得—coding—实现 • what’s diff？ – conn svr • 常驻内存，内存中有个大连接对象map（资源问题） • 请求都是基于连接的(如果模块间存在资源的互相引用，当资源变更的情况 下，容易发生panic)（竟态问题） • 对象编程 – 封装：conn资源（包括goruntine）作为结构体封装起来，保证所有资源 statusLoop() 心得—profiling • Timer优化 • Channel使用优化 心得—timer优化 • 为什么需要优化？ – 万级别的连接 – 每个连接上大量的定时任务（心跳检测，注册检测，认证检测） 实际情况：当10w左右连接，什么数据不收发，只有定时器检测心跳超时，cpu 能耗掉一个core • 怎么优化？ – 特点： • 秒级别定时任务 • 范围最多60s – 方案：

现代编程思想 哈希表与闭包 Hongbo Zhang 1 回顾 表 键值对的集合，其中键不重复 简单实现：⼆元组列表 添加时向队⾸添加 查询时从队⾸遍历 树实现：⼆叉平衡树 基于第五节课介绍的⼆叉平衡树，每个节点的数据为键值对 对树操作时⽐较第⼀个参数 2 哈希表 哈希函数/散列函数 Hash function 将任意⻓度的数据映射到某⼀固定⻓度的数据 在⽉兔的 Hash "这是⼀个⾮常⾮常⻓的字符串".hash() == -900478401 哈希表 利⽤哈希函数，将数据映射到数组索引中，进⾏快速的添加、查询、修改 1. // 对于 a: Array[(Key, Value)], key: Key, value: Value 2. let index = key.hash().mod_u(a.length()) // 键值--哈希-->哈希值--取模-->数组索引 3. a[ index 操作均为对数时间） 3 哈希冲突 根据抽屉原理/鸽巢原理/⽣⽇问题 不同数据的哈希可能相同 不同的哈希映射为数组索引时可能相同 解决哈希表的冲突 直接寻址（分离链接）：同⼀索引下⽤另⼀数据结构存储 列表 ⼆叉平衡搜索树等 开放寻址 线性探查：当发现冲突后，索引递增，直到查找空位放⼊ ⼆次探查（索引递增 ）等 4 哈希表：直接寻址 当发⽣哈希/索引冲突时，将相同索引的数据装进⼀个数据结构中

支持Channel Message v2协议 • 节点连接支持域名配置 • 部署合约的二进制长度放宽至256K • 交易出错打印更全面的日志 • build_chain.sh生成的SDK证书名更名为sdk.crt和sdk.key • 为提升性能进行了代码实现细节的调整 • 降低了节点内存的占用 修 修 修复 复 复 • 修复了在某种场景下channel连接抛异常的错误 兼 兼 兼容 容 容性 性 0-rc3新 特性 • v2.0.0-rc3 Release Note 3.4.1 变 变 变更 更 更描 描 描述 述 述 新 新 新特 特 特性 性 性 • 分布式存储：新增支持底层通过数据库连接池直连MySQL • 分布式存储：新增支持RocksDB引擎，搭建新链时存储默认采用RocksDB 3.3. v2.0.0 15 FISCO BCOS Documentation, 发 发 发布 区块链（blockchain）是在比特币之后提出的一个概念，在中本聪关于比特币的论文中没有直接引 入blockchain的概念，而是以chain of block来描述一种数据结构。 Chain of block是指由多个区块通过哈希（hash）串联成一条链式结构的数据组织方式。区块链则是采用 多项技术交叉组合，维护管理这个chain of block数据结构，形成一个不可篡改的分布式账本的综合技术 领域。 区块链技术是一种在

峰值TPS 2万+ TPS（PBFT） 交易确认时延 秒级 硬件推荐配置 CPU 2.4GHz * 8核 内存 8GB 存储 4TB 网络带宽 10Mb 账本模型 数据结构 链式结构，区块通过哈希链相连 是否分叉 不分叉 记账类型 账户模型（非UTXO） 共识算法 共识框架 可插拔设计 共识算法 PBFT、Raft、rPBFT 存储引擎 存储设计 支持KV和SQL 引擎类型 支持 图灵完备，沙盒运行 整体架构 版本控制 基于CNS支持多版本合约 灰度升级 支持多版本合约共存、灰度升级 生命周期管理 支持合约和账户的冻结、解冻 密码算法和协议 国密算法 支持 国密SSL 支持 哈希算法 Keccak256、SM3 对称加密算法 AES、SM4 非对称加密算法 ECDSA、SM2 非对称加密椭圆 曲线 secp256k1、sm2p256v1 安全控制 存储安全 支持落盘数据加密存储 网络准入机制：限制节点加入、退出联盟链，可将指定群组的作恶节点 从群组中删除，保障了系统安全性。 黑白名单机制：每个群组仅可接收相应群组的消息，保证群组间网络通 信的隔离性；CA黑名单机制可及时与作恶节点断开网络连接，保障了系 统安全。 权限管理机制：基于分布式存储权限控制机制，灵活、细粒度地控制外 部账户部署合约和创建、插入、删除和更新用户表的权限。 支持国密算法：支持国密加密、签名算法和国密通信协议。 落盘

峰值TPS 2万+ TPS（PBFT） 交易确认时延 秒级 硬件推荐配置 CPU 2.4GHz * 8核 内存 8GB 存储 4TB 网络带宽 10Mb 账本模型 数据结构 链式结构，区块通过哈希链相连 是否分叉 不分叉 记账类型 账户模型（非UTXO） 共识算法 共识框架 可插拔设计 共识算法 PBFT、Raft、rPBFT 存储引擎 存储设计 支持KV和SQL 引擎类型 支持 图灵完备，沙盒运行 整体架构 版本控制 基于CNS支持多版本合约 灰度升级 支持多版本合约共存、灰度升级 生命周期管理 支持合约和账户的冻结、解冻 密码算法和协议 国密算法 支持 国密SSL 支持 哈希算法 Keccak256、SM3 对称加密算法 AES、SM4 非对称加密算法 ECDSA、SM2 非对称加密椭圆 曲线 secp256k1、sm2p256v1 安全控制 存储安全 支持落盘数据加密存储 网络准入机制：限制节点加入、退出联盟链，可将指定群组的作恶节点 从群组中删除，保障了系统安全性。 黑白名单机制：每个群组仅可接收相应群组的消息，保证群组间网络通 信的隔离性；CA黑名单机制可及时与作恶节点断开网络连接，保障了系 统安全。 权限管理机制：基于分布式存储权限控制机制，灵活、细粒度地控制外 部账户部署合约和创建、插入、删除和更新用户表的权限。 支持国密算法：支持国密加密、签名算法和国密通信协议。 落盘

峰值TPS 2万+ TPS（PBFT） 交易确认时延 秒级 硬件推荐配置 CPU 2.4GHz * 8核 内存 8GB 存储 4TB 网络带宽 10Mb 账本模型 数据结构 链式结构，区块通过哈希链相连 是否分叉 不分叉 记账类型 账户模型（非UTXO） 共识算法 共识框架 可插拔设计 共识算法 PBFT、Raft、rPBFT 存储引擎 存储设计 支持KV和SQL 引擎类型 支持 图灵完备，沙盒运行 整体架构 版本控制 基于CNS支持多版本合约 灰度升级 支持多版本合约共存、灰度升级 生命周期管理 支持合约和账户的冻结、解冻 密码算法和协议 国密算法 支持 国密SSL 支持 哈希算法 Keccak256、SM3 对称加密算法 AES、SM4 非对称加密算法 ECDSA、SM2 非对称加密椭圆 曲线 secp256k1、sm2p256v1 安全控制 存储安全 支持落盘数据加密存储 网络准入机制：限制节点加入、退出联盟链，可将指定群组的作恶节点 从群组中删除，保障了系统安全性。 黑白名单机制：每个群组仅可接收相应群组的消息，保证群组间网络通 信的隔离性；CA黑名单机制可及时与作恶节点断开网络连接，保障了系 统安全。 权限管理机制：基于分布式存储权限控制机制，灵活、细粒度地控制外 部账户部署合约和创建、插入、删除和更新用户表的权限。 支持国密算法：支持国密加密、签名算法和国密通信协议。 落盘

TPS（PBFT） 交易确认时延 秒级 硬件推荐配置 整体架构 CPU 2.4GHz * 8核 内存 8GB 存储 4TB 网络带宽 10Mb 账本模型 数据结构 链式结构，区块通过哈希链相连 是否分叉 不分叉 记账类型 账户模型（非UTXO） 共识算法 共识框架 可插拔设计 共识算法 PBFT、Raft、rPBFT 存储引擎 存储设计 支持KV和SQL 引擎类型 支持 图灵完备，沙盒运行 版本控制 基于CNS支持多版本合约 灰度升级 支持多版本合约共存、灰度升级 生命周期管理 支持合约和账户的冻结、解冻 密码算法和协议 国密算法 支持 国密SSL 支持 哈希算法 Keccak256、SM3 对称加密算法 AES、SM4 非对称加密算法 ECDSA、SM2 整体架构 非对称加密椭圆 曲线 secp256k1、sm2p256v1 安全控制 存储安全 网络准入机制：限制节点加入、退出联盟链，可将指定群组的作恶节点 从群组中删除，保障了系统安全性。 黑白名单机制：每个群组仅可接收相应群组的消息，保证群组间网络通 信的隔离性；CA黑名单机制可及时与作恶节点断开网络连接，保障了系 统安全。 权限管理机制：基于分布式存储权限控制机制，灵活、细粒度地控制外 部账户部署合约和创建、插入、删除和更新用户表的权限。 支持国密算法：支持国密加密、签名算法和国密通信协议。 落盘

TPS（PBFT） 交易确认时延 秒级 硬件推荐配置 整体架构 CPU 2.4GHz * 8核 内存 8GB 存储 4TB 网络带宽 10Mb 账本模型 数据结构 链式结构，区块通过哈希链相连 是否分叉 不分叉 记账类型 账户模型（非UTXO） 共识算法 共识框架 可插拔设计 共识算法 PBFT、Raft、rPBFT 存储引擎 存储设计 支持KV和SQL 引擎类型 支持 图灵完备，沙盒运行 版本控制 基于CNS支持多版本合约 灰度升级 支持多版本合约共存、灰度升级 生命周期管理 支持合约和账户的冻结、解冻 密码算法和协议 国密算法 支持 国密SSL 支持 哈希算法 Keccak256、SM3 对称加密算法 AES、SM4 非对称加密算法 ECDSA、SM2 整体架构 非对称加密椭圆 曲线 secp256k1、sm2p256v1 安全控制 存储安全 网络准入机制：限制节点加入、退出联盟链，可将指定群组的作恶节点 从群组中删除，保障了系统安全性。 黑白名单机制：每个群组仅可接收相应群组的消息，保证群组间网络通 信的隔离性；CA黑名单机制可及时与作恶节点断开网络连接，保障了系 统安全。 权限管理机制：基于分布式存储权限控制机制，灵活、细粒度地控制外 部账户部署合约和创建、插入、删除和更新用户表的权限。 支持国密算法：支持国密加密、签名算法和国密通信协议。 落盘

TPS（PBFT） 交易确认时延 秒级 硬件推荐配置 整体架构 CPU 2.4GHz * 8核 内存 8GB 存储 4TB 网络带宽 10Mb 账本模型 数据结构 链式结构，区块通过哈希链相连 是否分叉 不分叉 记账类型 账户模型（非UTXO） 共识算法 共识框架 可插拔设计 共识算法 PBFT、Raft、rPBFT 存储引擎 存储设计 支持KV和SQL 引擎类型 支持 图灵完备，沙盒运行 版本控制 基于CNS支持多版本合约 灰度升级 支持多版本合约共存、灰度升级 生命周期管理 支持合约和账户的冻结、解冻 密码算法和协议 国密算法 支持 国密SSL 支持 哈希算法 Keccak256、SM3 对称加密算法 AES、SM4 非对称加密算法 ECDSA、SM2 整体架构 非对称加密椭圆 曲线 secp256k1、sm2p256v1 安全控制 存储安全 网络准入机制：限制节点加入、退出联盟链，可将指定群组的作恶节点 从群组中删除，保障了系统安全性。 黑白名单机制：每个群组仅可接收相应群组的消息，保证群组间网络通 信的隔离性；CA黑名单机制可及时与作恶节点断开网络连接，保障了系 统安全。 权限管理机制：基于分布式存储权限控制机制，灵活、细粒度地控制外 部账户部署合约和创建、插入、删除和更新用户表的权限。 支持国密算法：支持国密加密、签名算法和国密通信协议。 落盘