 HBase Practice At XiaoMiznode(Security Problem). ○ Hard to authentication the request. ○ No coprocessor for interfaces. ➢ Async zookeeper notification from client to region server. ○ client won’t know whether the task is success or request authentication at hbase level ○ No coprocessor for interfaces in ReplicationAdmin. ➢ Async zookeeper notification from client to region server. ○ Client does not know whether the peer is added success request authentication at hbase level ○ No coprocessor for interfaces in ReplicationAdmin. ➢ Async zookeeper notification from client to region server. ○ Client does not know whether the peer is added success0 码力 | 56 页 | 350.38 KB | 1 年前3 HBase Practice At XiaoMiznode(Security Problem). ○ Hard to authentication the request. ○ No coprocessor for interfaces. ➢ Async zookeeper notification from client to region server. ○ client won’t know whether the task is success or request authentication at hbase level ○ No coprocessor for interfaces in ReplicationAdmin. ➢ Async zookeeper notification from client to region server. ○ Client does not know whether the peer is added success request authentication at hbase level ○ No coprocessor for interfaces in ReplicationAdmin. ➢ Async zookeeper notification from client to region server. ○ Client does not know whether the peer is added success0 码力 | 56 页 | 350.38 KB | 1 年前3
 HBase最佳实践及优化Secondary NameNode IBM 3650 PC,双路六核,Intel X5650处理器, 2.66GHz主频,48GB内存,6*1TB SATA硬盘 1台 HBase 集群Master和Zookeeper 节点 IBM 3650 PC,双路六核,Intel X5650处理器, 2.66GHz主频,48GB内存,6*1TB SATA硬盘 5台 DataNode/TaskTracker/Region 支持并发查询数目:1000请求/秒 Postgres Conference China 2016 中国用户大会 系统部署 • NameNode节点:3台 • DataNode(数据存储节点): 178台 • Zookeeper节点:7台 • 集群监控节点:1台 • 入库服务节点:24台 • Web查询应用服务节点:20台 • 机架间通过万兆交换机连接 • 网络冗余 DCN网络 IP承载网 客服系统 A 省 GGSN 核心交换机 核心交换机 防火墙 防火墙 接入路由器 查询接口服务器 DataNode and RegionServer 核心交换机 核心交换机 FTP传输及入库 NameNode节点 Zookeeper X 省 客服系统 GGSN SGSN Gn口 产创平台 采集系统 Postgres Conference China 2016 中国用户大会 某大规模HBase多用户服务平台 •0 码力 | 45 页 | 4.33 MB | 1 年前3 HBase最佳实践及优化Secondary NameNode IBM 3650 PC,双路六核,Intel X5650处理器, 2.66GHz主频,48GB内存,6*1TB SATA硬盘 1台 HBase 集群Master和Zookeeper 节点 IBM 3650 PC,双路六核,Intel X5650处理器, 2.66GHz主频,48GB内存,6*1TB SATA硬盘 5台 DataNode/TaskTracker/Region 支持并发查询数目:1000请求/秒 Postgres Conference China 2016 中国用户大会 系统部署 • NameNode节点:3台 • DataNode(数据存储节点): 178台 • Zookeeper节点:7台 • 集群监控节点:1台 • 入库服务节点:24台 • Web查询应用服务节点:20台 • 机架间通过万兆交换机连接 • 网络冗余 DCN网络 IP承载网 客服系统 A 省 GGSN 核心交换机 核心交换机 防火墙 防火墙 接入路由器 查询接口服务器 DataNode and RegionServer 核心交换机 核心交换机 FTP传输及入库 NameNode节点 Zookeeper X 省 客服系统 GGSN SGSN Gn口 产创平台 采集系统 Postgres Conference China 2016 中国用户大会 某大规模HBase多用户服务平台 •0 码力 | 45 页 | 4.33 MB | 1 年前3
 HBase基本介绍我们接下来看点实际的 • HMaster • RegionServer • Zookeeper • NameNode/DataNode 系统组成 如图有这么⼏几个组成部分, 前两个是HBase的 Master是负责管理理的, RegionServer是实际⼲干活的 zookeeper作为协调信息存储的地⽅方, ⽐比如节点健康状态 然后HBase的数据都要存放在hdfs上0 码力 | 33 页 | 4.86 MB | 1 年前3 HBase基本介绍我们接下来看点实际的 • HMaster • RegionServer • Zookeeper • NameNode/DataNode 系统组成 如图有这么⼏几个组成部分, 前两个是HBase的 Master是负责管理理的, RegionServer是实际⼲干活的 zookeeper作为协调信息存储的地⽅方, ⽐比如节点健康状态 然后HBase的数据都要存放在hdfs上0 码力 | 33 页 | 4.86 MB | 1 年前3
共 3 条
- 1













