Schema设计 OpenTSDB 存监控指标的时序数据库 [salt][... RowKey: Column Qualifier: 指定指标的所有数据 指定指标指定时间的所有数据 指定⼀一个服务器器所有指标? 内存使⽤用率 20190725 16 机器器号 机器器号 2294 类似关系数据中建索引的时候, 最左前缀的原则 Schema设计 OpenTSDB 另⼀一种存指标数据的设计 RowKey: Column Qualifier: ⻥鱼和熊掌不不可兼得: 冗余 Schema设计 有趣的操作 • 倒序域名: com.google.cloud 利利于压缩空间 •

Storage • 场景 – 用于收集并存储非结构化以及半结构化数据 – 数据存储要求可靠 – 保证数据强一致性 – 数据可被排序以便提供低延时的随机查询 • 案例 – 原始日志查询系统 – 在线指标查询系统 • 主要组件 – HBase, Flume, Sqoop 10 Postgres Conference China 2016 中国用户大会 HBase适用场景 • 高并发高性能读写访问场景 主要包含数据采集子系统、数据入库 子系统、数据存储子系统、数据查询 与分析子系统 • 采用Hadoop/HBase作为上网记录存储 方案 • 采用MapReduce/Hive作用统计分析和 数据挖掘工具 【关键性能指标】 – 每日入库>5TB数据 – 上网记录入库时间：一般小于30分钟， 实际约10分钟 – 存储全国移动用户不小于6个月的原始 上网记录，统计分析中间报表数据保存 不小于5年 – 上网记录查询速度：不高于1秒（不含