企业级IT与信创国产化深度观察 | 大观视界
企业级IT与信创国产化深度观察 | 大观视界
可观测性三支柱的数据特征分化决定了存储层的异构性。Metrics层对高吞吐写入和时间聚合查询的诉求,与Logs层对全文检索的需求、Traces层对拓扑遍历的需求本质不同。在存储选型上,没有单一引擎能同时最优化三类负载。工程实践中更务实的路径是:Metrics层采用专门的存储引擎,通过标准的远程读写协议与采集层解耦,在查询层实现跨数据源的关联。时序数据库在Metrics层的角色,不仅是一个存储后端,
| 产品名称 | IT基础设施可观测性:Metrics、Logs与Traces的数据架构深度解析 |
|---|---|
| 产品系列 | 时序数据库 |
| 官方介绍 | 可观测性三支柱的数据特征分化决定了存储层的异构性。Metrics层对高吞吐写入和时间聚合查询的诉求,与Logs层对全文检索的需求、Traces层对拓扑遍历的需求本质不同。在存储选型上,没有单一引擎能同时最优化三类负载。工程实践中更务实的路径是:Metrics层采用专门的存储引擎,通过标准的远程读写协议与采集层解耦,在查询层实现跨数据源的关联。时序数据库在Metrics层的角色,不仅是一个存储后端,更是连接采集层与可视化层的查询枢纽,其架构设计直接决定了可观测性平台的扩展上限。 |
| 数据类型 | 采集频率 |
| 维度数量 | 单条大小 |
| 关联模式 | 典型查询场景 |
| Metrics | 5-60s |
| 10-20标签 | 50-200字节 |
| 标签组合 | 实时看板、趋势分析、告警 |
| Logs | 事件驱动 |
| 30-50字段 | 500-5000字节 |
| trace_id关联 | 全文检索、字段过滤、聚合统计 |
| Traces | 请求驱动 |
| 15-30字段 | 200-1000字节 |
| 父子Span树 | 链路重建、延迟分析、瓶颈定位 |
| 化工生产场景批次分析与关联分析 | 氯化亚砜反应釜生产批次监控,冷却失效关联追踪 / 立即体验 |
| 金属加工场景根因分析与质量溯源 | 铝加工生产全流程监控,批次对比分析,钎焊强度根因溯源 / 立即体验 |
| 新能源集控 | 风光储一体化多维指标监控,故障异常事件智能根因分析 / 立即体验 |
| 互动和支持 | 加入技术论坛 | 联系销售 | 添加公众号 | 查看源代码 | 下载 TDengine |
| 写入模式具备典型的时间序列特征 | 同一指标的时间线(由标签组合唯一标识)按时间递增追加写入,几乎无更新操作。这一特征使得LSM-Tree(Log-Structured Merge Tree)成为存储引擎的优选——顺序写入、批量合并、按时间范围组织数据文件。 |
| 实时看板查询 | 查询最近1小时数据,按时间窗口降采样后返回。延迟要求在200ms以内。这类查询命中最新数据,缓存命中率极高,关键在于最新值缓存与最近时间段数据的快速定位。 |
| 容量规划查询 | 查询最近7-30天数据,按1小时或1天降采样,计算趋势。数据量大但聚合粒度粗,瓶颈在扫描范围而非计算复杂度。列式存储在此场景下优势明显——只需读取聚合涉及的字段列,而非整行数据。 |
| 根因分析查询 | 查询特定时间点、特定指标、特定标签组合的数据。时间范围窄(几分钟到几小时),但标签过滤条件复杂。这要求标签索引能够高效定位特定时间线。 |
| 传统基础设施监控聚焦于通用指标 | CPU利用率、内存使用率、磁盘I/O、网络吞吐。这些指标由操作系统或运行时提供,采集标准统一(如node_exporter的metrics),Schema固定,标签维度有限。 |
| 聚合运算 | sum、avg、max、min、histogram_quantile |
| 向量匹配 | 基于标签的向量间运算 |
| 工业互联网下一个十年 | 从概念到工程落地的技术审视 » |
| 产品特点 | 即时查询(Instant Query):返回某个时间点的指标值 |
| 产品特点 | 范围查询(Range Query):返回时间范围内的数据点序列 |
| 产品特点 | 向量匹配:基于标签的向量间运算 |
| 资料来源 | 企业官网产品页 https://www.taosdata.com/time-series-database-knowledge/39453.html |
参数由厂商公开资料整理,实际以产品实物及官方说明为准。