TiDB:多集群告警监控-初章-监控融合、自动告警处理
在 TiDB 集群数量持续增加、业务物理隔离和多套 Grafana 分散管理的背景下,本文介绍如何用夜莺统一 TiDB 多集群监控、业务组、数据源、告警规则和飞书通知模板。
围绕可观测性、AI SRE、告警治理、On-call、Nightingale、Categraf、Prometheus、Kubernetes、Zabbix、用户案例和产品更新,沉淀一线工程实践、选型参考和稳定性治理方法。
在 TiDB 集群数量持续增加、业务物理隔离和多套 Grafana 分散管理的背景下,本文介绍如何用夜莺统一 TiDB 多集群监控、业务组、数据源、告警规则和飞书通知模板。
途游游戏在多云与 IDC 混合环境中使用 Flashduty 统一夜莺、Falcon 和云监控告警,落地 OnCall 值班、告警降噪、分派升级和告警复盘闭环。
益丰大药房将 Zabbix、Prometheus、Nightingale 和云监控告警统一接入 Flashduty,解决多监控系统告警分散、缺少认领升级和告警降噪的问题。
这是一篇 cprobe 项目早期招募文章,介绍为什么想做一个 Go 语言编写的探针式监控采集器,以及它和本地式采集器、Prometheus Exporter、vmagent 的边界。
夜莺 v6.5.0 发布说明:启用新 Logo,菜单和仪表盘支持暗黑模式,团队和业务组支持多层级树展示,Host 告警筛选支持正则匹配。
知名火锅连锁企业使用 Flashcat 和 Categraf 集中监控上千家门店的服务器、网络、数据库、业务进程和 IT 设备,并以门店 IT 健康度评分发现、治理低质量门店。
国泰君安期货将 20 套异构监控平台统一到 1 套 Flashcat,通过日志结构化、指标采集、用户 ID 关联和灭火图,探索期货核心业务可观测性和统一监控平台建设路径。
夜莺专业版网络设备采集模块基于 SNMP 方案,提供采集模板、网络设备配置、批量添加、即时查询、告警规则和仪表盘能力,帮助用户降低网络设备监控配置与维护成本。
本文用 Kafka、ClickHouse、ClickVisual、Categraf、MySQL、Redis 和 Kowl 搭建日志平台实验环境,演示日志从采集、Kafka 传输、ClickHouse 入库、物化视图处理到 ClickVisual 查询的完整流程。
夜莺 Nightingale v6.4.0 发布说明:新增全局宏变量功能,支持敏感信息变量化;HTTP access log 可打印 body,并优化仪表盘、权限和通知管理。
Flashduty 2023-10-30 更新说明:新增告警路由能力,支持按条件将告警投递到不同协作空间;上线 Slack 应用,支持在 Slack 中接收、查看和处理告警。
日志分析在稳定性保障中既要控制成本,也要服务故障定位。本文介绍以网关日志为核心,把日志、指标、Trace 和特征分析串联起来的可观测性建设方案,并说明 Flashcat 如何复用存量数据源完成统一分析。
系统介绍国产开源监控系统夜莺 Nightingale:部署方式、数据源接入、仪表盘、采集器、告警管理、架构模块和多机房场景。
夜莺 Nightingale v6.3.0 发布说明:正式增强 Loki 和 TDEngine 数据源支持,去除 ops.yaml,统一 edge heartbeat 接口,并优化仪表盘和 Elasticsearch 查询体验。
稳定性保障的关键,是把业务可用性目标、故障发现定位止损、冗余切换、降级熔断、限流、弹性伸缩、灰度发布和云服务治理串成可执行闭环。本文总结 8 个稳定性保障实践,适合 SRE、运维和研发团队用于故障响应与可靠性建设。
本文介绍 Cloudflare 使用 ClickHouse 做日志分析的实践:为什么 Elasticsearch 在高吞吐日志场景下面临 mapping 爆炸、多租户、维护和 GC 压力,以及 ClickHouse 如何通过列式存储、压缩、分片复制、表 schema、分区、主键和数据跳过索引支撑日志分析。
Vector 是一款开源的可观测性数据收集、转换和路由工具,常被用作 Logstash 替代方案。本文介绍 Vector 的 Source、Transform、Sink pipeline 模型、安装方式、配置示例,以及 Agent、Aggregator、Daemon、Sidecar 等部署模式。
VictoriaLogs 是 VictoriaMetrics 团队推出的日志存储系统。本文整理 VictoriaLogs 与 Elasticsearch、OpenSearch、Grafana Loki、ClickHouse 的对比,说明它在日志查询、资源占用、字段索引、LogSQL 和架构设计上的取舍。
Flashduty 2023-09-21 更新说明:新增自定义字段、开发者文档和 Open API 秘钥管理,帮助团队丰富故障信息、筛选事件并通过 API、Event API、Webhook 与内部系统集成。
Grafana Beyla 是面向 eBPF 可观测性的采集器,可在不侵入业务代码的前提下采集 HTTP 服务的 RED 指标。本文用 Go HTTP 服务演示 Beyla 的安装、运行参数、Prometheus 指标暴露和 Grafana Dashboard 使用方式。