夜莺-Nightingale

夜莺V7

项目介绍功能概览

部署升级

部署说明老版本升级附：Docker Compose 附：二进制部署附：高可用部署附：Prometheus 部署附：部署采集器附：边缘机房部署

数据接入

数据源接入导入仪表盘数据采集

告警管理

快速入门 PromQL 邮件推送企微推送钉钉推送回调推送脚本推送自定义通知模板告警屏蔽告警自愈告警事件

数据查看

即时查询仪表盘

功能介绍

基础设施

商业版

采集配置网络设备网络设备采集模板

开源版

机器列表

仪表盘

巡检报告(商业版) 集成仪表盘

数据源

商业版

阿里云 SLS 阿里云 Prometheus Jaeger 数据源 MySQL 数据源腾讯云 Prometheus 腾讯云 CLS Zabbix 数据源

开源版

ES 数据源 Loki 数据源 Prometheus 数据源 TDengine 数据源

日志分析

商业版

阿里云 SLS 腾讯云 CLS

开源版

Elasticserch Loki

时序指标

快捷视图

即时查询

商业版

MySQL Zabbix

开源版

Prometheus TDengine

告警管理

告警规则

基础配置

规则配置

Prometheus 告警

商业版

ES日志告警规则 MySQL 日志告警规则阿里云 SLS 日志告警规则腾讯云 CLS 日志告警规则

告警条件

表达式说明

MySQL 表达式语法(商业版)

告警表达式语法

生效配置 PromQL 变量设置

历史告警订阅告警屏蔽告警

模板中心

商业版

采集模板

开源版

指标模板告警规则模板仪表盘模板

通知管理

通知规则介绍阿里云短信

告警自愈

创建临时任务自愈脚本

人员组织

业务组管理团队管理用户管理权限管理

系统配置

变量设置告警引擎站点设置(开源版) 通知模板

通知设置

商业版

阿里云短信阿里云语音腾讯云短信腾讯云语音

开源版

联系方式通知媒介

单点登录

CAS LDAP OAUTH2 OIDC

API FAQ

夜莺V6

项目介绍架构介绍

快速开始

最快速体验

黄埔营

安装部署

部署说明 Docker Compose 高级部署方案附：Prometheus 部署

升级

采集器

概述 Categraf Datadog-agent Falcon插件 Grafana-agent Telegraf

使用手册

仪表盘

仪表盘图表配置

告警管理

告警规则内置规则告警屏蔽告警订阅活跃告警历史告警通知媒介

时序指标

即时查询快捷视图记录规则

日志分析

即时查询

基础设施

机器列表采集配置

告警自愈人员组织数据源通知配置通知模板单点登录 ES日志监控（专业版）自监控权限管理

API

数据读取数据推送操作类接口回调地址对接方式

数据库表结构

users notify_tpl board users target target user_group user_group_member task_tpl task_tpl_host task_record sso_config role role_operation recording_rule notify_tpl metric_view datasource configs chart_share busi_group busi_group_member builtin_cate builtin_cate builtin_cate builtin_cate board board_payload alerting_engines alert_subscribe alert_rule alert_mute alert_his_event alert_cur_event alert_aggr_view

FAQ

转发数据给多个时序库机器列表数据异常数据流图监控数据时有时无查询原始监控数据快捷视图详解告警自愈模块使用仪表盘里只展示我的机器仪表盘里图表数据缺失设置自定义告警通知方式 target_up指标的问题夜莺可以监控 x 么夜莺告警常见问题排查思路告警和恢复的判断逻辑容量规划问题 connection refused 登录与认证数据采集器Categraf 日志写到`/var/log/messages` 告警规则&告警模板如何引用变量采集到的数据是字符串怎么处理管理员密码忘记了制作大盘如何添加图片添加loki数据源报错 v6小版本升级有什么 sql 要执行吗机器列表有展示，但采集数据查询不到 n9e 启动异常报错 n9e集群部署配置修改推送 Promethus 报错 OOO 机器列表怎么忽略云资源告警规则仅在本业务组生效失败 categraf 启动 oracle 插件报错告警自愈不生效 n9e查询时序库EOF报错手动编译项目报错 promQL 使用函数标签信息丢失内存使用率+可用率不等于100 夜莺仪表盘有哪些内置变量 categraf配置文件支持热加载吗导入 Grafana 仪表盘无效数据源如何查看报错消息

夜莺V5

项目介绍藏经阁

安装部署

事前必读 Docker Compose 方式 Helm 方式二进制方式 VictoriaMetrics 告警自愈模块

采集器

Telegraf Grafana-agent Falcon插件 Datadog-agent Categraf

使用手册

SNMP 应用监控 Mtail日志监控 JVM监控钉钉告警电话短信告警告警通知告警格式 Relabel 自监控

API

数据读取数据推送 Webapi接口

采集器-Categraf

插件配置

插件综述基础指标采集插件 netstat采集插件 netstat_filter采集插件 procstat采集插件 http_response mysql插件 redis插件 snmp插件 ipmi采集插件 dcgm插件 nvidia_smi插件 cadvisor采集插件 smart采集插件 postgresql插件 mongodb插件 elasticsearch采集插件 exec采集插件 emqx采集插件阿里云指标采集插件 Zabbix 指标转换插件 cloudwatch指标采集插件 google cloud指标采集插件 mtail插件 prometheus采集插件页面配置采集插件

Flashcat 企业版

总体介绍

北极星

简介落地步骤最佳实践 SLA管理实践

灭火图

简介落地步骤最佳实践

事件墙

简介落地步骤最佳实践

日志分析

简介落地步骤最佳实践

最佳实践

如何获取Flashcat即时查询带参数的URL 如何修改北极星大屏的Logo 如何嵌入Flashcat Web页面

开源生态

Telegraf

介绍、安装、初步测试 CPU、MEM、DISK、IO插件 kernel、system、processes插件 exec、net、netstat插件端口监控、TCP探测 PING、Procstat插件

Prometheus

第1章:天降奇兵

开篇 Prometheus简介

初识Prometheus

安装Prometheus Server 使用Node Exporter采集主机数据使用PromQL查询监控数据使用Grafana创建可视化Dashboard

任务和实例 Prometheus核心组件讲解小结

第2章:探索PromQL

开篇理解时间序列 Metrics类型初识PromQL PromQL操作符 PromQL聚合操作 PromQL内置函数在HTTP API中使用PromQL 最佳实践：4个黄金指标和USE方法小结

第3章:Prometheus告警处理

开篇 Prometheus告警简介自定义Prometheus告警规则部署Alertmanager Alertmanager配置概述基于标签的告警处理路由

使用Receiver接收告警信息

概述与SMTP邮件集成与Slack集成与企业微信集成集成钉钉：基于Webhook的扩展

告警模板详解屏蔽告警通知使用Recoding Rules优化性能小结

第4章:Exporter详解

开篇 Exporter是什么

常用Exporter

容器监控：cAdvisor 使用 Prometheus 监控 MySQL 运行状态：MySQLD Exporter 网络探测：Blackbox Exporter

使用Java自定义Exporter

使用Client Java构建Exporter程序在应用中内置Prometheus支持

小结

第5章:数据与可视化

开篇使用Console Template Grafana基本概念

Grafana与数据可视化

概述变化趋势：Graph面板分布统计：Heatmap面板当前状态：SingleStat面板

模板化Dashboard 小结

第6章:集群与高可用

开篇 Prometheus 本地存储 Prometheus 远程存储 Prometheus 联邦集群 Prometheus 高可用 Alertmanager 高可用小结

第7章:Prometheus服务发现

开篇 Prometheus与服务发现基于文件的服务发现基于Consul的服务发现服务发现与Relabeling 小结

第8章:监控Kubernetes

开篇初识Kubernetes 在Kubernetes下部署Prometheus Kubernetes下的服务发现使用Prometheus监控Kubernetes集群基于Prometheus的弹性伸缩小结

第9章:Prometheus Operator

开篇什么是Prometheus Operator 使用Operator管理Prometheus 使用Operator管理监控配置在Prometheus Operator中使用自定义配置本章小结

参考资料

接入 Loki 數據源

在數據源管理—>右上角點擊新增—>選擇 Loki

l01

根據要求填寫相關信息即可，如果 Loki 服務沒有配置多租戶模式就不用填寫下面的 Header 和 Value，租戶 ID 可以聯繫 Loki 管理員。

l02

如何確認是否開啟多租戶呢？其實很簡單，不帶租戶 ID 請求一下服務，看返回結果就可以知道了。返回 “no org id”，那就是需要租戶 ID，如下圖所示。

l03

正常返回數據就不需要租戶 ID ，如下圖所示。

l04

查詢數據

場景一：查詢每個具有 401 狀態的日誌行 {container="evaluate-loki-flog-1"} | json | status="401"

l05

場景二：查詢最近5分鐘狀態碼是401的日誌數量 count_over_time({container="evaluate-loki-flog-1"} |= "401" [5m])

l06

配置警報

警報場景：如果查詢最近5分鐘狀態碼是401的日誌數量大於0 則觸發警報

此警報場景可靈活替換，例如替換成 ERROR 關鍵詞的出現次數或某個錯誤碼的出現次數等。

在警報配置中選擇 Loki 警報源，配置警報表達式。

l07

配置完成後可在歷史警報中查看警報詳情。

l08

排錯分析

若警報配置未能正常觸發，可以通過查看 DEBUG.log 來查看相關錯誤信息，關鍵詞可以查詢 “rule_eval” 和 “警報 ID”。

l09