夜莺-Nightingale
夜莺V7
夜莺V6
项目介绍
架构介绍
快速开始
黄埔营
安装部署
升级
采集器
使用手册
API
数据库表结构
users
target
user_group
user_group_member
task_tpl
task_tpl_host
task_record
sso_config
role
role_operation
recording_rule
notify_tpl
metric_view
datasource
configs
chart_share
busi_group
busi_group_member
builtin_cate
board
board_payload
alerting_engines
alert_subscribe
alert_rule
alert_mute
alert_his_event
alert_cur_event
alert_aggr_view
FAQ
转发数据给多个时序库
机器列表数据异常
数据流图
监控数据时有时无
查询原始监控数据
快捷视图详解
告警自愈模块使用
仪表盘里只展示我的机器
仪表盘里图表数据缺失
设置自定义告警通知方式
target_up指标的问题
夜莺可以监控 x 么
告警和恢复的判断逻辑
容量规划问题
connection refused
登录与认证
数据采集器Categraf
日志写到`/var/log/messages`
告警规则&告警模板如何引用变量
采集到的数据是字符串怎么处理
管理员密码忘记了
制作大盘如何添加图片
添加loki数据源报错
v6小版本升级有什么 sql 要执行吗
机器列表有展示,但采集数据查询不到
n9e 启动异常报错
n9e集群部署配置修改
推送 Promethus 报错 OOO
机器列表怎么忽略云资源
告警规则仅在本业务组生效失败
categraf 启动 oracle 插件报错
告警自愈不生效
n9e查询时序库EOF报错
手动编译项目报错
promQL 使用函数标签信息丢失
内存使用率+可用率不等于100
夜莺仪表盘有哪些内置变量
categraf配置文件支持热加载吗
导入 Grafana 仪表盘无效数据源
如何查看报错消息
采集器-Categraf
开源生态
Telegraf
Prometheus
版权声明
第1章:天降奇兵
第2章:探索PromQL
开篇
理解时间序列
Metrics类型
初识PromQL
PromQL操作符
PromQL聚合操作
PromQL内置函数
在HTTP API中使用PromQL
最佳实践:4个黄金指标和USE方法
小结
第3章:Prometheus告警处理
开篇
Prometheus告警简介
自定义Prometheus告警规则
部署Alertmanager
Alertmanager配置概述
基于标签的告警处理路由
使用Receiver接收告警信息
告警模板详解
屏蔽告警通知
使用Recoding Rules优化性能
小结
第4章:Exporter详解
第5章:数据与可视化
第6章:集群与高可用
第7章:Prometheus服务发现
第8章:监控Kubernetes
开篇
初识Kubernetes
在Kubernetes下部署Prometheus
Kubernetes下的服务发现
使用Prometheus监控Kubernetes集群
基于Prometheus的弹性伸缩
小结
第9章:Prometheus Operator
参考资料
告警腳本使用前提
首先需要夜鶴 v7.0.0-beta.2.0.1 以上的版本,之前的版本也有告警自癒的能力,但之前的版本需要額外安裝部署 ibex 模塊,從這個版本開始就不需要單獨的 ibex 模塊了。
修改夜鶴服務端的配置
在夜鶴的配置文件:etc/config.toml
中搜索 Ibex,把 Enable 設置為 true:
重啟夜鶴,讓配置生效。此時通過 ss 或 netstat 命令可以看到夜鶴服務端監聽了 20090 端口。這是 categraf 拉取腳本任務、上報腳本結果的端口。
修改 categraf 的配置
categraf 的配置文件是 conf/config.toml
。在 conf/config.toml
中搜索 ibex,把 enable 設置為 true,並正確配置夜鶴服務端的地址和端口:
如果你的機器量比較大,比如超過 10000 台,建議把 interval 調整的稍微大一些,比如 2500ms,要不然容易給服務端造成太大壓力。servers
配置是個數組,配置所有的夜鶴服務端的地址,如果你有多個夜鶴服務端實例,categraf 啟動時會自動探測,連到那個網絡延遲最小的實例上,如果夜鶴服務端實例掛了,categraf 會自動切換到另外一個實例上,保證高可用。
改完配置之後重啟 categraf,讓配置生效。
配置腳本
下面是一個重啟 systemctl 守護進程服務的簡單 shell 腳本,通過 stdin 讀取進程名稱,最後執行啟動服務命令,這個腳本可以適配 systemctl 守的大部分服務。 Python ]參考這裡。
關聯告警規則
配置好腳本後,需要將回調腳本地址配置到告警規則中。
在告警規則回調地址中填寫告警自癒回調地址。
查看自癒腳本執行記錄
最後觸發進程告警後,會自動調取腳本執行恢復啟動進程命令。