一站式告警响应平台Flashduty，立即注册免费试用
夜莺-Nightingale
夜莺V7
项目介绍 功能概览
部署升级 部署升级
部署说明 老版本升级 附：Docker Compose 附：二进制部署 附：高可用部署 附：Prometheus 部署 附：部署采集器 附：边缘机房部署
数据接入 数据接入
数据源接入 导入仪表盘 数据采集
告警管理 告警管理
快速入门 PromQL 邮件推送 企微推送 钉钉推送 回调推送 脚本推送 自定义通知模板 告警屏蔽 告警自愈 告警事件
数据查看 数据查看
即时查询 仪表盘
功能介绍 功能介绍
基础设施 基础设施
商业版 商业版
采集配置 网络设备 网络设备采集模板
开源版 开源版
机器列表
仪表盘 仪表盘
巡检报告(商业版) 集成仪表盘
数据源 数据源
商业版 商业版
阿里云 SLS 阿里云 Prometheus Jaeger 数据源 MySQL 数据源 腾讯云 Prometheus 腾讯云 CLS Zabbix 数据源
开源版 开源版
ES 数据源 Loki 数据源 Prometheus 数据源 TDengine 数据源
日志分析 日志分析
商业版 商业版
阿里云 SLS 腾讯云 CLS
开源版 开源版
Elasticserch Loki
时序指标 时序指标
快捷视图
即时查询 即时查询
商业版 商业版
MySQL Zabbix
开源版 开源版
Prometheus TDengine
告警管理 告警管理
告警规则 告警规则
基础配置
规则配置 规则配置
Prometheus 告警
商业版 商业版
ES日志告警规则 MySQL 日志告警规则 阿里云 SLS 日志告警规则 腾讯云 CLS 日志告警规则
告警条件 告警条件
表达式说明 表达式说明
MySQL 表达式语法(商业版)
告警表达式语法
生效配置 PromQL 变量设置
历史告警 订阅告警 屏蔽告警
模板中心 模板中心
商业版 商业版
采集模板
开源版 开源版
指标模板 告警规则模板 仪表盘模板
告警自愈 告警自愈
创建临时任务 自愈脚本
人员组织 人员组织
业务组管理 团队管理 用户管理 权限管理
系统配置 系统配置
变量设置 告警引擎 站点设置(开源版) 通知模板
通知设置 通知设置
商业版 商业版
阿里云短信 阿里云语音 腾讯云短信 腾讯云语音
开源版 开源版
联系方式 通知媒介
单点登录 单点登录
CAS LDAP OAUTH2 OIDC
API FAQ
夜莺V6
项目介绍 架构介绍
快速开始 快速开始
最快速体验
黄埔营
安装部署 安装部署
部署说明 Docker Compose 高级部署方案 附：Prometheus 部署
升级
采集器 采集器
概述 Categraf Datadog-agent Falcon插件 Grafana-agent Telegraf
使用手册 使用手册
仪表盘 仪表盘
仪表盘 图表配置
告警管理 告警管理
告警规则 内置规则 告警屏蔽 告警订阅 活跃告警 历史告警 通知媒介
时序指标 时序指标
即时查询 快捷视图 记录规则
日志分析 日志分析
即时查询
基础设施 基础设施
机器列表 采集配置
告警自愈 人员组织 数据源 通知配置 通知模板 单点登录 ES日志监控（专业版） 自监控 权限管理
API API
数据读取 数据推送 操作类接口 回调地址对接方式
数据库表结构 数据库表结构
users target user_group user_group_member task_tpl task_tpl_host task_record sso_config role role_operation recording_rule notify_tpl metric_view datasource configs chart_share busi_group busi_group_member builtin_cate board board_payload alerting_engines alert_subscribe alert_rule alert_mute alert_his_event alert_cur_event alert_aggr_view
FAQ FAQ
转发数据给多个时序库 机器列表数据异常 数据流图 监控数据时有时无 查询原始监控数据 快捷视图详解 告警自愈模块使用 仪表盘里只展示我的机器 仪表盘里图表数据缺失 设置自定义告警通知方式 target_up指标的问题 夜莺可以监控 x 么 告警和恢复的判断逻辑 容量规划问题 connection refused 登录与认证 数据采集器Categraf 日志写到`/var/log/messages` 告警规则&告警模板如何引用变量 采集到的数据是字符串怎么处理 管理员密码忘记了 制作大盘如何添加图片 添加loki数据源报错 v6小版本升级有什么 sql 要执行吗 机器列表有展示，但采集数据查询不到 n9e 启动异常报错 n9e集群部署配置修改 推送 Promethus 报错 OOO 机器列表怎么忽略云资源 告警规则仅在本业务组生效失败 categraf 启动 oracle 插件报错 告警自愈不生效 n9e查询时序库EOF报错 手动编译项目报错 promQL 使用函数标签信息丢失 内存使用率+可用率不等于100 夜莺仪表盘有哪些内置变量 categraf配置文件支持热加载吗 导入 Grafana 仪表盘无效数据源 如何查看报错消息
夜莺V5
项目介绍 藏经阁
安装部署 安装部署
事前必读 Docker Compose 方式 Helm 方式 二进制方式 VictoriaMetrics 告警自愈模块
采集器 采集器
Telegraf Grafana-agent Falcon插件 Datadog-agent Categraf
使用手册 使用手册
SNMP 应用监控 Mtail日志监控 JVM监控 钉钉告警 电话短信告警 告警通知 告警格式 Relabel 自监控
API API
数据读取 数据推送 Webapi接口
采集器-Categraf
总体介绍
安装部署
主配置文件
日志采集
Prometheus agent
Trace采集
高级配置
插件配置
插件综述 基础指标采集插件 netstat采集插件 procstat采集插件 http_response mysql插件 redis插件 snmp插件 ipmi采集插件 dcgm插件 nvidia_smi插件 cadvisor采集插件 smart采集插件 postgresql插件 mongodb插件 elasticsearch采集插件 exec采集插件 emqx采集插件 阿里云指标采集插件 cloudwatch指标采集插件 google cloud指标采集插件 mtail插件 prometheus采集插件 页面配置采集插件
Flashcat 企业版
总体介绍
北极星
简介 落地步骤 最佳实践 SLA管理实践
灭火图
简介 落地步骤 最佳实践
事件墙
简介 落地步骤 最佳实践
日志分析
简介 落地步骤 最佳实践
最佳实践
如何修改北极星大屏的Logo 如何嵌入Flashcat Web页面
开源生态
Telegraf
介绍、安装、初步测试 CPU、MEM、DISK、IO插件 kernel、system、processes插件 exec、net、netstat插件 端口监控、TCP探测 PING、Procstat插件
Prometheus
版权声明
第1章:天降奇兵 第1章:天降奇兵
开篇 Prometheus简介
初识Prometheus 初识Prometheus
安装Prometheus Server 使用Node Exporter采集主机数据 使用PromQL查询监控数据 使用Grafana创建可视化Dashboard
任务和实例 Prometheus核心组件讲解 小结
第2章:探索PromQL 第2章:探索PromQL
开篇 理解时间序列 Metrics类型 初识PromQL PromQL操作符 PromQL聚合操作 PromQL内置函数 在HTTP API中使用PromQL 最佳实践：4个黄金指标和USE方法 小结
第3章:Prometheus告警处理 第3章:Prometheus告警处理
开篇 Prometheus告警简介 自定义Prometheus告警规则 部署Alertmanager Alertmanager配置概述 基于标签的告警处理路由
使用Receiver接收告警信息 使用Receiver接收告警信息
概述 与SMTP邮件集成 与Slack集成 与企业微信集成 集成钉钉：基于Webhook的扩展
告警模板详解 屏蔽告警通知 使用Recoding Rules优化性能 小结
第4章:Exporter详解 第4章:Exporter详解
开篇 Exporter是什么
常用Exporter 常用Exporter
容器监控：cAdvisor 使用 Prometheus 监控 MySQL 运行状态：MySQLD Exporter 网络探测：Blackbox Exporter
使用Java自定义Exporter 使用Java自定义Exporter
使用Client Java构建Exporter程序 在应用中内置Prometheus支持
小结
第5章:数据与可视化 第5章:数据与可视化
开篇 使用Console Template Grafana基本概念
Grafana与数据可视化 Grafana与数据可视化
概述 变化趋势：Graph面板 分布统计：Heatmap面板 当前状态：SingleStat面板
模板化Dashboard 小结
第6章:集群与高可用 第6章:集群与高可用
开篇 Prometheus 本地存储 Prometheus 远程存储 Prometheus 联邦集群 Prometheus 高可用 Alertmanager 高可用 小结
第7章:Prometheus服务发现 第7章:Prometheus服务发现
开篇 Prometheus与服务发现 基于文件的服务发现 基于Consul的服务发现 服务发现与Relabeling 小结
第8章:监控Kubernetes 第8章:监控Kubernetes
开篇 初识Kubernetes 在Kubernetes下部署Prometheus Kubernetes下的服务发现 使用Prometheus监控Kubernetes集群 基于Prometheus的弹性伸缩 小结
第9章:Prometheus Operator 第9章:Prometheus Operator
开篇 什么是Prometheus Operator 使用Operator管理Prometheus 使用Operator管理监控配置 在Prometheus Operator中使用自定义配置 本章小结
参考资料

日志分析落地步骤

落地步骤

目标：完成日志源和日志接入配置，产生基本的观测维度，输出维度分析信息和基本特征分析信息，并能够查看到日志原文

步骤一：配置日志源

首先需要接入日志源，有几种方式：

  • 大部分情况下企业内部已采集了网关或服务的日志，则只要在Flashcat的数据集成系统中配置相应的消息队列（通常是kafka）topic数据源即可；
  • 也可以配置采集agent（如filebeat），将采集的日志同时发送一份到Flashcat的kafka，再在数据集成系统中进行简单配置来实现日志源的接入；
  • 如日志还没有采集，则可以安装fliebeat或开源categraf来采集日志，上报到Flashcat的kafka，其它步骤同上；
  • Flashcat也支持从已存储了日志的Elasticsearch中获取日志，但这个方案会受限于ES接口的限流设置，维护成本较高，也不太可控，不推荐采用这个方案；

输出：在数据集成系统中完成日志源的配置

步骤二：接入日志配置提取规则

配置好日志源后，就可以具体的接入日志。接入日志的过程中需要选择日志源，并选择创建新日志主题，或是加入已有日志主题。
日志接入的核心是配置日志提取规则，确定日志提取的方式和效果。

重要提示：
  • 建议具有相同格式和表意的日志源关联到同一日志主题中。日志主题的分类如网关日志、cache日志、存储日志、xx业务日志等。
  • 网关日志，特别是统一网关的日志，最有利于做日志分析的观测，建议优先接入服务的网关日志。
重要提示：
  • 日志接入过程中可以给特殊的字段做含义指定，如代表请求状态码的字段、代表响应延迟的字段、代表traceid的字段、代表请求来源ip的字段等等。系统里会引导完成这些字段的指定，一部分指定是完成维度分析所必须的，一部分指定是故障分析的联动能力及特征分析能力的增强，如实现对tracing系统的联动等。这部分将在进阶实践部分介绍。

输出：完成日志的接入，在主题管理中可以看到相应日志源接入的效果

步骤三：配置常态观测维度

日志接入后需要在相应的日志主题中配置观测维度才能查看信息。观测维度可在系统中进行快速简单的配置完成。

重要提示：
  • 建议至少配置接口维度、集群维度，并将企业内部日常故障处理中常观测的维度都配置出来，如请求来源维度、地域维度等。

输出：完成业务故障特征分析常用维度的配置

快猫星云 联系方式 快猫星云 联系方式
快猫星云 联系方式
快猫星云 联系方式
快猫星云 联系方式
快猫星云Email
申请技术交流产品试用
快猫星云
OpenSource
开源版
Nightingale
Categraf
Flashcat
Flashcat
企业版
FlashDuty
Flashduty
产品介绍
控制台
API
文档中心
下载中心
视频中心
开发者中心
话题中心