zoukankan      html  css  js  c++  java
  • Prometheus报警规则别名设置

    prometheus报警规则,是由promsql语句编写组合的,但是有时语句会很长,我们看还好,但是有时间业务组那边也会使用promsql来看主机偏高的指标,这边只能设置别名,方便他们使用。

    别名设置:

    很简单,也是和报警规则一样,但是语法可能不一样

    示例
     

    [root@hdpv3test08 rules]# cat prometheus_rules_name.yml 
    groups:
    - name: alive
      rules:
      - record: node:ping:total 
        expr: up 
    - name: cpu
      rules:
      - record: node:cpu_usage:ratio #别的文件使用,直接使用这个
        expr: ((100 - (avg by(instance,ip,hostname) (irate(node_cpu_seconds_total{mode="idle"}[5m])) * 100))) 
    - name: mem
      rules:
      - record: node:memory_usage:ratio
        expr: (100 -(node_memory_MemTotal_bytes -node_memory_MemFree_bytes+node_memory_Buffers_bytes+node_memory_Cached_bytes ) / node_memory_MemTotal_bytes * 100 )

    node:cpu_usage:ratio 就是查看cpu使用率的指标

    下面两张图就是区别

     

     我们正常使用,就是直接采用这个别名指标了

     业务组使用

    prometheus支持promsql语法,我们可以通过相关语句,很快定位到集群,资源使用情况

    如:高CPU 高内存,出入流量大, tcp连接数多等等一些列问题。

    主机重启

    delta(node_boot_time_seconds[5m]) != 0

    文件只读异常

    node_filesystem_readonly == 1

    CPU使用率

    ((100 - (avg by(instance,ip,hostname) (irate(node_cpu_seconds_total{mode="idle"}[5m])) * 100)))

    内存使用率

    (100 -(node_memory_MemTotal_bytes -node_memory_MemFree_bytes+node_memory_Buffers_bytes+node_memory_Cached_bytes ) / node_memory_MemTotal_bytes * 100 )

    IO性能

     100-(avg(irate(node_disk_io_time_seconds_total[5m])) by(instance,hostname)* 100) < 40

    磁盘使用率

    100-(node_filesystem_free_bytes{fstype=~"ext4|xfs"}/node_filesystem_size_bytes {fstype=~"ext4|xfs"}*100) > 80

    主机网络IO速率

    入速率(MiB/s)

    irate(node_network_receive_bytes_total{}[5m]) / 1024 / 1024

    出速率(MiB/s)

    irate(node_network_transmit_bytes_total{}[5m]) / 1024 / 1024

    主机磁盘IO

    写速率(MiB/s)

    irate(node_disk_written_bytes_total{}[5m]) / 1024 / 1024

    读速率(MiB/s)

    irate(node_disk_read_bytes_total{}[5m]) / 1024 / 1024

    TCP连接数

    node_netstat_Tcp_CurrEstab

    人生得意须尽欢,莫使金樽空对月。 天生我材必有用,千金散尽还复来。
  • 相关阅读:
    读书笔记——吴军《态度》
    JZYZOJ1237 教授的测试 dfs
    NOI1999 JZYZOJ1289 棋盘分割 dp 方差的数学结论
    [JZYZOJ 1288][洛谷 1005] NOIP2007 矩阵取数 dp 高精度
    POJ 3904 JZYZOJ 1202 Sky Code 莫比乌斯反演 组合数
    POJ2157 Check the difficulty of problems 概率DP
    HDU3853 LOOPS 期望DP 简单
    Codeforces 148D. Bag of mice 概率dp
    POJ3071 Football 概率DP 简单
    HDU4405 Aeroplane chess 飞行棋 期望dp 简单
  • 原文地址:https://www.cnblogs.com/heian99/p/15257896.html
Copyright © 2011-2022 走看看