zoukankan      html  css  js  c++  java
  • Linux后台开发常用工具

    sed单引号替换(特殊字符需要使用反斜线””进行转义)
    sed 's/原字符串/替换字符串/'

    sed双引号替换
    sed "s/原字符串包含'/替换字符串包含'/" 

    sed问号替换
    sed 's?原字符串?替换字符串?'

    sed可同时执行多个替换,不同替换间使用分号分开,
    如果需要直接修改文件方式替换,只需sed后带参数“-i”。

    如果要替换的包含了“/”,则可使用“|”。

    pwdx - report current working directory of a process,格式:pwdx pid

    内存分析工具
    valgrind

    valgrind辅助工具
    qcachegrind 可视化查看valgrind结果

    淘宝DBA团队发布的监控脚本,使用perl开发,可以完成对linux系统和MySql相关指标的实时监控
    orzdba 

    取指定进程名的pid
    pidof 进程名

    性能瓶颈查看:
    perf top -p pid

    查看调用栈:
    pstack pid

    https://www.percona.com/
    查询程序执行聚合的GDB堆栈跟踪,先进性堆栈跟踪,然后将跟踪信息汇总:
    pt-pmp -p pid

    格式化explain出来的执行计划按照tree方式输出,方便阅读:
    pt-visual-explain

    从log文件中读取插叙语句,并用explain分析他们是如何利用索引,完成分析之后会生成一份关于索引没有被查询使用过的报告:
    pt-index-usage

    其它:
    vmstat
    tcpdump 网络数据包分析器
      显示包的内容:
      tcpdump -i eth1 -n -vv -x -e -s 600 # 仅二进制
      tcpdump -i eth1 -n -vv -X -e -s 600 # 二进制和文本
      抓包保存到文件供Wireshark分析:
      tcpdump -i eth1 -n -vv -X -e -s 600 -w x.cap
      抓取192.168.31.1的80端口的包
      tcpdump -i eth1 host 192.168.31.1 and port 80
      抓取目标IP为192.168.31.1和目标端口为80端口的包
      tcpdump -i eth1 dst host 192.168.31.1 and dst port 80

    -s 指定显示多少字节的包内容

    objdump
    nm
    ldd
    strings
    iostat 输入/输出统计
    ifstat 网络流量实时监控工具
    $ ifstat  
    #kernel
    Interface        RX Pkts/Rate    TX Pkts/Rate    RX Data/Rate    TX Data/Rate  
                     RX Errs/Drop    TX Errs/Drop    RX Over/Rate    TX Coll/Rate  
    lo                  8546 0          8546 0        11845K 0        11845K 0      
                           0 0             0 0             0 0             0 0      
    eth1               93020 0         41717 0         8867K 0         5969K 0      
                           0 0             0 0             0 0             0 0      

    vmstat 虚拟内存统计
    sar (System Activity Reporter系统活动情况报告,最为全面的系统性能分析工具之一)
    iptraf 实时IP局域网监控
    iftop 网络带宽监控
    htop 进程监控
    iotop 磁盘I/O监测工具
    fuser 使用文件或文件结构识别进程
    lsof 打开文件列表
    dmesg
    slabtop
    free
    slurm 查看网络流量
    byobu 类似于screen
    tmux 终端复用工具,类似于screen
    screen 在多个进程之间多路复用一个物理终端的窗口管理器
    dtach 用来模拟screen的detach的功能的小工具
    dstat 可以取代vmstat,iostat,netstat和ifstat这些命令的多功能产品
    $ dstat
    You did not select any stats, using -cdngy by default.
    ----total-cpu-usage---- -dsk/total- -net/total- ---paging-- ---system--
    usr sys idl wai hiq siq| read  writ| recv  send|  in   out | int   csw 
      4   6  89   0   0   0| 746B  118k|   0     0 |   0    18B| 850  5461 
      8   9  82   0   0   0|   0    92k| 111k   71k|   0     0 |6888    15k
     17  39  44   0   0   0|   0    96k| 107k   62k|   0     0 |7392    19k
      2   3  94   0   0   0|   0   484k| 124k  171k|   0     0 |6855    13k

    # dstat -l -m -r -c  --top-io --top-mem --top-cpu
    ---load-avg--- ------memory-usage----- --io/total- ----total-cpu-usage---- ----most-expensive---- --most-expensive- -most-expensive-
     1m   5m  15m | used  buff  cach  free| read  writ|usr sys idl wai hiq siq|     i/o process      |  memory process |  cpu process   
    0.14 0.14 0.14|2710M  407M 6067M  117G|0.01  3.34 |  0   0 100   0   0   0|process_mon 960k  639B|redis-server 412M|report_proxy 0.0
    0.13 0.14 0.14|2710M  407M 6067M  117G|   0     0 |  0   0 100   0   0   0|redis-serve  13k 9360B|redis-server 412M|report_proxy 0.1
    0.13 0.14 0.14|2710M  407M 6067M  117G|   0     0 |  0   0  99   0   0   0|process_mon2027k 1986B|redis-server 412M|report_proxy 0.0
    0.13 0.14 0.14|2710M  407M 6067M  117G|   0     0 |  0   0 100   0   0   0|sap1002      30k  624B|redis-server 412M|report_proxy 0.1
    0.13 0.14 0.14|2710M  407M 6067M  117G|   0  9.00 |  0   0  99   0   0   0|process_mon2024k 1986B|redis-server 412M|report_proxy 0.1
    0.13 0.14 0.14|2715M  407M 6067M  117G|   0  28.0 |  0   1  99   0   0   0|redis-serve  38k 4339k|redis-server 412M|report_proxy 0.1
    0.68 0.25 0.18|2723M  407M 6067M  117G|   0  5.00 |  1   1  98   0   0   0|crond        13M  180k|redis-server 412M|report_proxy 0.1

    NetHogs 进程流量工具(进程带宽工具),监视每个进程的网络带宽(https://github.com/raboof/nethogs/releases)
    MultiTail 同时监控多个文档、类似tail
    Monitorix 系统和网络监控
    Arpwatch 以太网活动监控器
    Suricata 网络安全监控
    Nagios 网络/服务器监控
    Collectl 一体化性能检测工具
    mtr 网络连通性判断工具,集成了traceroute和ping
    socat 多功能的网络工具(Socket CAT,netcat加强版)
    netpipes socket操作
    ab
    wget
    curl
    tsung 压力测试工具
    siege 压力测试和评测工具
    nmon 监控Linux系统性能
    psacct 监视用户活动
    ncdu 基于ncurses库的磁盘使用分析器
    slurm 实时网络流量监控
    findmnt 查找已经被挂载的文件系统
    saidar 系统数据监控和统计工具
    ss 可以替代netstat的网络连接查看工具(socket statistics)
    ccze 用不同颜色高亮日志协助管理员进行区分和查看分析
    netstat 网络统计
    ifconfig (ifup ifdown)


    Linux磁盘相关命令

    sfdisk -l
    sfdisk -s
    fdisk -l
    dmesg |grep SCSI
    dmesg |grep -i raid
    df -h
    cat /proc/scsi/scsi
    hdparm /dev/sda
    mount 加载一块硬盘
    mkfs 创建文件系统
    /etc/fstab 文件内容mount命令输出一致
    lscpu 查看CPU
    lspci 查看主板
    lsscsi 查看SCSI卡

    测速
    hdparm -t /dev/sda

    parted
    parted是一个由GNU开发的功能强大的磁盘分区和分区大小调整工具。

    cfdisk -Ps
    cfdisk是一个磁盘分区的程序,具有互动式操作界面。参数-P表示显示分区表的内容,附加参数“s”会依照磁区的顺序显示相关信息。

    查看软RAID
    cat /proc/mdstat

    相看所有的PCI设备
    lspci -vvv
    lspci -vvv -t

    查看所有硬件信息
    dmidecode 

    查看网卡型号
    lspci | grep -i ethernet

    一条命令取机器IP地址,不同Linux稍有不同:
    netstat -ie|awk /broadcast/'{print $2}'
    netstat -ie|awk -F '[ :]+' /cast/'{print $4}'
    netstat -ie|awk -F '[ :]+' /cast/'{print $3}'

    查看CPU
    mpstat -P ALL 1 
    mpstat -I SUM 1

    查看网卡
    ethtool eth0

    查看网卡统计
    ethtool -S eth1

    查看网卡RingBuffer大小
    ethtool -g eth1

    查看流量
    sar -n DEV 1 # 流量信息
    sar -n EDEV 1 # 错误信息
    sar -u 2 5 # 每2秒报告CPU使用率,共显示5行(次)
    sar -I 14 -o int14.file 2 10 每2秒报告14号中断,共显示10行(次),结果写入文件int14.file
    sar -f /var/log/sa/sa16 显示内存和网络统计,结果写入文件/var/log/sa/sa16
    sar -A 显示所有统计

    中断相关
    cat /proc/interrupts

    查看网卡队列
    grep eth1 /proc/interrupts |awk '{print $NF}'

    查看中断亲和性(以中断74为例)
    cat /proc/irq/74/smp_affinity

    /proc/irq/ 该目录下存放的是以IRQ号命名的目录,如/proc/irq/40/表示中断号为40的相关信息
    /proc/irq/[irq_num]/smp_affinity 该文件存放的是CPU位掩码(十六进制),修改该文件中的值可以改变CPU和某中断的亲和性
    /proc/irq/[irq_num]/smp_affinity_list 该文件存放的是CPU列表(十进制),注意CPU核心个数用表示编号从0开始,如cpu0和cpu1等

    清除系统缓存
    echo 3 > /proc/sys/vm/drop_caches
    测试请参见:http://blog.chinaunix.net/uid-20682147-id-4209165.html

    查看TCP数据:
    cat /proc/net/tcp
    查看UDP数据:
    cat /proc/net/udp
    相关命令:ss -l

    查看socket缓冲区默认大小:
    cat /proc/sys/net/core/rmem_default
    查看socket缓冲区最大大小:
    cat /proc/sys/net/core/rmem_max

    找出CPU占用最高的线程:
    ps -mp 20693 -o THREAD,tid,time | sort -rn
     

  • 相关阅读:
    Serverless 工程实践 | Serverless 应用开发观念的转变
    如何高效学习 Kubernetes 知识图谱?
    互动赠新书|当云原生遇到混合云:如何实现“求变”与“求稳”的平衡
    5 款阿里常用代码检测工具,免费用!
    AI与传统编译器
    OpenArkCompiler方舟编译
    传统编译原理
    LLVM基础技术图例
    双极型与低频大功率晶体管
    TVM,Relay,Pass
  • 原文地址:https://www.cnblogs.com/aquester/p/9891516.html
Copyright © 2011-2022 走看看