【Linux】在生产环境中,Linux系统排查常用命令

问题排查

top命令

  • 查看整机系统新能
    pF75HIA.md.png

使用top命令的话,重点关注的是 %CPU、%MEM 、load average 三个指标

在这个命令下,按1的话,可以看到每个CPU的占用情况

uptime:系统性能命令的精简版

CPU:vmstat

  1. 查看CPU(包含但是不限于)
  2. 查看额外
    2.1 查看所有CPU核信息:mpstat -p ALL 2
    2.2 每个进程使用CPU的用量分解信息:pidstat -u 1 -p 进程编号
    命令格式:vmstat -n 2 3
    pF75qPI.md.png

一般vmstat工具的使用是通过两个数字参数来完成的,第一个参数是采样的时间间隔数(单位秒),第二个参数是采样的次数

procs

​ r:运行和等待的CPU时间片的进程数,原则上1核的CPU的运行队列不要超过2,整个系统的运行队列不超过总核数的2倍,否则代表系统压力过大,我们看蘑菇博客测试服务器,能发现都超过了2,说明现在压力过大

​ b:等待资源的进程数,比如正在等待磁盘I/O、网络I/O等

cpu

​ us:用户进程消耗CPU时间百分比,us值高,用户进程消耗CPU时间多,如果长期大于50%,优化程序

​ sy:内核进程消耗的CPU时间百分比

pF75ORP.md.png

us + sy 参考值为80%,如果us + sy 大于80%,说明可能存在CPU不足,从上面的图片可以看出,us + sy还没有超过百分80,因此说明蘑菇博客的CPU消耗不是很高

​ id:处于空闲的CPU百分比

​ wa:系统等待IO的CPU时间百分比

​ st:来自于一个虚拟机偷取的CPU时间比

内存:free
  • 应用程序可用内存数:free -m
  • 应用程序可用内存/系统物理内存 > 70% 内存充足
  • 应用程序可用内存/系统物理内存 < 20% 内存不足,需要增加内存
  • 20% < 应用程序可用内存/系统物理内存 < 70%,表示内存基本够用
    free -h:以人类能看懂的方式查看物理内存
    pF75vM8.md.png

free -m:以MB为单位,查看物理内存
pF75xsS.md.png

free -g:以GB为单位,查看物理内存

硬盘:df

格式:df -h / (-h:human,表示以人类能看到的方式换算)
pF7I9aj.png

硬盘IO:iostat

系统慢有两种原因引起的,一个是CPU高,一个是大量IO操作

格式:iostat -xdk 2 3
pF7IkR0.md.png

磁盘块设备分布:

rkB /s:每秒读取数据量kB;

wkB/s:每秒写入数据量kB;

svctm I/O:请求的平均服务时间,单位毫秒

await I/O:请求的平均等待时间,单位毫秒,值越小,性能越好

util:一秒钟有百分几的时间用于I/O操作。接近100%时,表示磁盘带宽跑满,需要优化程序或者增加磁盘;

rkB/s,wkB/s根据系统应用不同会有不同的值,但有规律遵循:长期、超大数据读写,肯定不正常,需要优化程序读取。

svctm的值与await的值很接近,表示几乎没有I/O等待,磁盘性能好,如果await的值远高于svctm的值,则表示I/O队列等待太长,需要优化程序或更换更快磁盘

网络IO:ifstat
  • 默认本地没有,下载ifstat
    pF7IZsU.md.png

生产环境服务器变慢,诊断思路和性能评估

记一次印象深刻的故障?

结合Linux 和 JDK命令一起分析,步骤如下

  1. 使用top命令找出CPU占比最高的
  2. ps -ef 或者 jps 进一步定位,得知是一个怎么样的后台程序出的问题
  3. 定位到具体线程或者代码
  4. ps -mp 进程 -o THREAD,tid,time
    参数解释
    -m:显示所有的线程
    -p:pid进程使用CPU的时间
    -o:该参数后是用户自定义格式

  1. 将需要的线程ID转换为16进制格式(英文小写格式)
    printf “%x\n” 有问题的线程ID
  2. jstack 进程ID | grep tid(16进制线程ID小写英文) -A60

精准定位到错误的地方

相关推荐

  1. Linux系统命令

    2024-04-03 00:36:01       31 阅读
  2. Linux 系统命令总结

    2024-04-03 00:36:01       32 阅读
  3. linux系统nginx命令

    2024-04-03 00:36:01       26 阅读
  4. Linux系统管理命令

    2024-04-03 00:36:01       14 阅读
  5. Linux命令

    2024-04-03 00:36:01       34 阅读

最近更新

  1. TCP协议是安全的吗?

    2024-04-03 00:36:01       18 阅读
  2. 阿里云服务器执行yum,一直下载docker-ce-stable失败

    2024-04-03 00:36:01       19 阅读
  3. 【Python教程】压缩PDF文件大小

    2024-04-03 00:36:01       19 阅读
  4. 通过文章id递归查询所有评论(xml)

    2024-04-03 00:36:01       20 阅读

热门阅读

  1. Kotlin作用域函数:let、also、run、apply、with

    2024-04-03 00:36:01       17 阅读
  2. 算法练习----力扣每日一题------5

    2024-04-03 00:36:01       18 阅读
  3. 代码随想录Day42

    2024-04-03 00:36:01       15 阅读
  4. 这样学习Oracle,让你少走弯路,实现弯道超车

    2024-04-03 00:36:01       18 阅读
  5. pandas

    2024-04-03 00:36:01       18 阅读
  6. 几种常见的路径规划算法

    2024-04-03 00:36:01       19 阅读
  7. 遗传算法(matlab)

    2024-04-03 00:36:01       16 阅读
  8. 正则表达式

    2024-04-03 00:36:01       18 阅读
  9. 学习鸿蒙基础(11)

    2024-04-03 00:36:01       12 阅读
  10. C# FTP的使用

    2024-04-03 00:36:01       15 阅读
  11. 力扣之每日四题day01--二叉树遍历篇

    2024-04-03 00:36:01       17 阅读