服务器系统卡怎么办？

服务器系统卡顿是一个常见但棘手的问题，通常涉及资源瓶颈、软件故障或配置不当，以下是一套系统化的排查和处理方案，请按顺序操作：

**一、快速诊断方向（先定位瓶颈）

1、核心资源检查（SSH登录后执行）：

   top                  # 查看CPU、内存占用最高的进程（按1看多核）
   free -h              # 内存使用详情（关注available值）
   df -h                # 磁盘空间（重点看/、/var、/home）
   iostat -dx 2         # 磁盘IO实时监控（%util>70%表示过载）
   iftop -nP            # 网络流量监控（需安装iftop）

2、关键指标解读：

CPU：%us高 → 应用计算瓶颈；%sy高 → 内核/驱动问题。

内存：available < 10% 或swap持续使用 → 内存不足。

磁盘：%util高 +await高 → 磁盘性能不足或故障。

进程：top中D状态进程 → 进程阻塞（I/O等待）。

**二、针对性解决方案

**场景1：CPU占用过高

查找异常进程：

  ps -eo pid,ppid,cmd,%mem,%cpu --sort=-%cpu | head  # 按CPU排序进程

处理方案：

- 非核心进程占CPU →kill -9 PID 终止异常进程。

- 数据库类服务（如MySQL） → 优化慢查询（SHOW PROCESSLIST）。

- 应用服务 → 检查线程池配置、代码逻辑（如死循环）。

**场景2：内存不足

释放内存：

  sync; echo 3 > /proc/sys/vm/drop_caches  # 清理缓存（不影响服务）

长期优化：

- 增加物理内存或配置Swap（仅应急）：

    dd if=/dev/zero of=/swapfile bs=1G count=4  # 创建4G Swap文件
    mkswap /swapfile && swapon /swapfile

- 调整应用内存参数（如JVM的-Xmx）。

- 杀死内存泄漏进程（top中持续增长的进程）。

**场景3：磁盘I/O瓶颈

定位高IO进程：

  iotop -oP              # 查看实时磁盘IO进程（需安装iotop）

优化策略：

- 数据库 → 优化写入策略（批量提交）、迁移日志到SSD。

- 日志文件狂写 → 用logrotate切割日志或临时禁用调试日志。

- 磁盘故障 → 检查SMART状态：smartctl -a /dev/sda。

**场景4：磁盘空间不足

快速清理：

  du -sh /* 2>/dev/null | sort -rh | head -10  # 查找TOP10大目录

重点清理目标：

/var/log：日志文件 →journalctl --vacuum-size=200M

/tmp：临时文件 →rm -rf /tmp/

- 应用缓存（如Docker镜像）：docker system prune -a

**场景5：网络问题

检测丢包/延迟：

  ping <网关IP>          # 检查内网质量
  mtr <公网IP>           # 可视化路由跟踪（需安装mtr）

解决：

- 网卡过载 → 多队列优化或升级网卡。

- DDoS攻击 → 启用防火墙（iptables/firewalld）或联系ISP。

**三、高级排查（当基础方法无效时）

1、内核日志分析：

   dmesg -T | grep -i "error\|oom\|kill"  # 检查OOM、硬件错误

硬件故障：磁盘坏道（I/O error）、内存故障（EDAC错误）。

2、系统性能快照（收集证据）：

   sar -A > /tmp/sar_report.txt  # 需安装sysstat（含历史数据）

3、服务级诊断：

- MySQL：SHOW ENGINE INNODB STATUS;

- Nginx：nginx -T 检查配置，stub_status 监控连接数。

- Java：jstack <pid> 分析线程阻塞。

**四、预防措施

1、监控告警：

- 部署Prometheus+Grafana监控CPU/内存/磁盘/网络。

- 设置阈值告警（如磁盘>85%、内存>90%）。

2、定期维护：

   crontab -e  # 添加定期任务
   ​0 3 * * * /usr/sbin/logrotate -f /etc/logrotate.conf  # 每天切割日志

3、架构优化：

- 无状态服务横向扩展（Kubernetes）。

- 数据库读写分离、缓存层（Redis/Memcached）。

**操作注意事项

生产环境慎用：kill -9、rm -rf 操作前确认进程/路径。

变更前备份：修改配置前备份文件（cp config.conf config.conf.bak）。

灰度验证：优化后逐步重启服务观察效果。

> ⚠️紧急恢复建议：若问题影响业务且无法快速定位，优先通过重启服务或重启服务器恢复，同时保留现场（top/vmstat截图、日志）供后续分析。

通过以上方法，90%的卡顿问题可定位解决，若仍无法处理，建议提供top、free -h、df -h 输出截图进一步分析。

文章摘自：https://idc.huochengrm.cn/fwq/13083.html