一、紧急诊断：快速定位空间占用元凶

当系统盘剩余空间低于5%时，服务器可能进入只读模式，引发服务中断。此时应立即通过df -h命令查看磁盘使用概况，重点关注/分区和/boot分区的使用率。若发现异常分区，使用du -sh /* 2>/dev/null | sort -rh | head -n 10命令找出占用最大的10个目录。

对于日志文件占用的特殊情况，可采用journalctl --disk-usage查看systemd日志占用，配合ls -lh /var/log/检查传统日志文件。建议建立日志监控机制，当/var/log使用率超过80%时触发告警。

二、日志文件专项治理

系统日志是空间占用的主要来源之一。首先清理旧日志：

# 清理30天前的日志
find /var/log/ -type f -name "*.log" -mtime +30 -exec rm -f {} \;
# 压缩当前日志
find /var/log/ -type f -name "*.log" -exec gzip {} \;

对于journald日志系统，建议配置/etc/systemd/journald.conf：

[Journal]
Storage=auto
SystemMaxUse=500M
SystemKeepFree=1G
RuntimeMaxUse=200M

修改后执行systemctl restart systemd-journald生效。

三、软件包管理优化

未清理的旧内核和依赖包是常见隐患。在CentOS/RHEL系统上：

# 查看已安装内核
rpm -q kernel | sort -V
# 删除旧内核（保留最新2个）
package-cleanup --oldkernels --count=2
# 清理所有缓存
yum clean all

Debian/Ubuntu系统则使用：

# 自动删除无用包
apt-get autoremove --purge
# 清理下载包缓存
apt-get clean

四、大文件深度清理

使用ncdu工具进行交互式磁盘分析（需安装）：

yum install ncdu  # CentOS
apt-get install ncdu  # Ubuntu
ncdu /

该工具以可视化方式展示目录树结构，支持按大小排序和递归删除。

对于已知的大文件类型，可直接定位清理：

# 查找大于100M的文件
find / -type f -size +100M -exec ls -lh {} \; 2>/dev/null
# 清理核心转储文件
find / -name "core.*" -exec rm -f {} \;

五、系统分区扩容方案

当清理无法满足需求时，需考虑扩容。对于LVM分区：

# 查看物理卷状态
pvdisplay
# 扩展逻辑卷（假设/dev/mapper/centos-root需要扩容）
lvextend -L +10G /dev/mapper/centos-root
# 调整文件系统大小
xfs_growfs /dev/mapper/centos-root  # XFS文件系统
resize2fs /dev/mapper/centos-root  # ext4文件系统

非LVM分区需通过fdisk调整分区表，配合partprobe和resize2fs完成扩容，此操作需谨慎执行并备份数据。

六、预防性维护策略

建立定期维护任务（通过crontab）：

# 每周日凌晨3点执行清理
0 3 * * 0 /usr/bin/find /var/log/ -name "*.log" -mtime +7 -exec rm -f {} \;
# 每月1日清理旧内核
0 0 1 * * /usr/bin/package-cleanup --oldkernels --count=2 >/dev/null 2>&1

配置logrotate实现日志自动轮转，示例配置：

/var/log/messages {
    daily
    rotate 7
    compress
    delaycompress
    missingok
    notifempty
    create 640 root adm
}

七、监控告警体系构建

部署监控工具（如Prometheus+Node Exporter），配置告警规则：

groups:
- name: disk.rules
  rules:
  - alert: DiskSpaceLow
    expr: (100 - ((node_filesystem_avail_bytes{fstype!="tmpfs"} * 100) / node_filesystem_size_bytes{fstype!="tmpfs"})) > 90
    for: 10m
    labels:
      severity: critical
    annotations:
      summary: "磁盘空间不足 ({{ $labels.instance }})"
      description: "分区 {{ $labels.mountpoint }} 空间使用率超过90%"

对于云服务器，可利用云厂商的监控服务设置磁盘告警阈值，当使用率达到85%时自动触发扩容或清理流程。

实施建议

1. 操作前务必进行完整备份，使用rsync -avz / /backup/创建系统快照
2. 优先在非生产环境验证清理命令
3. 建立变更管理流程，记录所有磁盘操作
4. 考虑使用自动化运维工具（如Ansible）批量管理服务器

通过上述系统化方案，可有效解决Linux服务器系统盘空间不足问题，同时建立长效预防机制。实际处理时，建议按照”诊断-清理-扩容-预防”的顺序逐步实施，确保业务连续性。对于关键业务系统，建议在维护窗口期执行相关操作，并做好回滚预案。