在使用香港VPS搭建的K8S集群中，节点磁盘满是常见却不容忽视的问题。它不仅可能导致Pod异常，还会影响业务连续性。本文将从现象识别到具体解决，完整呈现故障排查全流程，帮你快速定位并处理磁盘满问题。

香港VPS K8S节点磁盘满故障排查全流程

现象识别：从异常信号到根本问题

K8S节点磁盘满时，典型表现包括：Pod状态异常（如Pending、Evicted或CrashLoopBackOff）、Kubelet服务日志报磁盘空间不足错误，以及应用因读写受阻出现响应延迟甚至无响应。这些现象既是故障的“信号灯”，也为后续排查提供了关键线索。

诊断步骤：逐层定位磁盘占用源头

1. 确认磁盘使用情况

登录问题节点的香港VPS，首先用基础命令快速掌握全局情况：

df -h

该命令会列出各挂载点的磁盘使用率，重点关注接近或达到100%的分区，这是排查的起点。

2. 定位大文件/目录

找到高占用分区后，用以下命令锁定具体“占空间大户”：

du -sh /* | sort -rh | head -n 10

命令会递归计算根目录下各目录大小并排序，前10名通常就是主要“嫌疑人”，可能是日志、缓存或临时文件目录。

3. 检查容器日志

容器日志是常见的“隐形空间消耗者”。通过命令查看特定Pod的日志信息：

kubectl describe pod <pod-name> -n <namespace> | grep Logs

若发现某容器日志文件异常庞大，需优先处理这类“日志炸弹”。

4. 排查临时文件与缓存

/tmp等临时目录常因未及时清理堆积文件。用以下命令快速检测：

du -sh /tmp

若结果显示占用过高，需进一步检查是否有过期临时文件。

解决策略：从应急处理到长期预防

1. 安全清理冗余文件

根据诊断结果针对性清理。例如日志过大时，可执行：

rm -rf /var/log/<app-name>/*.log

操作前务必确认文件非必要，避免误删业务数据。

2. 配置日志轮转策略

为防止日志无限增长，可在容器启动配置中添加轮转参数（如设置日志最大保留天数、单文件大小限制），或引入Fluentd、Logstash等工具集中管理日志，实现自动切割与归档。

3. 优化临时文件清理机制

通过定时任务定期清理临时目录。例如设置每天凌晨2点自动清理/tmp：

echo "0 2 * * * root rm -rf /tmp/*" >> /etc/crontab

需注意保留正在使用的临时文件，避免影响业务进程。

4. 磁盘扩容（终极方案）

若频繁出现磁盘满且清理后仍无法满足需求，可联系香港VPS提供商进行磁盘扩容。多数服务商支持在线调整磁盘容量，操作前建议备份重要数据。

通过上述步骤系统排查和处理，能有效解决香港VPS K8S节点磁盘满问题，为集群稳定运行提供保障。日常运维中，建议定期监控磁盘使用率（如设置阈值告警），结合日志与临时文件管理策略，从根源降低故障发生概率。