记一次 Kubernetes 排错战役
发布时间：2021-12-07 09:58:49 所属栏目：云计算 来源：互联网
导读：收到测试环境集群告警，登陆Kubernetes集群进行排查。 故障定位 查看Pod 查看kube-system node2节点calico pod异常。 查看详细信息，查看node2节点没有存储空间，cgroup泄露。 查看存储 登陆node2查看服务器存储信息，目前空间还很充足。 集群使用到的分布式
|
收到测试环境集群告警，登陆Kubernetes集群进行排查。 故障定位 查看Pod 查看kube-system node2节点calico pod异常。 查看详细信息，查看node2节点没有存储空间，cgroup泄露。 查看存储 登陆node2查看服务器存储信息，目前空间还很充足。 集群使用到的分布式存储为Ceph，因此查看Ceph集群状态。 操作 Ceph修复 目前查看到Ceph集群异常，可能导致node2节点cgroup泄露异常，进行手动修复Ceph集群。 数据的不一致性(inconsistent)指对象的大小不正确、恢复结束后某副本出现了对象丢失的情况。数据的不一致性会导致清理失败(scrub error)。 Ceph在存储的过程中，由于特殊原因，可能遇到对象信息大小和物理磁盘上实际大小数据不一致的情况，这也会导致清理失败。 数据的不一致性(inconsistent)指对象的大小不正确、恢复结束后某副本出现了对象丢失的情况。数据的不一致性会导致清理失败(scrub error)。 Ceph在存储的过程中，由于特殊原因，可能遇到对象信息大小和物理磁盘上实际大小数据不一致的情况，这也会导致清理失败。 （编辑：随州站长网） 【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容! |
