检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
延迟增加：CoreDNS需要处理更多的请求，可能会导致DNS查询变慢，从而影响业务性能。 资源占用率增加：为保证DNS性能，CoreDNS往往需要更高规格的配置。 解决方案 NodeLocal DNSCache可以提升服务发现的稳定性和性能。 关于NodeLocal DNSCache的介绍及如何在CCE集群中部署NodeLocal
升级管控检查异常处理 检查项内容 检查集群是否处于升级管控中。 解决方案 CCE基于以下几点原因，可能会暂时限制该集群的升级功能： 基于用户提供的信息，该集群被识别为核心重点保障的生产集群。 正在或即将进行其他运维任务，例如Master节点3AZ改造等。 集群中存在容器引擎为Do
aseagent/baseagent.log安装日志，发现如下报错： 查看节点LVM设置，发现/dev/vdb没有创建LVM逻辑卷。 解决方案 手工创建逻辑卷： pvcreate /dev/vdb vgcreate vgpaas /dev/vdb 然后在界面重置节点后节点状态正常。
节点paas用户登录权限检查异常处理 检查项内容 检查paas用户是否有登录权限。 解决方案 执行以下命令查看paas用户是否有登录权限： sudo grep "paas" /etc/passwd 如果paas用户权限中带有"nologin"或者"false"，说明paas用户没
检查历史升级记录是否满足升级条件 检查项内容 检查集群的历史升级记录，要求您的集群原始版本满足升级到目标集群版本的条件。 解决方案 该问题一般由于您的集群从比较老的版本升级而来，升级风险较大，建议您优先考虑集群迁移 若您仍然想要升级该集群，请您提交工单，联系技术支持人员进行评估。
Pod重建风险检查异常处理 检查项内容 检查当前集群升级重启kubelet时，节点上运行的GPU/NPU业务容器是否可能发生重建，造成业务影响。 解决方案 请确保在业务影响可控的前提下（如业务低峰期）进行集群升级，以消减业务容器重建带来的影响； 如需帮助，请您提交工单联系运维人员获取支持。 父主题：
Prometheus是一套开源的系统监控报警框架，能够采集丰富的Metrics（度量数据），目前已经基本是Kubernetes的标准监控方案。 Metrics Server是Kubernetes集群范围资源使用数据的聚合器。Metrics Server从kubelet公开的Summary
排水任务检查异常处理 检查项内容 检查到集群中存在未完成的排水任务，此时升级可能会导致升级完成后触发排水动作，将运行中的Pod进行驱逐。 解决方案 配置Kubectl命令，具体请参见通过kubectl连接集群。 查看是否存在排水任务，以下为正常回显： kubectl get drainage
EVS存储卷挂载异常 SFS Turbo存储卷挂载异常 SFS存储卷挂载异常 存储卷挂载超时 EVS存储卷挂载异常 问题现象 问题根因 解决方案 在有状态工作负载上挂载EVS存储卷，但无法挂载卷并超时。 节点在可用区1，而要挂载的磁盘在可用区2，导致无法挂载而超时。 在同一可用区内创建磁盘再挂载后即可正常。
暴露给容器使用的一种网络构建技术，享有较高的性能，较为常见的解决方案有IP VLAN等。 图2 不同节点上的Pod通信 以上就是容器网络底层视图，后面将进一步介绍Kubernetes如何在此基础上向用户提供访问方案，具体请参见Service和Ingress。 父主题： Kubernetes网络
节点journald检查异常处理 检查项内容 检查节点上的journald状态是否正常。 解决方案 请登录该节点，执行systemctl is-active systemd-journald命令查询journald服务运行状态。若回显状态异常，请执行systemctl restart
--all-namespaces -o yaml | grep gitRepo -A 2 如果返回中不存在gitRepo配置则不受漏洞影响。 漏洞修复方案 当前CCE团队已修复该漏洞，请您关注补丁版本发布记录，及时将集群升级至漏洞修复版本。已EOS集群版本请升级到在维版本进行修复。 已修复集群版本：v1
节点thinpool空间大小，理论上有概率出现节点thinpool空间耗尽的场景。 解决方案 当节点已出现thinpool空间耗尽时，可将部分业务迁移至其他节点实现业务快速恢复。但对于此类问题，建议采用以下方案从根因上解决问题： 方案1： 合理规划业务分布及数据面磁盘空间，避免和减少出现业务容器数*basesize
<backend-svc-name> -n <namespace> 如果无法查询到对应的Service，则无法通过该检查项。 解决方案 检查项一解决方案 为Nginx类型的Ingress添加注解，方式如下： kubectl annotate ingress <ingress-name>
该告警通常发生在低版本集群升级到v1.27及以上集群。CCE不建议您在1.27以上版本集群中继续使用docker，并计划在未来移除对docker的支持。 解决方案 若您的节点的运行时非containerd，您可通过节点重置功能重置节点的运行时为containerd。 如果您仍想在1.27以上集群中创
节点Kubelet检查异常处理 检查项内容 检查节点kubelet服务是否运行正常。 解决方案 问题场景一：kubelet状态异常 kubelet异常时，节点显示不可用，请参考集群可用，但节点状态为“不可用”修复节点后，重试检查任务。 问题场景二：cce-pause版本异常 检测
Master节点规格检查异常处理 检查项内容 检查本次升级集群的Master节点规格与实际的Master节点规格是否一致。 解决方案 该问题一般因为您进行过Master节点改造，此次升级可能会将您的Master节点重置为标准版本; 如您无法确认影响，请您提交工单联系运维人员支撑。
--version 若显示无此命令，则不涉及该漏洞。 若显示nvidia-container-runtime版本低于1.16.2，则涉及该漏洞。 漏洞修复方案 在完成漏洞修复前，避免在集群中运行不可信的容器镜像。 CCE已发布新版本插件修复该漏洞，请关注CCE AI套件（NVIDIA GPU）版本发布记录。
系统会为您检查集群内是否存在跳过升级的节点，您可以根据诊断结果前往节点列表页进行确认。跳过的节点含有标签upgrade.cce.io/skipped=true。 解决方案 对于升级详情页面中跳过的节点，请在升级完毕后重置节点。 重置节点会重置所有节点标签，可能影响工作负载调度，请在重置节点前检查并保留您手动为该节点打上的标签。
查看节点池配置的规格是否资源不足。 租户的ECS或内存配额是否不足。 如果一次创建节点太多，可能会出现租户的ECS容量校验不过的情况发生。 解决方案： 若租户已经欠费，请尽快续费。 若ECS节点资源不足，使用其他规格节点替代。 若ECS或内存配额不足，请扩大配额。 若ECS容量校验不通过，请重新校验。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
