检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
问题场景一：sudo命令执行失败 集群原地升级过程中依赖sudo命令正常可用，请登录节点执行如下命令，排查sudo命令可用性。 sudo echo hello 如果sudo命令不存在，请您从其他节点复制sudo命令到该节点。 问题场景二：关键文件不可修改 集群原地升级过程中会修改/etc/sudoers文件和/etc/sudoers
使用。 您可以执行以下步骤确认GPU插件的升级目标版本与当前驱动配置。 登录CCE控制台，前往“插件中心”处查看CCE AI套件（NVIDIA GPU）插件。 单击该插件的“升级”按钮，查看插件目标版本及驱动版本。 在测试环境验证安装升级目标版本的GPU插件，并配置当前GPU驱动后，测试创建节点是否正常使用。
新建Pod检查 检查内容 检查集群升级后，存量节点是否能新建Pod。 检查集群升级后，新建节点是否能新建Pod。 检查步骤 基于新建节点检查创建了新节点后，通过创建DaemonSet类型工作负载，在每个节点上创建Pod。 登录CCE控制台，单击集群名称进入集群。 在导航栏中选择“
轮转证书文件数量检查 检查项内容 检查您节点上的证书数量过多（>1000），由于升级过程中会批量处理证书文件，证书文件过多可能导致节点升级过慢，节点上Pod被驱逐等。 解决方案 方案一：优先建议您重置节点，详情请参考重置节点。 方案二：修复节点上证书轮转异常问题。 进入节点/opt/c
节点内存检查异常处理 检查项内容 检查节点内存使用量是否超过90%。 解决方案 请在业务低峰时进行集群升级。 请检查该节点的Pod部署数量是否过多，适当驱逐该节点上Pod到其他空闲节点。 父主题： 升级前检查异常问题排查
群时区不一致，滚动升级后Master节点上的时区会变为集群时区。 如果您集群中存在Cronjob，则可能会导致Cronjob在升级后触发一次非预期的执行。 解决方案 请在升级前关闭Cronjob后再次执行升级前检查，升级完成后开启Cronjob。 父主题： 升级前检查异常问题排查
致docker启动过慢，影响docker标准输出，影响nginx等功能的正常使用。 解决方案 请手动删除残留的镜像，防止后续升级异常； 删除镜像之后请您重新进行升级前检查 父主题： 升级前检查异常问题排查
集群升级 集群升级 获取集群升级任务详情 重试集群升级任务 暂停集群升级任务（已废弃） 继续执行集群升级任务（已废弃） 获取集群升级任务详情列表 集群升级前检查 获取集群升级前检查任务详情 获取集群升级前检查任务详情列表 集群升级后确认 集群备份 获取集群备份任务详情列表 获取集群升级相关信息
如果版本可以升级请尽快安排业务无缝升级集群中的CoreDNS组件。 您可以通过以下流程升级集群中的CoreDNS： 登录CCE控制台，选择一个集群，在左侧导航栏中单击“插件中心”。 找到CoreDNS插件，单击“升级”按钮。 根据页面提示填写插件安装参数，详细说明请参见CoreDNS（系统资源插件，必装）。
IPVS缺陷导致节点上升级CoreDNS后出现概率性解析超时 故障现象 在集群使用IPVS转发的场景下，节点上升级CoreDNS后，可能出现概率性丢包，导致域名解析失败。 问题根因 该问题由IPVS缺陷导致，社区已在IPVS v5.9-rc1版本中修复该问题，详情请参见ipvs: queue
升级后验证 集群状态检查 节点状态检查 跳过节点检查 业务检查 新建节点检查 新建Pod检查 父主题： 升级集群
节点状态检查 检查项内容 集群升级后，需要检查节点状态是否为“运行中”状态。 检查步骤 系统会自动为您检查集群内节点的状态，您可以根据诊断结果前往节点列表页面进行确认。 解决方案 集群节点异常时，建议您通过重置节点来解决，若无法解决，请联系技术支持人员。 父主题： 升级后验证
node资源不存在，该节点可能正在删除中，请稍后重试 等待节点删除完全后，在升级前检查界面重新检查。 检查控制节点操作系统为EulerOS 2.5，不支持升级到v1.27.5-r0版本 您可选择升级至1.25或1.28。如果您选择升级至1.28版本，升级过程中EulerOS 2.5将会被滚动升级成HCE 2.
若不需要使用ASM网格，可删除ASM网格后再进行升级，升级后集群不能绑定与表中不匹配的ASM网格版本。例如，使用v1.21版本集群与1.8版本ASM网格，若要升级至v1.25版本集群时，请先升级ASM网格至1.15版本后再进行v1.25版本集群升级。 若您没有安装ASM网格服务，请检查集群中是否安装了开源
er/containerd标准输出。 如果您集群中使用了nginx，可能会出现转发变慢等问题。 解决方案 请登录节点手动删除用不到的镜像，防止后续升级异常。 父主题： 升级前检查异常问题排查
检查集群中的Kubernetes组件、容器运行时组件、网络组件等组件，要求在升级前以上组件运行正常。 解决方案 请您优先重试升级前检查； 若重试检查仍失败时，请您提交工单，联系技术支持人员进行处理。 父主题： 升级前检查异常问题排查
er节点的核心数量大于2核。 解决方案 当前您的Master节点cpu数量为2，可能会导致集群升级失败； 请联系技术支持人员，将该集群Master节点扩容至4核及以上。 父主题： 升级前检查异常问题排查
节点关键命令检查异常处理 检查项内容 检查节点升级依赖的一些关键命令是否能正常执行。 解决方案 问题场景一：包管理器命令执行失败 检查到包管理器命令rpm或dpkg命令执行失败，请登录节点排查下列命令的可用性。 rpm -qa 如果上述命令不可用，可通过以下命令恢复： rpm --rebuilddb
0-113-generic上时，GPU插件必须使用535.161.08及以上的驱动版本。 解决方案 您在升级后新创或者重置Ubuntu节点时，可能遇到该问题，请编辑GPU插件中的驱动版本至535.161.08及以上，然后重启该节点。 父主题： 升级前检查异常问题排查
检查当前集群升级重启kubelet时，节点上运行的GPU/NPU业务容器是否可能发生重建，造成业务影响。 解决方案 请确保在业务影响可控的前提下（如业务低峰期）进行集群升级，以消减业务容器重建带来的影响； 如需帮助，请您提交工单联系运维人员获取支持。 父主题： 升级前检查异常问题排查
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
