运维中心-华为云

云运维中心 COC-快捷混沌演练:操作流程

操作流程操作步骤说明准备工作注册华为账号并实名认证，开通云运维中心。步骤一：同步资源获取当前用户所属的所有Region下资源数据并同步至云运维中心。步骤二：创建应用管理应用与云资源的关系，并为后续资源的监控、自动化运维等，提供统一、及时的资源环境管理服务。步骤三：创建演练任务针对资源预设演练方案，支持多攻击任务自由编排的故障注入组合。步骤四：启动演练按照已经创建的演练任务，自动化的故障注入。

云运维中心 COC

云运维中心 COC-快捷混沌演练:操作场景

操作场景云运维中心（Cloud Operations Center，简称COC）为用户提供安全、高效的一站式智能运维平台，满足客户集中运维诉求。云运维中心的混沌演练功能支持用户配置演练模板、攻击模板，基于模板对物理机、虚拟机或CCE容器等进行故障演练。支持故障模式管理功能。您可以通过该功能对目标实例进行故障演练。本章节介绍如何通过云运维中心操作一台弹性云服务器ECS 进行CPU使用率加压的故障演练。

云运维中心 COC

应用平台 APPSTAGE-AppStage运维中心基本概念:部署服务

部署服务表1 部署服务基本概念基本概念说明资源资源是具备一定功能和作用的实例，是部署服务的管理对象，如WiseCloud::MicloudService::NuwaContainer实例、WiseCloud::Cache::D CS 实例等。组件组件是一个具有相同资源的集合，组件具备以下特点：可以在组件中声明资源以及资源之间的依赖关系。同一个资源只能属于一个组件。组件下的所有资源上下文一致。环境环境是一个具有相同组件的集合，环境具有以下特点：部署服务代码中的environment-id是“环境”的唯一索引。不同环境下的组件和资源可以同名，同一环境下的资源和组件名称需要保证唯一。一个组件只能属于一个环境，一个环境下会有多个组件。环境变更的本质是环境下组件的变更。流水线流水线是将多个组件的变更组合起来的流程描述，描述各个组件变更的方式和次序。变更工单变更工单是实施现网变更的授权许可，业务需要发起现网变更时，通常会由研发人员提交变更电子流，并附上对应的变更文档。该电子流被审批通过后，会在变更工单管理中，创建一条对应的变更工单，运维人员可使用变更工单实施变更。变更计划变更计划是部署服务发起具体变更动作前的风险影响评估过程。通过风险影响评估过程可以得到，本次变更可能导致的资源动作和属性差异变化，以及可能的风险项。变更风险项变更风险项是某个资源的具体变更的风险认定。其描述了认定为风险变更的属性变化，以及能够审批允许的审批人列表。变更电子流变更电子流是用于无人值守变更的高度自动化的变更方式，是在部署服务基础上，尽可能将所有的运维手工选择操作前移到提交电子流之前。 Terraform Terraform是HashiCorp公司开发的基础设施即代码（Infrastructure-as-Code，IaC）软件，它能自动化的进行资源编排，用于安全高效地预览、配置和管理云基础架构和资源，并提供自定义解决方案。

应用平台 APPSTAGE AppStage运维中心简介

应用平台 APPSTAGE-AppStage运维中心基本概念:监控服务

监控服务表2 监控服务基本概念基本概念说明监控是采集、汇总和分析IT基础设施、服务组件以及程序应用的运行指标，以了解其当前状态和运行状况，判断是否安全可靠的过程，是保证业务持续稳定运行的重要手段。告警告警是监控系统的响应组件，它根据指标值的变化按照既定的策略执行响应操作，其主要目的是引起人们对系统当前状态的关注。告警定义包含基于指标的条件或阈值以及当指标值达到或超出定义条件时要执行的操作。告警通知告警的通知在所有的告警处理的链路结束以后才会发生。告警处理模块会根据上报告警的上下文获取告警的值班配置，值班配置由业务预置。告警屏蔽为您提供短时间的屏蔽功能，可以通过设置告警屏蔽的规则，告警将在屏蔽的时间内不再触发任何通知，规则结束后，将会被再次唤醒，屏蔽期间告警被清除后，将不再触发任何通知，减少您的处理频度。告警过滤告警过滤是直接在接入的阶段就将告警屏蔽，告警仍然会进入Bypass的数据库但不会再向下发送给告警处理模块。告警收敛多个维度的告警，通过特定的条件将它们变为一条告警，只需要配置自定义的收敛规则，就可以将重复告警收敛到一起，还有默认的规则帮助你维护告警。告警标记告警标记的作用是为一段时间内的告警打上标签，例如现网变更或者现网演练时，由于要模拟大量异常请求和其他操作会造成大量无用告警上报，标记的作用就是为这一段时间的告警打上标签与正常告警进行区分。告警定义对于繁琐复杂的告警上报字段感到困惑，使用统一定义，将会自动下发到业务对应的agent，更加人性化的界面设计，使告警上报更加统一、准确。告警修复设置特定的命中条件，告警在发送通知之前会执行预置的修复脚本，进行修复操作，自动帮你修复简单的告警。语音值班配置当告警生成时，配置对应的责任人，通过 WeLink 、短信、电话等多种形式，快速将异常情况通知到责任人。日志日志是指设备、系统或服务程序在运作时都会产生的事件记录，每一行日志都记载着日期、时间、使用者及动作等相关操作的描述。一般系统会有各种各样的日志文件，如应用程序日志，安全日志、系统日志、Scheduler服务日志、WWW日志、DNS服务器日志等。日志项目日志项目是一个包含多个日志服务配置的整体，可以看作是一个微服务实例。同一个微服务实例下的日志服务配置应当包含在一个日志项目中。不同微服务实例使用完全相同的日志服务配置时，也可以共用同一个日志项目。日志空间日志空间是日志服务为微服务的日志分配的使用空间。业务须在日志接入页面填写日志相关信息并提交申请日志空间，日志空间支持定义空间内日志的结构化格式信息，此时要求所有使用此空间的日志都满足该日志格式。日志采集配置日志采集配置是日志服务采集端在采集微服务实例中日志时所需的配置，一种日志对应一项采集配置。日志采集配置须归属于一个日志项目，并使用一个已分配好的日志空间。日志采集配置之间可以共用日志空间，此时需要关注日志空间的日志格式要求，未定义日志格式的空间可不用关注。事件事件是指IT基础设施、服务组件以及程序应用等运行过程中发生的问题。事件可通过监控系统自动生成、客户报障生成或SRE主动巡检生成等。监控系统生成事件首先要采集和分析运行数据，然后根据预定规则判断是否需要生成事件。 HCW HW Cloud Watch，AppStage运维中心提供的监控系统，也称为云眼，可以提供监控、告警功能。 HCW Agent 监控系统的采集框架，需要在每台主机上部署，部署路径为/opt/huawei/HCW_Agent。 EAP 事件自动化平台（Event & Action Platform，EAP），通过集成各系统动作，解决复杂运维场景的操作编排功能。流程可以通过EAP平台所提供的各种动作组合来编排解决具体运维场景的流程。动作各服务的操作（例如部署任务、执行作业、确认告警等）封装。标签对某一类特定群体或对象的某项特征进行的抽象分类和概括，其值（标签值）具备可分类性。标签树标签树负责标签的管理，包括标签的创建，删除，修改。系统标签由系统管理员统一进行管理，业务自定义标签由业务人员进行管理。逻辑主体逻辑主体是业务实体的抽象，是基于物理表（MPPDB、ClickHouse、Influxdb）创建。逻辑主体和物理表之间存在映射关系，逻辑主体的字段名称和物理表可以不一样，这也是为了实现业务属性和物理表之间的解耦。一个逻辑主体可以映射多种物理实体，当底层数据物理表变更，上层的指标逻辑定义可以不用发生变化。指标指标是指在被观测系统中观察和收集的资源使用或行为的测量值，可能是原始采集的数据，也可能是后期经过各种计算和统计方法得到的数值。令牌令牌是使用数据源的鉴权方式，只有通过对应业务的token的鉴权，才能使用对应的数据源。视图指标本身包含了业务计算规则，只有结合数据源才能真正被查询。视图，就是指标 + 物理表的结合，也是监控大盘上直接可被查询的对象。视图可以包含一个或多个指标，例如折线图只需要单指标的视图，但是表格就需要多指标的视图。查询视图(Query View)。直接作用于物理表的查询视图，大多用在druid实时监控场景。长期存储视图(Long Term View)。基于查询视图，可以创建长期存储视图。如果觉得某个查询视图值得被长期持久化，就可以使用该能力。长期存储视图会自动创建三个聚合任务，分别是5分钟粒度、小时粒度、天粒度。持久化视图(Persistent View)。基于查询视图，可以创建持久化视图。部分视图需要出日报，就可以使用该能力。该视图会自动创建一个汇聚任务。异常检测视图(Anomaly Detect View)。基于查询视图，可以创建异常检测视图，用来为异常检测任务提供数据。插件可在机器上执行并采集各项参数的二进制文件或者脚本。

应用平台 APPSTAGE AppStage运维中心简介

应用平台 APPSTAGE-CES指标接入监控服务:查看监控指标数据

查看监控指标数据以采集弹性云服务器的监控指标为例，查看弹性云服务器对应的命名空间、指标ID、维度的Key和Value。在支持监控的服务列表页面查看对应的监控指标参考文档。在参考文档中查看命名空间，弹性云服务器对应的命名空间为“SYS.ECS”。查看监控指标的指标ID和测量对象（维度），例如监控指标CPU使用率的指标ID为“cpu_util”，测量对象为“云服务器”。查看维度的Key和Value，云服务器维度的Key和Value分别为instance_id和云服务器ID。

应用平台 APPSTAGE 其他公有云数据接入运维中心监控服务

应用平台 APPSTAGE-AppStage运维中心功能介绍:弹性网络服务

弹性网络服务弹性网络服务（ENS）通过引入“隔离域”这一网络资源概念，将业务使用的底层网络资源进行封装，为具有相同安全保护需求并相互信任的服务提供访问策略的安全分组。当服务器加入到隔离域后，即受到这些访问规则的保护。访问规则继承自选定的安全区域（安全域），并根据租户声明的服务依赖关系自动生成。图1 ENS与原有模式差异隔离域内部是在虚机子网或者容器网段上加安全域包装在一起的，当建立了隔离域后，业务层只感知隔离域与隔离域之间的互通关系。图2 业务感知差异

应用平台 APPSTAGE AppStage运维中心简介

云运维中心 COC-人员管理概述

人员管理概述人员管理为云运维中心提供了统一的人员数据管理。您可以在人员管理页面管理当前租户下的用户，人员管理中的用户从 IAM 同步，人员管理页面的数据作为云运维中心的用户基础数据，供创建待办、定时运维、通知管理、事件中心等多个功能模块使用。人员管理页面可以手动选择需要的用户进行编辑、删除、请求订阅。对已添加的用户在编辑时，若填写了手机号、邮箱、企业微信、钉钉、飞书等通讯方式，系统后台会为其创建对应的订阅方式，以便于满足后续消息通知的需要。在人员管理页面可通过用户信息字段颜色区分当前是否存在订阅，灰色：用户未订阅或订阅但未确认订阅；黑色：用户已订阅且已确认订阅。父主题：人员管理

云运维中心 COC 人员管理

云运维中心 COC-概述:镜像与武器版本支持声明

镜像与武器版本支持声明 COC混沌演练新增了裸金属服务器（BMS）和Flexus应用服务器 L实例（H CSS ）两种攻击对象，并提供了相应的资源类武器和网络类武器供用户演练使用。通过集成武器模块和功能，用户可以更准确地模拟真实环境故障，及早发现系统可用性等问题，持续提升应用韧性。以下是BMS、HCSS各镜像版本与支持的探针类武器声明： CentOS 6.10镜像及以下版本，因系统缺少探针包运行所必要的共享库（GLIBC_2.14和GLIBCXX_3.4.15）不支持探针类武器。 BMS各镜像版本支持的探针类武器如表1所示。表1 裸金属服务器镜像与武器兼容性列表武器支持的镜像版本资源类武器 CPU使用率加压 CentOS 7.3、CentOS 7.9、Ubuntu16、Ubuntu 1804、EulerOS 2.3 内存使用率加压 CentOS 7.3、CentOS 7.9、Ubuntu16、Ubuntu 1804、EulerOS 2.3 磁盘使用率加压 CentOS 7.3、CentOS 7.9、Ubuntu16、Ubuntu 1804、EulerOS 2.3 磁盘IO加压 CentOS 7.3、CentOS 7.9、Ubuntu16、Ubuntu 1804、EulerOS 2.3 进程号耗尽 CentOS 7.3、CentOS 7.9、Ubuntu16、Ubuntu 1804、EulerOS 2.3 杀进程/持续杀进程 CentOS 7.4、CentOS 7.9、Ubuntu16、Ubuntu 1804、EulerOS 2.3 网络类武器网络延迟 CentOS 7.3、CentOS 7.9、Ubuntu16、Ubuntu 1804、EulerOS 2.3 网络丢包 CentOS 7.3、CentOS 7.9、Ubuntu16、Ubuntu 1804、EulerOS 2.3 网络错包 CentOS 7.3、CentOS 7.9、Ubuntu16、Ubuntu 1804、EulerOS 2.3 网络包重复 CentOS 7.3、CentOS 7.9、Ubuntu16、Ubuntu 1804、EulerOS 2.3 网络包乱序 CentOS 7.3、CentOS 7.9、Ubuntu16、Ubuntu 1804、EulerOS 2.3 网络中断 CentOS 7.3、CentOS 7.9、Ubuntu16、Ubuntu 1804、EulerOS 2.3 网卡down CentOS 7.3、CentOS 7.9、Ubuntu16、Ubuntu 1804、EulerOS 2.3 HCSS各镜像版本支持的探针类武器如表2所示。表2 Flexus应用服务器L实例镜像与武器兼容性列表武器支持的镜像版本资源类武器 CPU使用率加压 CentOS 7.2、CentOS 8.2、Ubuntu 16.04、Ubuntu 22.04、EulerOS 2.0、Debian 8.2、Debian 11.1.0 内存使用率加压 CentOS 7.2、CentOS 8.2、Ubuntu 16.04、Ubuntu 22.04、EulerOS 2.0、Debian 8.2、Debian 11.1.0 磁盘使用率加压 CentOS 7.2、CentOS 8.2、Ubuntu 16.04、Ubuntu 22.04、EulerOS 2.0、Debian 8.2、Debian 11.1.0 磁盘IO加压 CentOS 7.2、CentOS 8.2、Ubuntu 16.04、Ubuntu 22.04、EulerOS 2.0、Debian 8.2、Debian 11.1.0 进程号耗尽 CentOS 7.2、CentOS 8.2、Ubuntu 16.04、Ubuntu 22.04、EulerOS 2.0、Debian 8.2、Debian 11.1.0 杀进程/持续杀进程 CentOS 7.2、CentOS 8.2、Ubuntu 16.04、Ubuntu 22.04、EulerOS 2.0、Debian 8.2、Debian 11.1.0 网络类武器网络延迟 CentOS 7.2、Ubuntu 16.04、Ubuntu 22.04、EulerOS 2.0、Debian 8.2、Debian 11.1.0 网络丢包 CentOS 7.2、Ubuntu 16.04、Ubuntu 22.04、EulerOS 2.0、Debian 8.2、Debian 11.1.0 网络错包 CentOS 7.2、Ubuntu 16.04、Ubuntu 22.04、EulerOS 2.0、Debian 8.2、Debian 11.1.0 网络包重复 CentOS 7.2、Ubuntu 16.04、Ubuntu 22.04、EulerOS 2.0、Debian 8.2、Debian 11.1.0 网络包乱序 CentOS 7.2、Ubuntu 16.04、Ubuntu 22.04、EulerOS 2.0、Debian 8.2、Debian 11.1.0 网络中断 CentOS 7.2、CentOS 8.2、Ubuntu 16.04、Ubuntu 22.04、EulerOS 2.0、Debian 8.2、Debian 11.1.0 网卡down CentOS 7.2、CentOS 8.2、Ubuntu 16.04、Ubuntu 22.04、EulerOS 2.0、Debian 8.2、Debian 11.1.0

云运维中心 COC 混沌演练

云运维中心 COC-问题流程

问题流程问题被创建后状态为“未受理”，未受理状态可对问题单受理、驳回或转发责任人。问题受理后状态为“定位出方案中”，定位出方案中状态可对问题单填写问题定位结果信息、转发责任人、升降级和挂起。问题单挂起后需要创建单人审核，审批通过后状态为“挂起”，挂起后问题单可手动解除挂起或到达设定的解除挂起时间自动解除挂起。问题填写定位结果时，若选择需要变更，问题单状态为“待现网实施”，待现网实施页面需要关联变更单，变更单有回填结果，才能流转至下个步骤。无需变更的问题或需要变更的问题已有变更结果，问题状态为“待验证”，创建人确认问题是否解决或未解决，未解决可进行驳回。图1 问题管理操作流程父主题：问题管理

云运维中心 COC 问题管理

云运维中心 COC-流转规则:自动化执行参数示例说明

自动化执行参数示例说明参数值、Region ID、和目标实例填写格式为${}，需要通过该表达式解析对应的值，相关示例如下：参考示例：告警信息如下： { "alarmId": "al1696664837170EWbvx24kW", "alarmName": "alarm-4z39coctest1007", ...... "URL": "https://console.ulanqab.huawei.com/ces/?region=cn-north-7#/alarms/detail?alarmId=al16849986549022X5Vp4pxr", "additional": { "dimension": "instance_id:29d99a09-2d15-4ced-8723-6e94ae1c1472", ...... }, ...... } 1. 如果要获取当前告警信息里面的alarmId的值，表达式写成如下形式： ${currentAlarm.alarmId} 2. 如果要从additional.dimension字符串里面获取instance_id的uuid，表达式写成如下形式： ${string.substring(currentAlarm.additional.dimension, string.indexOf(currentAlarm.additional.dimension, 'instance_id:') + 12)} 或者 ${string.substring(currentAlarm.additional.dimension, 12)} 3. 如果要从URL字符串里面获取cn-north-7这个region ID，表达式写成如下形式： ${string.substring(currentAlarm.URL, string.indexOf(currentAlarm.URL, 'region=') + 7, string.indexOf(currentAlarm.URL, '#/alarms'))} 表达式里面的"currentAlarm."是个固定前缀，意思是从当前告警的数据里面获取。

云运维中心 COC 流转规则

云运维中心 COC-事件流程

事件流程事件被创建后状态为“未受理”状态，未受理状态下可进行“转发”、“驳回”、“受理”等操作。事件单被驳回后为“被驳回”状态，创建人可关闭事件或更新事件信息后重新提交。事件单被受理后为“已受理”状态，已受理状态下可进行“事件处理”、“升降级”、“添加备注”、“启动warroom”等操作。事件单被处理后，进入“已解决待验证”状态，已解决待验证状态下可进行“验证”操作，验证通过后事件单进入“已完成”状态，验证不通过后，重新进入“已受理”状态。若需要增加事件级暂停功能，可参考基础配置-事件流程图1 事件流程图父主题：事件管理

云运维中心 COC 事件管理

云运维中心 COC-查看帐号密码:获取帐号密码

获取帐号密码登录COC。在左侧菜单栏选择“自动化运维”，在“日常运维”模块单击“帐号管理”，进入“帐号管理”页面。选择“帐号管理”页签，可通过资源视角和应用视角来管理主机。资源视角针对购买的所有主机实例，应用视角针对购买的并已绑定应用的主机。图1 帐号管理概览若用户只想托管（只保存作用，不改密）主机帐号密码，可通过“导入帐号”的形式，下载Excel模板填写资源相关信息，确认信息无误后上传。图2 导入托管帐号 1、导入形式的ECS资源帐号密码不参与纳管改密，若想对导入的帐号进行自动纳管，可以编辑全局基线或者创建帐号基线来添加对应帐号，则系统会对这些主机帐号密码进行立即纳管。 2、导入形式的DCS、RDS和DMS资源不参与纳管改密，帐号密码无法完成自动纳管改密。若用户在OS上新增了主机帐号，在帐号管理页面勾选对应主机后，可通过“同步帐号”按钮一键同步新增的OS帐号。注意：若想新增的帐号参与纳管改密，还需在帐号基线中配置该帐号。图3 同步OS帐号当前帐号管理只支持单个主机的帐号密码查询，成功“获取帐号密码”的前提是主机帐号“改密状态”为“成功”或“改密失败原因”为“导入的帐号不参与改密”，可在“操作”列单击“查看帐号密码”确认资源改密状态。若“改密状态”为“失败”，需要先根据反馈的改密失败原因进行相关处理。 ECS主机改密条件： 1、主机资源状态为“运行中” 2、主机的UniAgent状态为“运行中” 3、主机OS上的帐号与所绑定的帐号基线中的帐号一致增量的ECS主机改密条件： 1、改密策略已开启已纳管的主机定期改密条件： 1、已绑定改密任务图4 主机改密详情用户可在资源视角/应用视角下通过条件搜索需要提权的资源，在“操作”列单击“查看帐号密码”后“获取帐号密码”。图5 获取帐号密码若资源视角下，主机改密详情无数据，优先确认主机是否挂组件。若主机已挂组件，请先确认是否已绑定组件基线或者组件维度的自动纳管策略为开启状态；若主机未挂组件，请先确认全局维度的自动纳管策略是否为开启状态。

云运维中心 COC

云运维中心 COC-改密任务:配置改密区域

配置改密区域登录COC。在左侧菜单栏选择“自动化运维”，在“日常运维”模块单击“帐号管理”，进入“帐号管理”页面。选择“帐号改密”页签下“改密任务”页签，配置需要开启定期改密的区域。单击“选择区域”，勾选需要配置的区域至右选框后，单击“确定”。配置好之后可在“操作”列单击“查看任务详情”查看配置区域的改密任务，也可根据业务需求进行删除。图1 配置改密任务至此全部配置工作完成，可至“帐号管理”页签“查询帐号密码”。

云运维中心 COC

云运维中心 COC-改密策略:开启改密策略

开启改密策略登录COC。在左侧菜单栏选择“自动化运维”，在“日常运维”模块单击“帐号管理”，进入“帐号管理”页面。选择“帐号改密”页签下“改密策略”页签，根据业务需要，进行纳管策略设置，来确保新增的主机实例也能被自动纳管。图1 开启改密策略未绑定组件的增量主机实例实现自动纳管，打开“全局维度”按钮即可；已绑定组件的增量主机实例实现自动纳管，点击“组件维度”页签下“选择组件”按钮，通过搜索应用或组件名称，“确定”提交即可。图2 选择组件

云运维中心 COC

云运维中心 COC-密钥管理:配置密钥

配置密钥登录COC。在左侧菜单栏选择“自动化运维”，在“日常运维”模块单击“帐号管理”，进入“帐号管理”页面。在页面右上角点击“密钥管理”按钮，或者通过“帐号管理流程引导”标签下方的“配置密钥”下“立即配置”按钮。图1 配置密钥进入“密钥管理”页面，单击“绑定密钥”，右滑出现选择密钥页面，选择需要绑定的密钥。若当前无可用密钥，单击“新建密钥”，跳转DEW服务创建密钥，新建后刷新表格即可选择。单击“确定”。图2 绑定密钥在“确认绑定”弹框中，提示绑定的密钥一经使用则不支持更新密钥，单击“确认”。图3 确认绑定提示确认绑定风险后，则密钥创建和配置相关工作即完成，若有更新密钥的需求，单击“更新”。图4 完成密钥绑定

云运维中心 COC 帐号管理

云服务器内容精选

运维中心

7*24

备案

专业服务

退订

建议反馈

售前咨询热线