检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
要调大“spark.history.retainedApplications”参数的值。 请登录FusionInsight Manager管理界面，选择“集群 > 服务 > Spark2x > 配置”，单击“全部配置”，在左侧的导航列表中，单击“JobHistory2x > 界面”，配置如下参数。
超过阈值，则发送告警。 等待2分钟，查看告警是否自动恢复。 是，处理完毕。 否，执行2。 对系统进行扩容。 打开MRS集群详情页面，在告警管理页签的告警列表中，单击此告警所在行，在告警详情中，查看该告警的节点地址。 登录告警节点。 执行cat /proc/stat | awk 'NR==1'|awk
待创建的表的名称。该表用于加载数据进行分析。 表名由字母、数字、下划线组成。 productdb 数据库名称。该数据库将与其中的表保持逻辑连接以便于识别和管理。 数据库名称由字母、数字、下划线组成。 productName storeCity storeProvince procuctCategory
Flink系统的业务执行节点，执行具体的用户任务。TaskManager可以有多个，各个TaskManager都平等。 JobManager Flink系统的管理节点，管理所有的TaskManager，并决策用户任务在哪些Taskmanager执行。JobManager在HA模式下可以有多个，但只有一个主JobManager。
Flink系统的业务执行节点，执行具体的用户任务。TaskManager可以有多个，各个TaskManager都平等。 JobManager Flink系统的管理节点，管理所有的TaskManager，并决策用户任务在哪些Taskmanager执行。JobManager在HA模式下可以有多个，但只有一个主JobManager。
则分别记录其中的IP地址为IP1、IP2、IP3等）。 联系运维人员，以root用户登录IP1节点，用户密码为安装前用户自定义，请咨询系统管理员，在该节点执行ps -ef | grep sssd命令，查看是否有/usr/sbin/sssd进程启动。 root 6893
已创建用户flume_hdfs并授权验证日志时操作的HDFS目录和数据。 确保集群网络环境安全。 操作步骤 在FusionInsight Manager管理界面，选择“系统 > 权限 > 用户”，选择“更多 > 下载认证凭据”下载用户flume_hdfs的kerberos证书文件并保存在本地。
修改CompiledPlan时不能破坏Json File文件结构，否则作业会提交失败。CompiledPlan的保存路径可以是HDFS路径也可以是OBS路径，本示例以HDFS路径为例。 使用方法 修改CompiledPlan中对应算子的“table.exec.resource.defaul
op-common/FileSystemShell.html 表1 透明加密相关命令 场景 操作 命令 描述 hadoop shell命令管理密钥 创建密钥 hadoop key create <keyname> [-cipher <cipher>] [-size <size>]
告警”页面，查看该告警的“定位信息”和“附加信息”，获取该告警上报的故障磁盘位置信息。 以root用户登录上报告警的节点，用户密码为安装前用户自定义，请咨询系统管理员，进入故障磁盘所在目录，使用ll命令查看该故障磁盘的权限是否711，用户是否为omm。 是，执行7 否，执行6。 修改故障磁盘权限，如故障磁盘为data1，则执行以下命令：
执行完工作流文件，显示“job id”表示提交成功，例如“job: 0000021-140222101051722-oozie-omm-W”。登录Oozie管理页面，查看运行情况。 使用oozieuser用户，登录Oozie WebUI页面：https://oozie角色的ip地址:21003/oozie
一个表可以拥有一个或多个分区，每个分区以文件夹的形式单独存在表文件夹的目录下。对分区内数据进行查询，可缩小查询范围，加快数据的检索速度，还可对数据按照一定的条件进行管理。 -- 使用关键字PARTITIONED BY指定分区列名及数据类型 PARTITIONED BY(entrytime STRING) ROW
HetuEngine计算实例故障”告警是否清除。 是，处理完毕。 否，执行10。 检查HetuEngine计算实例状态。 使用可访问HetuEngine WebUI界面的管理员用户登录FusionInsight Manager，选择“集群 > 服务 > HetuEngine”，进入HetuEngine服务页面。
运行任务量过大，导致Worker节点OMM内存溢出，从而导致Worker节点减少。 处理步骤 检查Yarn资源队列资源是否充足 使用可访问HetuEngine WebUI界面的管理员用户登录FusionInsight Manager。 选择“运维 > 告警 > 告警 > HetuEngine计算实例Worker个数小
告警阈值。 如图1所示： 图1 设置告警阈值 等待5分钟，检查该告警是否恢复。 是，处理完毕。 否，执行4。 检查网络是否异常。 联系网络管理员，检查网络是否存在异常。 是，恢复网络故障，执行5。 否，执行6。 等待5分钟，检查该告警是否恢复。 是，处理完毕。 否，执行6。 收集故障信息。
Server的网络状况。 以root用户登录到告警定位参数中描述的Flume ClientIP所在主机，用户密码为安装前用户自定义，请咨询系统管理员。 执行ping Flume Server IP地址命令，检查Flume Client到Flume Server的网络是否正常。 是，执行3。
已创建HBase表：create 'flume_test', 'cf'。 MRS集群管理员已明确业务需求，并准备一个HBase管理员用户flume_hbase。 操作步骤 在FusionInsight Manager管理界面，选择“系统 > 权限 > 用户”，选择“更多 > 下载认证凭据”下
已创建HBase表：create 'flume_test', 'cf'。 MRS集群管理员已明确业务需求，并准备一个HBase管理员用户flume_hbase。 操作步骤 在FusionInsight Manager管理界面，选择“系统 > 权限 > 用户”，选择“更多 > 下载认证凭据”下
JDK。 不同的IntelliJ IDEA不要使用相同的workspace和相同路径下的示例工程。 安装Maven 开发环境的基本配置。用于项目管理，贯穿软件开发生命周期。 安装Scala Scala开发环境的基本配置。版本要求：2.12.10。 安装Scala插件 Scala开发环境的基本配置。版本要求：2018
升吞吐量，但延时可能会增加。 RES_CPUSET_PERCENTAGE 80 设置各个节点上的Supervisor角色实例（包含其启动并管理的Worker进程）所使用的物理CPU百分比。根据Supervisor所在节点业务量需求，适当调整参数值，优化CPU使用率。 JVM调优
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
