检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
server的WAL文件进行replay操作以恢复数据。由于限制了磁盘空间quota值，导致WAL文件的replay操作失败进而导致HMaster进程异常退出。 2016-07-28 19:11:40,352 | FATAL | MASTER_SERVER_OPERATIONS-10-91-9-131:16000-0
> 待操作集群的名称 > 服务 > Kafka > 实例”，选择上报告警实例主机名对应的角色。单击图表区域右上角的下拉菜单，选择“定制 > 进程 > Kafka直接内存使用率”，单击“确定”。 图1 Kafka直接内存使用率 查看Kafka使用的直接内存是否已达到Kafka设定的最大直接内存的80%。
MemorySize”的值根据实际情况调大，并保存配置。 出现此告警时，说明当前UserSync设置的直接内存无法满足当前UserSync进程所需的直接内存，建议根据2查看“UserSync直接内存使用率”，调整“GC_OPTS”参数中“-XX:MaxDirectMemorySi
Size”的值根据实际情况调大，并保存配置。 出现此告警时，说明当前TokenServer设置的直接内存无法满足当前TokenServer进程所需的直接内存，建议根据2查看“TokenServer直接内存使用率”，调整“GC_OPTS”参数中“-XX:MaxDirectMemor
MaxPermSize”的值根据实际情况调大，并保存配置。 出现此告警时，说明当前TokenServer实例设置非堆内存大小无法满足当前TokenServer进程所需的非堆内存，建议调整“GC_OPTS”参数中“-XX:MaxPermSize”的值为当前非堆内存使用量的两倍（或根据实际情况进行调整）。
Trigger Condition 系统当前指标取值满足自定义的告警设置条件。 对系统的影响 业务延迟：主机CPU使用率过高时，可能会导致业务进程运行处理缓慢、业务延迟。 业务失败：主机CPU使用率过高时，可能会导致业务处理缓慢、超时、失败，可能会导致作业运行失败。 可能原因 告警阈值配置或者平滑次数配置不合理。
开发和运行环境的基本配置。版本要求如下： 服务端和客户端仅支持自带的OpenJDK，版本为1.8.0_272，不允许替换。 对于客户应用需引用SDK类的Jar包运行在客户应用进程中的。 X86客户端：Oracle JDK：支持1.8版本；IBM JDK：支持1.8.5.11版本。 TaiShan客户端：OpenJDK：支持1
观察正在迁移的分区的状态，如果进度长时间无变化，单击“Modify Reassignment Throttle”查看限流参数是否过小。 是，在业务空闲时间调整“Throttle”参数，单击“OK”，加快迁移速度。执行4。 否，执行5。 等待10分钟，查看分区迁移进度是否有明显变化。 是，操作结束。
“-l”：可选参数，表示日志目录，默认值为“/var/log/Bigdata”。 “-e”：可选参数，表示Flume实例的业务IP地址，主要用于接收客户端上报的监控指标信息。 “-n”：可选参数，表示自定义的Flume客户端的名称。 IBM的JDK不支持“-Xloggc”，需要修改“flume/conf/flume-env
> HDFS > NameNode(主)”，单击“DataNodes”，查看所有告警DataNode节点的Block数量信息。 告警信息 监控ID为14007、14008、14009的告警是否产生，根据业务需要修改告警阈值。 父主题： HDFS运维管理
Streaming接收Kafka中数据，生成请求流、展示流、点击流。 对请求流、展示流、点击流的数据进行关联查询。 统计结果写入kafka。 应用中监控流处理任务的状态。 打包项目 通过IDEA自带的Maven工具，打包项目，生成jar包。具体操作请参考在Linux环境中调测Spark应用。
conf”配置文件中进行设置。 default spark.driver.memory 大集群下推荐配置32~64g驱动程序进程使用的内存数量，即SparkContext初始化的进程（例如：512m, 2g）。 4G spark.yarn.security.credentials.hbase.enabled
conf”配置文件中进行设置。 default spark.driver.memory 大集群下推荐配置32~64g驱动程序进程使用的内存数量，即SparkContext初始化的进程（例如：512m, 2g）。 4G spark.yarn.security.credentials.hbase.enabled
collect操作会将Executor的数据发送到Driver端，因此使用collect前需要确保Driver端内存足够，以免Driver进程发生OutOfMemory异常。当不确定数据量大小时，可使用saveAsTextFile等操作把数据写入HDFS中。只有在能够大致确定数据
ka的接收器类型最多，也是最成熟一套接收器。 Kafka包括三种模式的接收器API： KafkaReceiver：直接接收Kafka数据，进程异常后，可能出现数据丢失。 ReliableKafkaReceiver：通过ZooKeeper记录接收数据位移。 DirectKafka：
buffer Memory将较低（例如，当机器的CPU为40核，Yarn的Shuffle Service启动的线程数为80，80个线程共享进程里的Direct buffer Memory，这种场景下每个线程分配到的内存将不足2MB）。 因此建议根据集群中的NodeManager节点的CPU核数适当调整Direct
者数据异常的情况。 可能原因 主备节点网络不稳定。 备DBService异常。 备节点磁盘空间满。 主DBService节点GaussDB进程CPU使用率高（需要通过日志定位该问题）。 处理步骤 检查主备节点网络是否正常。 在FusionInsight Manager页面，选择“集群
解决GaussDB异常时，acs无自恢复能力的问题。 解决Agent重启会上报大量服务不可用告警的问题。 解决备OMS节点，主机重启后，knox进程无法自启动的问题。 解决DBServer频繁主备倒换的问题。 解决Hive MetaStore黑名单机制在并发场景下会出现空指针的问题。 解决HDFS
因为Doris租户代表的是Workload Group，是对组内任务在单个实例节点的计算资源限制，所以“资源配额”和“图表”都是对指标均值的监控，“图表”每30秒刷新一次。 为已有的租户关联Doris服务和用户 在FusionInsight Manager页面，选择“租户资源”，在
collect操作会将Executor的数据发送到Driver端，因此使用collect前需要确保Driver端内存足够，以免Driver进程发生OutOfMemory异常。当不确定数据量大小时，可使用saveAsTextFile等操作把数据写入HDFS中。只有在能够大致确定数据
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
