检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
样例工程的target下生成含有“hcatalog-example-*.jar”包。 以上jar包名称仅供参考,具体名称以实际生成为主。 将2中在样例工程下的target下生成的“hcatalog-example-*.jar”上传至Linux的指定路径,例如“/opt/hive_
disk-health-checker.max-disk-utilization-per-disk-percentage”所配置的值。 是,执行6。 否,执行7。 将磁盘使用率降到该配置值以下,等待10-20分钟,然后检查该告警是否恢复。 是,处理完毕。 否,执行7。 检查NodeManager节点本地目录的访问权限。
是,执行1.e。 否,执行2。 单击“组件管理 > Spark > 服务配置 > 全部配置 > JDBCServer > Tuning”。将“spark.driver.extraJavaOptions”参数中-XX:MaxMetaspaceSize的值根据实际情况调大。 观察界面告警是否清除。
通过HBase shell命令查看应用程序运行情况。可参见“更多信息 > 对外接口 > Shell ”。 各样例程序运结果如下: HBase数据读写样例运行成功会有如下信息: ... 2020-09-09 22:11:48,496 INFO [main] example.TestMain:
> 待操作集群的名称 > 服务 > Presto > 配置”,选择“全部配置”, 选择“Worker4 > JVM”,将“JAVA_OPTS”参数中“Xmx”的值根据实际情况进行调大,并单击“保存”。 返回“概览”页面,单击“更多 > 重启服务”重启服务。 观察界面告警是否清除。
阈值配置 > 服务 > Mapreduce”修改阈值。当MapReduce JobHistoryServer堆内存使用率小于或等于阈值时,告警恢复。 告警属性 告警ID 告警级别 可自动清除 18009 严重 是 告警参数 参数名称 参数含义 ServiceName 产生告警的服务名称。
添加HDFS的Ranger访问权限策略 操作场景 Ranger管理员可通过Ranger为HDFS用户配置HDFS目录或文件的读、写和执行权限。 前提条件 已安装Ranger服务且服务运行正常。 已创建需要配置权限的用户、用户组或Role。 操作步骤 使用Ranger管理员用户rangeradmin登录Ranger管理页面,具体操作可参考登录Ranger
bigdata.kafka.example.ProducerMultThread类的run方法中,用于实现多线程生产数据。 代码样例 /** * 指定Key值为当前ThreadId,发送数据。 */ public void run() { LOG.info("Producer: start
taOutputStream对象:out,使用out的write方法写入数据。 调用fSystem的append接口创建FSDataOutputStream对象:out,使用out的write方法追加写入数据。 调用fSystem的open接口创建FSDataInputStrea
HetuEngine支持物化视图及自动刷新。 HetuEngine支持配置IoTDB数据源。 Hudi 升级到0.11.0版本。 IoTDB 新增组件,一体化收集、存储、管理与分析物联网时序数据的服务。 集群管理 支持补丁在线推送及更新。 组件版本信息 表1 MRS组件版本信息 组件
bigdata.kafka.example.ProducerMultThread类的run方法中,用于实现多线程生产数据。 代码样例 /** * 指定Key值为当前ThreadId,发送数据。 */ public void run() { LOG.info("Producer: start
Manager首页,选择“集群 > 待操作集群的名称 > 服务 > Presto > 配置”,选择“全部配置”, 选择“Worker3 > JVM”,将“JAVA_OPTS”参数中“Xmx”的值根据实际情况进行调大,并单击“保存”。 返回“概览”页面,单击“更多 > 重启服务”重启服务。 观察界面告警是否清除。
通过MapReduce服务的WebUI进行查看 登录MRS Manager,单击“服务管理 > MapReduce > JobHistoryServer”进入Web界面后查看任务执行状态。 图1 JobHistory Web UI界面 通过YARN服务的WebUI进行查看 登录MRS
性能。 重启受影响的服务或实例,观察界面告警是否清除。 是,处理完毕。 否,执行6。 在服务或实例重启期间,无法对外提供服务,已提交的作业不受影响。 收集故障信息。 在FusionInsight Manager界面,选择“运维 > 日志 > 下载”。 在“服务”框中勾选待操作集群的“Oozie”,单击“确定”。
产生告警的服务名称。 角色名 产生告警的角色名称。 主机名 产生告警的主机名。 Trigger Condition 系统当前指标取值满足自定义的告警设置条件。 对系统的影响 堆内存溢出可能导致服务崩溃,服务崩溃后无法使用Oozie服务调度任务。 可能原因 该节点Oozie实例堆内存使用
bigdata_env 启用多实例功能后,为其他HBase服务实例进行应用程序开发时还需执行以下命令,切换指定服务实例的客户端。 例如HBase2:source /opt/client/HBase2/component_env。 将应用开发环境中生成的样例项目Jar包(非依赖jar包)
Producer API生产数据。 sh kafka-console-producer.sh --broker-list <Kafka集群IP:9092> --topic <Topic名称> --old-producer -sync Old Consumer API消费数据。 sh kafka-console-consumer
是,执行1.e。 否,执行2。 单击“组件管理 > Yarn > 服务配置 > 全部配置 > ResourceManager > 系统”。将GC_OPTS参数中-Xmx和-Xms的值根据实际情况调整,保证最小堆内存-Xms的值小于最大堆内存-Xmx的值,并单击“保存配置”,勾选“
使用OpenTSDB 使用MRS客户端操作OpenTSDB指标数据 使用curl命令操作OpenTSDB
Doris企业级能力增强 配置Doris高可用功能 配置Doris支持多源数据 父主题: 使用Doris