-
修改FusionInsight Manager添加的路由表 - MapReduce服务 MRS
table om_rt 当前网络的IP地址模式为IPv6时,应执行ip -6 route add命令。 分别执行以下命令,手动创建新的ntp服务路由信息。未配置外部NTP时钟源时,跳过此步骤。 ip route add default via NtpIP网关 dev 本机IP对应网卡
-
系统设置 - MapReduce服务 MRS
系统设置 权限设置 对接设置 导入证书 OMS管理 查看部件包 父主题: Manager操作指导(适用于3.x版本)
-
如何设置Spark作业执行时自动获取更多资源? - MapReduce服务 MRS
如何设置Spark作业执行时自动获取更多资源? 问 如何设置Spark作业执行时自动获取更多资源? 答 对于Spark应用来说,资源是影响Spark应用执行效率的一个重要因素。当一个长期运行的服务(比如JDBCServer),如果分配给它多个Executor,可是却没有任何任务分
-
HBase表如何设置和修改数据保留期? - MapReduce服务 MRS
HBase表如何设置和修改数据保留期? 创建表时指定 创建t_task_log表,列族f, TTL设置86400秒过期 create 't_task_log',{NAME => 'f', TTL=>'86400'} 在已有表的基础上指定: alter "t_task_log",NAME=>'data'
-
账户安全设置 - MapReduce服务 MRS
账户安全设置 解锁LDAP用户和管理账户 解锁系统内部用户 修改集群组件鉴权配置开关 使用普通模式集群用户在非集群节点登录 父主题: 账户管理
-
MRS安全增强 - MapReduce服务 MRS
和业务运行安全。 网络隔离 整个系统部署在公有云上的虚拟私有云中,提供隔离的网络环境,保证集群的业务、管理的安全性。结合虚拟私有云的子网划分、路由控制、安全组等功能,为用户提供高安全、高可靠的网络隔离环境。 资源隔离 MRS服务支持资源专属区内部署,专属区内物理资源隔离,用户可以
-
退订MRS服务后,在ECS中退订弹性云服务器时报异常如何处理? - MapReduce服务 MRS
退订MRS服务后,在ECS中退订弹性云服务器时报异常如何处理? 问: 退订MRS服务后,在ECS中退订弹性云服务器时报异常如何处理? 答: 在使用的MRS集群中查询该弹性云服务器的ID确认没有使用。 在ECS控制台上找到需要退订的服务器单击“MRS使用中”将机器进行解锁。 再次单击“退订”。
-
在Windows中调测Presto应用开发 - MapReduce服务 MRS
申请一台Windows的ECS访问MRS集群操作Presto。申请ECS访问MRS集群的步骤如下: 在“现有集群”列表中,单击已创建的集群名称。 记录集群的“可用分区”、“虚拟私有云”,以及Master节点的“默认安全组”。 在弹性云服务管理控制台,创建一个新的弹性云服务器。 弹性云服务器的“可用
-
退订MRS服务后,在ECS中退订弹性云服务器时报异常如何处理? - MapReduce服务 MRS
退订MRS服务后,在ECS中退订弹性云服务器时报异常如何处理? 在使用的MRS集群中查询该弹性云服务器的ID确认没有使用。 在ECS控制台上找到需要退订的服务器单击“MRS使用中”将机器进行解锁。 再次单击“退订”。 若依然显示退订异常,请收集弹性云服务器的ID并联系华为云支持人员。
-
spark.yarn.executor.memoryOverhead设置不生效如何处理? - MapReduce服务 MRS
spark.yarn.executor.memoryOverhead设置不生效如何处理? 问题现象 Spark任务需要调整executor的overhead内存,设置了参数spark.yarn.executor.memoryOverhead=4096,但实际计算的时候依旧按照默认值1024申请资源。
-
权限设置 - MapReduce服务 MRS
权限设置 用户管理 用户组管理 角色管理 安全策略 父主题: 系统设置
-
配置监控指标数据转储 - MapReduce服务 MRS
5分钟指标ID:指标对应的5分钟(300s)的指标ID。 指标采集周期(秒):主要是针对实时指标的采集周期,可选值为30或60。 指标所属服务:指标所属的服务名名称,标明指标所属的服务类型,如HDFS、HBase等。 指标所属角色:指标所属的角色名名称,标明指标所属的实际角色类型,如JobServer、RegionServer等。
-
创建用户 - MapReduce服务 MRS
为新用户分配角色授权,最长可能需要3分钟时间生效,如果从用户组获得的权限已满足使用,则无需再添加角色。 组件启用Ranger鉴权后,除系统默认用户组或角色的权限外,其他权限需要通过配置Ranger策略为用户赋权。 若用户既没有加入用户组也没有设置角色,通过此用户登录FusionInsight
-
如何处理Checkpoint设置RocksDBStateBackend方式时Checkpoint慢 - MapReduce服务 MRS
如何处理Checkpoint设置RocksDBStateBackend方式时Checkpoint慢 问题 如何处理checkpoint设置RocksDBStateBackend方式,且当数据量大时,执行checkpoint会很慢的问题? 原因分析 由于窗口使用自定义窗口,这时窗口
-
对接设置 - MapReduce服务 MRS
对接设置 配置SNMP北向参数 配置Syslog北向参数 配置监控指标数据转储 父主题: 系统设置
-
如何处理Checkpoint设置RocksDBStateBackend方式时Checkpoint慢 - MapReduce服务 MRS
如何处理Checkpoint设置RocksDBStateBackend方式时Checkpoint慢 问题 如何处理checkpoint设置RocksDBStateBackend方式,且当数据量大时,执行checkpoint会很慢的问题? 原因分析 由于窗口使用自定义窗口,这时窗口
-
使用旧插件storm-kafka时如何正确设置offset - MapReduce服务 MRS
使用旧插件storm-kafka时如何正确设置offset 问题 当前虽然默认推荐使用storm-kafka-client插件进行安全kafka对接,但仍然存在使用旧插件storm-kafka的用户和场景,在这种场景下如何正确指定消费的offset,避免每次重启拓扑后都从头开始消费?
-
如何在提交MapReduce任务时设置任务优先级 - MapReduce服务 MRS
如何在提交MapReduce任务时设置任务优先级 问题 如何在提交MapReduce任务时设置任务优先级? 回答 当您在客户端提交MapReduce任务时,可以在命令行中增加“-Dmapreduce.job.priority=<priority>”参数来设置任务优先级。格式如下:
-
如何在提交MapReduce任务时设置任务优先级 - MapReduce服务 MRS
如何在提交MapReduce任务时设置任务优先级 问题 如何在提交MapReduce任务时设置任务优先级? 回答 当您在客户端提交MapReduce任务时,可以在命令行中增加“-Dmapreduce.job.priority=<priority>”参数来设置任务优先级。格式如下:
-
设置HDFS存储策略 - MapReduce服务 MRS
<value>true</value> 重启HDFS,如图1 所示。 图1 重启hdfs 登录MRSManager,选择“服务管理 > HDFS > 服务配置”,将“参数类别”设置为“全部配置”。 搜索并查看“dfs.storage.policy.enabled”的参数值是否为“true”,