-
配置组件隔离访问Hive MetaStore - MapReduce服务 MRS
端才可生效。 此功能仅支持同集群内隔离,HetuEngine不同集群部署的场景不支持统一配置,需要修改HetuEngine配置实现连接指定的MetaStore实例。 配置隔离时,考虑可用性,建议组件最少配置两个MetaStore实例。 前提条件 集群已安装Hive服务,且服务运行正常。
-
创建集群 - MapReduce服务 MRS
具体请参见配置存算分离集群(委托方式)。 该参数只适用于支持“集群日志转储OBS”特性的集群版本。 component_configs 否 Array of ComponentConfig objects 集群组件自定义配置。 该参数只适用于支持“自定义组件配置创建集群”特性的集群版本。 smn_notify
-
快速购买ClickHouse集群 - MapReduce服务 MRS
证后再创建集群。购买集群后,不支持修改。 如果您对价格有疑问,可以单击页面左下角“了解计费详情”,根据计费详情来了解产品价格。 单击“返回集群列表”,可以查看到集群创建的状态。单击“访问集群”,可以查看集群详情。 集群创建的状态过程请参见表1中的“状态”参数说明。 集群创建需要时
-
集群 - MapReduce服务 MRS
集群 选择“主机 > 资源概况 > 集群”,可同时查看FusionInsight Manager内各集群的资源监控页面,如图1所示。 系统默认显示1小时的监控数据。用户可单击自定义时间区间,缺省时间区间包括:1小时、2小时、6小时、12小时、1天、1周、1月。 图1 集群资源概况
-
配置Hive任务的最大map数 - MapReduce服务 MRS
免HiveSever服务过载而引发的性能问题。 操作步骤 登录FusionInsight Manager页面,具体请参见访问集群Manager,选择“集群 > 服务 > Hive > 配置 > 全部配置”。 选择“MetaStore(角色) > 自定义”,对参数文件“hivemetastore-site
-
集群 - MapReduce服务 MRS
集群 管理集群 管理服务 管理实例 父主题: Manager操作指导(适用于3.x版本)
-
配置HDFS DataNode数据均衡 - MapReduce服务 MRS
率或节点磁盘无法利用等等。所以MRS集群管理员需要定期检查并保持DataNode数据平衡。 HDFS提供了一个容量均衡程序Balancer。通过运行这个程序,可以使得HDFS集群达到一个平衡的状态,使各DataNode磁盘使用率与HDFS集群磁盘使用率的偏差不超过阈值。图1和图2
-
快速购买Kafka流式集群 - MapReduce服务 MRS
证后再创建集群。购买集群后,不支持修改。 如果您对价格有疑问,可以单击页面左下角“了解计费详情”,根据计费详情来了解产品价格。 单击“返回集群列表”,可以查看到集群创建的状态。单击“访问集群”,可以查看集群详情。 集群创建的状态过程请参见表1中的“状态”参数说明。 集群创建需要时
-
快速购买Hadoop分析集群 - MapReduce服务 MRS
证后再创建集群。购买集群后,不支持修改。 如果您对价格有疑问,可以单击页面左下角“了解计费详情”,根据计费详情来了解产品价格。 单击“返回集群列表”,可以查看到集群创建的状态。单击“访问集群”,可以查看集群详情。 集群创建的状态过程请参见表1中的“状态”参数说明。 集群创建需要时
-
登录集群节点 - MapReduce服务 MRS
用户名、密码分别是root和创建集群时设置的密码。 图1 密码方式 创建集群时登录方式选择了密钥对,则使用如下方式登录: 创建集群成功后,参见为弹性云服务器申请和绑定弹性公网IP为集群的Master节点绑定一个弹性IP地址。 使用root用户名和密钥文件,SSH方式远程登录Master节点。
-
查看集群基本信息 - MapReduce服务 MRS
查看集群基本信息 集群创建完成后,可对集群进行监控和管理。选择“现有集群”,选中一集群并单击集群名,进入集群详情页面,查看集群的基本配置信息、部署的节点信息。 ECS集群和BMS集群在管理控制台操作基本一致,本文档主要以ECS集群描述为例,如有操作区别则分开描述。 在集群详情页面
-
管理Kafka集群 - MapReduce服务 MRS
管理Kafka集群 管理Kafka集群包含以下内容: 添加集群到KafkaManager的WebUI界面 更新集群参数 删除KafkaManager的WebUI界面的集群 添加集群到KafkaManager的WebUI界面 首次创建Kafka集群后会在KafkaManager的W
-
配置用户租约隔离访问指定节点的HiveServer - MapReduce服务 MRS
者多个实例,此处选择已有的HiveServer实例: 登录FusionInsight Manager,具体请参见访问集群Manager。 选择“集群 > 待操作集群的名称 > 服务 > Hive > HiveServer”。 在HiveServer列表里选择设置租约隔离的Hive
-
配置用户租约隔离访问指定节点的HiveServer - MapReduce服务 MRS
登录FusionInsight Manager,具体请参见访问FusionInsight Manager(MRS 3.x及之后版本)。 选择“集群 > 待操作集群的名称 > 服务 > Hive > HiveServer”。 在HiveServer列表里选择设置租约隔离的HiveServer,选择“HiveServer
-
滚动重启集群 - MapReduce服务 MRS
滚动重启集群 操作场景 滚动重启指当集群中服务角色升级更新或修改配置后,在尽可能不中断业务的前提下的重启操作。 如果需要批量为集群中所有服务进行重启且不中断业务,可执行集群滚动重启操作。 部分服务不支持滚动重启,在执行滚动重启集群的过程中,不支持滚动重启的服务将进行普通重启,业务
-
退订集群 - MapReduce服务 MRS
退订集群 对于包年包月模式集群,如果作业执行结束后不需要集群, 可以退订MRS集群。集群退订后,资源和数据将会被删除并且无法找回,请务必确认完成数据备份后再提交退订。 退订规则请参见退订规则说明。 背景信息 一般在数据完成分析和存储后或集群异常无法提供服务时才执行集群退订操作。当
-
集群管理 - MapReduce服务 MRS
集群管理 集群生命周期管理 集群在线扩缩容 创建Task节点 自动弹性伸缩 节点隔离 升级Master节点规格 节点标签管理 父主题: 产品功能
-
集群管理 - MapReduce服务 MRS
集群管理 集群互信管理 配置定时备份告警与审计信息 修改FusionInsight Manager添加的路由表 修改集群NTP服务器 切换维护模式 Manager例行维护说明 父主题: Manager操作指导(适用于3.x版本)
-
启用集群间拷贝功能备份集群数据 - MapReduce服务 MRS
启用集群间拷贝功能备份集群数据 操作场景 当用户需要将保存在HDFS中的数据从当前集群备份到另外一个集群时,需要使用DistCp工具。DistCp工具依赖于集群间复制功能,该功能默认未启用。两个集群都需要配置。 该任务指导MRS集群管理员在MRS修改参数以启用集群间复制功能。 对系统的影响
-
集群互信概述 - MapReduce服务 MRS
集群互信概述 功能介绍 默认情况下,安全模式下的大数据集群用户只能访问本集群中的资源,无法在其他安全模式集群中进行身份认证并访问资源。 特性描述 域 每个系统用户安全使用的范围定义为“域”,不同的Manager系统需要定义唯一的域名。跨Manager访问实际上就是用户跨域使用。 用户加密