-
使用代理用户提交Spark作业 - MapReduce服务 MRS
hosts”值为“*”:表示test用户连接后,可以使用任意代理用户,不限制集群节点。 参数“hadoop.proxyuser.test.groups”值为“*”:表示test用户连接后,可以使用任意代理用户,不限制代理用户所在的用户组。 修改如下参数值,切换JDBCServer实例至多实例模式:
-
配置HetuEngine使用代理用户鉴权 - MapReduce服务 MRS
配置HetuEngine使用代理用户鉴权 适用于MRS 3.3.0及以后版本。 HetuEngine支持使用FusionInsight Manager用户认证时通过客户自有用户(代理用户)使用Ranger鉴权的能力。即在使用HetuEngine客户端时,通过--session-user来指定代理用户。
-
如何获取Spark Jar包? - MapReduce服务 MRS
com/repository/maven/huaweicloudsdk/),查看网站是否能正常访问。如果访问异常,请先开通本地网络。 确认当前开发工具是否开启代理。下载jar包前需要确保开发工具代理关闭。 比如以2020.2版本的IntelliJ IDEA开发工具为例,单击“File > Settings > Appearance
-
使用代理用户访问FlinkServer REST API样例程序(Java) - MapReduce服务 MRS
使用代理用户访问FlinkServer REST API样例程序(Java) 本章节适用于MRS 3.3.0及以后版本。 功能介绍 通过代理用户调用FlinkServer RestAPI。以FlinkServer管理员权限的用户访问API来获取普通用户权限。 代码样例 以租户用户
-
使用代理用户访问FlinkServer REST API样例程序(Java) - MapReduce服务 MRS
使用代理用户访问FlinkServer REST API样例程序(Java) 本章节适用于MRS 3.3.0及以后版本。 功能介绍 通过代理用户调用FlinkServer RestAPI。以FlinkServer管理员权限的用户访问API来获取普通用户权限。 代码样例 以租户用户
-
添加Hudi数据源 - MapReduce服务 MRS
HetuEngine不支持Hudi的bootstrap表的读取。 前提条件 创建Hudi数据源的代理用户,该代理用户为人机用户且需拥有hive组。 在HetuEngine所在集群的所有节点的“/etc/hosts”文件中,添加待对接数据源所在集群的主机名称和对应的IP映射,及其“/etc/hosts”文件中的“10
-
访问Spark应用的聚合日志页面报“DNS查找失败”错误 - MapReduce服务 MRS
port>的方式直接访问Spark JobHistory页面时,如果当前跳转的Spark JobHistory页面不是FusionInsight代理的页面(FusionInsight代理的URL地址类似于:https://<oms ip>:20026/Spark2x/JobHistory2x/xx/),单
-
访问Spark应用的聚合日志页面报“DNS查找失败”错误 - MapReduce服务 MRS
port>的方式直接访问Spark JobHistory页面时,如果当前跳转的Spark JobHistory页面不是FusionInsight代理的页面(FusionInsight代理的URL地址类似于:https://<oms ip>:20026/Spark2x/JobHistory2x/xx/),单
-
节点管理 - MapReduce服务 MRS
节点管理 扩容集群 缩容集群 缩容ClickHouseServer 管理主机(节点)操作 隔离主机 取消隔离主机 升级Master节点规格 扩容数据盘 同步磁盘信息 父主题: 管理集群
-
升级Master节点规格 - MapReduce服务 MRS
在弹出的“警告”页面,再次确认已确认关闭备master节点上的所有服务,然后单击“确定”开始升级备Master节点的规格。 节点规格升级需要时间,请耐心等待。升级成功后集群状态更新为“Master备节点升级完成”,否则请联系运维人员处理。 备Master节点升级成功后,参考Master节点规格升级后操作的1-1
-
如何通过集群外的节点访问MRS集群? - MapReduce服务 MRS
如何通过集群外的节点访问MRS集群? 创建集群外Linux操作系统ECS节点访问MRS集群 创建一个集群外ECS节点,具体请参考购买弹性云服务器。 ECS节点的“可用区”、“虚拟私有云”、“安全组”,需要和待访问集群的配置相同。 在VPC管理控制台,申请一个弹性IP地址,并与ECS绑定。
-
MRS集群节点简介 - MapReduce服务 MRS
备管理节点会自动切换为主管理节点并继续提供服务。 查看Master1节点是否为主管理节点,请参见如何确认主备管理节点。 Core节点 MRS集群工作节点,负责处理和分析数据,并存储过程数据。 在MRS集群详情的“节点管理”页面,节点类型包含“Core”的节点组所包含的节点为Core节点。
-
HetuEngine应用开发简介 - MapReduce服务 MRS
源跨域统一访问,使能数据湖内、湖间、湖仓一站式SQL融合分析。 HetuEngine基本概念 HSBroker:HetuEngine的服务代理,用作用户租户管理校验,HetuEngine访问URL的获取等。 Coordinator:HetuEngine服务的资源协调者,负责SQL解析和优化等事务。
-
HetuEngine应用开发简介 - MapReduce服务 MRS
跨域统一访问,使能数据湖内、湖间、湖仓一站式SQL融合分析。 HetuEngine基本概念 HSBroker: HetuEngine的服务代理,用作用户租户管理校验,HetuEngine访问URL的获取等。 Coordinator:HetuEngine服务的资源协调者,负责SQL解析和优化等事务。
-
如何处理IE10/11页面算子的文字部分显示异常 - MapReduce服务 MRS
分没有显示出来的问题?如图1所示,Overview显示为空白。 图1 页面显示异常 回答 Flink中用了foreignObject元素来代理绘制svg矢量图,但是IE 10/11不支持foreignObject导致算子显示异常。支持使用chrome浏览器。 父主题: Flink应用开发常见问题
-
如何处理IE10/11页面算子的文字部分显示异常 - MapReduce服务 MRS
分没有显示出来的问题?如图1所示,Overview显示为空白。 图1 页面显示异常 回答 Flink中用了foreignObject元素来代理绘制svg矢量图,但是IE 10/11不支持foreignObject导致算子显示异常。推荐使用chrome浏览器。 父主题: Flink应用开发常见问题
-
如何处理IE10/11页面算子的文字部分显示异常 - MapReduce服务 MRS
分没有显示出来的问题?如图1所示,Overview显示为空白。 图1 页面显示异常 回答 Flink中用了foreignObject元素来代理绘制svg矢量图,但是IE 10/11不支持foreignObject导致算子显示异常。支持使用chrome浏览器。 父主题: Flink应用开发常见问题
-
如何处理IE10/11页面算子的文字部分显示异常 - MapReduce服务 MRS
分没有显示出来的问题?如图1所示,Overview显示为空白。 图1 页面显示异常 回答 Flink中用了foreignObject元素来代理绘制svg矢量图,但是IE 10/11不支持foreignObject导致算子显示异常。推荐使用chrome浏览器。 父主题: Flink应用开发常见问题
-
缩容集群 - MapReduce服务 MRS
缩容成功后,可以在集群详情的“节点管理”页签查看集群的节点信息。 指定节点缩容 当节点不再需要时,使用该功能删除节点,删除节点时组件的角色实例不会执行退服操作,删除前请确保节点中的数据已完成备份。缩容ClickHouseServer实例节点请参考缩容ClickHouseServer。缩容指定节点仅支持缩
-
获取MRS应用开发样例工程 - MapReduce服务 MRS
com/repository/maven/huaweicloudsdk/),查看网站是否能正常访问。如果访问异常,请先开通本地网络。 确认当前开发工具是否开启代理。下载jar包前需要确保开发工具代理关闭。 比如以2020.2版本的IntelliJ IDEA开发工具为例,单击“File > Settings > Appearance