-
MRS组件应用安全认证说明 - MapReduce服务 MRS
使用Kerberos的系统在设计上采用“客户端/服务器”结构与AES等加密技术,并且能够进行相互认证(即客户端和服务器端均可对对方进行身份认证)。可以用于防止窃听、防止replay攻击、保护数据完整性等场合,是一种应用对称密钥体制进行密钥管理的系统。
-
配额说明 - MapReduce服务 MRS
MapReduce服务通常使用的基础资源如下,配额由各个基础服务管理,如需扩大配额,请联系对应服务的技术支持进行扩容: 弹性云服务器 裸金属服务器 虚拟私有云 云硬盘 镜像服务 对象存储服务 弹性公网IP 消息通知服务 统一身份认证服务 其配额查看及修改请参见关于配额。
-
Loader数据导入导出概述 - MapReduce服务 MRS
服务器导入数据到Phoenix表 从SFTP服务器导入数据到Hive表 从FTP服务器导入数据到HDFS/OBS 从FTP服务器导入数据到HBase 从FTP服务器导入数据到Phoenix表 从FTP服务器导入数据到Hive表 从同一集群内HDFS/OBS导入数据到HBase MRS
-
连接到HBase响应慢 - MapReduce服务 MRS
原因分析 客户配置了DNS服务,由于客户端连接到HBase先通过DNS来解析服务器端,所以导致响应慢。 处理步骤 以root用户登录Master节点。 执行vi /etc/resolv.conf,打开resolv.conf文件,注释掉DNS服务器地址。 例如,#1.1.1.1。
-
如何通过集群外的节点访问MRS集群? - MapReduce服务 MRS
创建集群外Windows操作系统ECS节点访问MRS Manager 通过在弹性云服务器控制台上创建一个Windows弹性云服务器来访问MRS Manager。 父主题: 集群访问类
-
运行Manager应用报错“illegal character in path at index” - MapReduce服务 MRS
图1 操作失败日志 回答 可能的原因是URL中带空格导致服务器端无法正确识别URL。 需要去掉URL中的空格。 父主题: Manager应用开发常见问题
-
在Windows中调测Presto应用开发 - MapReduce服务 MRS
在弹性云服务管理控制台,创建一个新的弹性云服务器。 弹性云服务器的“可用分区”、“虚拟私有云”、“安全组”,需要和待访问集群的配置相同。 选择一个Windows系统的公共镜像。
-
MRS集群节点简介 - MapReduce服务 MRS
您可以使用远程登录工具(例如PuTTY),登录弹性云服务器。此时,需要该弹性云服务器绑定弹性IP地址。 Master节点申请和绑定弹性IP,请参见为弹性云服务器申请和绑定弹性公网IP。 可以使用密钥方式也可以使用密码方式登录Linux弹性云服务器。
-
ALM-45742 请求ECS metadata接口失败 - MapReduce服务 MRS
对系统的影响 当调用ECS metadata失败时,可能会导致获取访问OBS的临时aksk失败,进而影响任务正常访问OBS。 可能原因 ECS底层接口异常,导致请求失败。 处理步骤 收集故障信息。
-
配置Spark Native引擎 - MapReduce服务 MRS
配置场景 Spark Native引擎是通过使用向量化的C++加速库,实现对Spark算子性能加速的一种技术方案。
-
CarbonData基本原理 - MapReduce服务 MRS
CarbonData索引缓存服务器 为了解决日益增长的数据量给driver带来的压力与出现的各种问题,现引入单独的索引缓存服务器,将索引从Carbon查询的Spark应用侧剥离。所有的索引内容全部由索引缓存服务器管理,Spark应用通过RPC方式获取需要的索引数据。
-
ALM-12110 获取ECS临时ak/sk失败 - MapReduce服务 MRS
ALM-12110 获取ECS临时ak/sk失败 告警解释 meta每五分钟调用ECS接口获取AK/SK信息,并缓存在meta中,在AK/SK过期失效之前会再次调用ECS接口更新AK/SK,如果连续三次调用接口失败,会产生该告警。 当meta服务调用ECS接口成功时,告警清除。
-
多租户管理页面概述 - MapReduce服务 MRS
Superior调度器可用资源计算方式分别如下: Superior Yarn可用资源(Memory、CPU)为资源池容量按照队列权重按比例分配。 当租户管理员绑定一个租户角色时,租户管理员将拥有该租户的管理权限,以及该租户全部资源的权限。
-
YARN开源增强特性 - MapReduce服务 MRS
为了加速RM的启动,现在优先获取未完成的应用列表,再启动RM。此时,已完成的应用会在一个后台异步线程中继续恢复。下图展示了RM的启动恢复流程。 图5 RM启动恢复流程 父主题: YARN
-
ALM-45741 请求ECS securitykey接口失败 - MapReduce服务 MRS
对系统的影响 调用ECS的securitykey接口失败可能会引起任务获取访问OBS的临时aksk失败,进而影响任务正常访问OBS。 可能原因 集群未绑定ECS委托。 ECS底层接口异常,导致请求失败。 处理步骤 确认是否绑定委托。 登录MapReduce服务管理控制台。
-
修改ClickHouse服务级别内存限制 - MapReduce服务 MRS
如服务器物理内存为10G,该值设置为0.9,则ClickHouse服务在当前服务器上可用内存为10G* 0.9 = 9G,如果参数设置为0,则表示不限制,那么ClickHouse服务可以使用服务器的所有物理内存。该参数最多有效位为小数点后两位。
-
HBase全局二级索引介绍 - MapReduce服务 MRS
HBase全局二级索引介绍 场景介绍 使用HBase二级索引可以加速带Filter的条件查询,支持HIndex(本地索引,即Local Secondary Index,简称为LSI)和全局二级索引(Global Secondary Index,简称为GSI)。
-
创建HBase客户端连接 - MapReduce服务 MRS
Connection封装了底层与各实际服务器的连接以及与ZooKeeper的连接。Connection通过ConnectionFactory类实例化。创建Connection是重量级操作,Connection是线程安全的,因此,多个客户端线程可以共享一个Connection。
-
创建HBase客户端连接 - MapReduce服务 MRS
Connection封装了底层与各实际服务器的连接以及与ZooKeeper的连接。Connection通过ConnectionFactory类实例化。创建Connection是重量级操作,Connection是线程安全的,因此,多个客户端线程可以共享一个Connection。
-
创建Connection - MapReduce服务 MRS
Connection封装了底层与各实际服务器的连接以及与ZooKeeper的连接。Connection通过ConnectionFactory类实例化。创建Connection是重量级操作,Connection是线程安全的,因此,多个客户端线程可以共享一个Connection。