-
配置HetuEngine智能物化视图能力 - MapReduce服务 MRS
配置HetuEngine智能物化视图能力 概述 基于智能物化视图,HetuEngine可以提供智能预计算与缓存加速能力。HetuEngine QAS角色能够自动提取历史SQL语句进行分析学习,基于收益最大化原则自动生成高价值物化视图的候选SQL。
-
技术支持 - MapReduce服务 MRS
智能数据专家服务 如需获得更多支持,可咨询购买对应的智能数据专家服务:https://www.huaweicloud.com/service/intelligencedata.html。
-
MapReduce服务 MRS - MapReduce服务 MRS
智能客服 您好!我是有问必答知识渊博的的智能问答机器人,有问题欢迎随时求助哦! 社区求助 华为云社区是华为云用户的聚集地。这里有来自各服务的技术牛人,为您解决技术难题。
-
ALM-16003 Background线程使用率超过阈值 - MapReduce服务 MRS
对系统的影响 后台Background线程数过多,导致新提交的任务无法及时运行。 可能原因 Hive后台的background线程池使用率过大。 HiveServer后台的background线程池执行的任务过多。
-
添加作业 - MapReduce服务 MRS
若在集群详情页面不支持“作业管理”和“文件管理”功能,请通过后台功能来提交作业。 用户创建作业前需要将本地数据上传至OBS系统用于计算分析。当然MRS也支持将OBS中的数据导入至HDFS中,并使用HDFS中的数据进行计算分析。
-
集群在线扩缩容 - MapReduce服务 MRS
整个扩容过程无需后台人工介入,只需几分钟,即可完美解决您遇到的日益上涨的业务数据压力。 缩容集群 用户可以根据业务需求量,通过简单的缩减Core节点或者Task节点,对集群进行缩容,以使MRS拥有更优的存储、计算能力,降低运维成本。
-
合并CBO优化 - MapReduce服务 MRS
CBO(Cost-Bsed Optimizer)是一种为SQL智能选择查询计划的技术。通过配置开启CBO后,CBO优化器可以基于表和列的统计信息,进行一系列的估算,最终选择出合适的查询计划。 操作步骤 要使用CBO优化,可以按照以下步骤进行优化。
-
合并CBO优化 - MapReduce服务 MRS
CBO(Cost-Bsed Optimizer)是一种为SQL智能选择查询计划的技术。通过配置开启CBO后,CBO优化器可以基于表和列的统计信息,进行一系列的估算,最终选择出合适的查询计划。 操作步骤 要使用CBO优化,可以按照以下步骤进行优化。
-
Alluxio - MapReduce服务 MRS
Alluxio Alluxio是一个面向基于云的数据分析和人工智能的数据编排技术。
-
StarRocks基本原理 - MapReduce服务 MRS
StarRocks基本原理 StarRocks简介 StarRocks是一款高性能分析型数据仓库,使用向量化、MPP架构、CBO、智能物化视图、可实时更新的列式存储引擎等技术实现多维、实时、高并发的数据分析。
-
Alluxio应用开发简介 - MapReduce服务 MRS
Alluxio应用开发简介 Alluxio简介 Alluxio是一个面向基于云的数据分析和人工智能的开源的数据编排技术。它为数据驱动型应用和存储系统构建了桥梁, 将数据从存储层移动到距离数据驱动型应用更近的位置,从而能够更容易、更快的被访问。
-
ClickHouse加速Merge调优 - MapReduce服务 MRS
ClickHouse加速Merge调优 加速后台任务,需要优先调整Zookeeper服务配置,否则Zookeeper会因为znode等资源不足,导致ClickHouse服务异常,后台任务异常。
-
加速Merge操作 - MapReduce服务 MRS
加速Merge操作 加速后台任务,需要优先调整Zookeeper服务配置,否则Zookeeper会因为znode等资源不足,导致ClickHouse服务异常,后台任务异常。
-
购买自定义集群 - MapReduce服务 MRS
MRS.105 现子网IP不足,请稍后重试或联系客服。 MRS.201 因ECS服务导致失败,请稍后重试或联系客服。 MRS.202 因IAM服务导致失败,请稍后重试或联系客服。 MRS.203 因VPC服务导致失败,请稍后重试或联系客服。
-
运行Flink作业 - MapReduce服务 MRS
通过后台提交作业 MRS 3.x及之后版本客户端默认安装路径为“/opt/Bigdata/client”,MRS 3.x之前版本为“/opt/client”。具体以实际为准。 登录MRS客户端。 执行如下命令初始化环境变量。
-
HDFS的DataNode一直显示退服中 - MapReduce服务 MRS
登录Master1节点的后台,执行cd ${BIGDATA_HOME}/MRS_*/1_*_NameNode/etc/命令进入黑名单目录。
-
同步集群配置 - MapReduce服务 MRS
若集群中所有服务的配置状态为“失败”时,同步集群的配置数据与后台配置数据。 若集群中某些服务的配置状态为“失败”时,同步指定服务的配置数据与后台配置数据。 对系统的影响 同步集群配置后,需要重启配置过期的服务。重启时对应的服务不可用。
-
配置HetuEngine物化视图 - MapReduce服务 MRS
HetuEngine物化视图概述 HetuEngine物化视图SQL示例 配置HetuEngine物化视图改写能力 配置HetuEngine物化视图推荐能力 配置HetuEngine物化视图缓存能力 配置HetuEngine物化视图的有效期与数据刷新能力 配置HetuEngine智能物化视图能力
-
同步集群配置 - MapReduce服务 MRS
若集群中所有服务的配置状态为“失败”时,同步集群的配置数据与后台配置数据。 若集群中某些服务的配置状态为“失败”时,同步指定服务的配置数据与后台配置数据。 MRS 3.x版本暂不支持在管理控制台执行本章节操作。 对系统的影响 同步集群配置后,需要重启配置过期的服务。
-
查看作业配置信息和日志 - MapReduce服务 MRS
由于Spark SQL和Distcp作业在后台无日志,运行中的Spark SQL和Distcp作业不能查看运行日志信息。 操作步骤 登录MRS管理控制台。 选择“现有集群”,选中一个运行中的集群并单击集群名,进入集群基本信息页面。 选择“作业管理”。