检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
clean.residual.tmp.dir.period.delay 文件清理的间隔时间,单位min 10 父主题: Spark Core企业级能力增强
thriftServer.useHdfsCollect参数设置为true时,将结果数据保存到HDFS中,但JobHistory原生页面上Job的描述信息无法正常关联到对应的SQL语句,同时spark-beeline命令行中回显的Execution ID为null,为解决JDBCServer OOM问题,同时显示信息正确,建议选择
是否需要在Spark/Spark2x客户端中启用此功能? 是,重新下载并安装Spark/Spark2x客户端。 否,操作结束。 父主题: Hive企业级能力增强
是否需要在Spark/Spark2x客户端中启用此功能? 是,重新下载并安装Spark/Spark2x客户端。 否,操作结束。 父主题: Hive企业级能力增强
Jar包到检查结果对应的HDFS路径下。 hdfs dfs -put -f 本地Jar包路径 异常Oozie Jar包所在的HDFS路径 父主题: Oozie企业级能力增强
HBase冷热分离相关命令介绍 此章节主要介绍HBase冷热分离相关命令的使用,包括Shell命令和Java API命令。 Shell命令在HBase客户端执行,需提前安装HBase客户端,详情请参见安装MRS客户端。 设置HBase表的冷热分界线 Shell 创建冷热分离表。 create
配置Hive任务的最大map数 操作场景 此功能适用于Hive。 此功能用于从服务端限定Hive任务的最大map数,避免HiveSever服务过载而引发的性能问题。 操作步骤 进入Hive服务配置页面: MRS 3.x之前版本,单击集群名称,登录集群详情页面,选择“组件管理 > Hive
配置Flink读写Doris数据 Flink Doris Connector支持通过Flink操作(读取、插入、修改、删除)Doris中存储的数据。 只能对Unique Key模型的表进行修改和删除操作。 该章节仅适用于MRS 3.5.0及之后版本。 前提条件 已创建包含Doris服务的集群,集群内各服务运行正常。
配置组件隔离访问Hive MetaStore 操作场景 MRS 3.2.0及之后的版本支持此功能,此功能用于限制集群内组件连接指定的Hive MetaStore实例,组件默认可连接所有MetaStore实例。 目前集群中支持连接MetaStore的组件有HetuEngine、Hi
系统域名' ); Insert into KafkaSink select * from KafkaSource; 父主题: Flink企业级能力增强
配置Spark读写Doris数据 Spark Doris Connector可以支持通过Spark读取Doris中存储的数据,也支持通过Spark写入数据到Doris中。 支持从Doris中读取数据 支持Spark DataFrame批量/流式写入Doris。 可以将Doris表
配置Hive任务的最大map数 “hive.mapreduce.per.task.max.splits”参数可用于从服务端限定Hive任务的最大map数,避免HiveSever服务过载而引发的性能问题。 操作步骤 登录FusionInsight Manager页面,选择“集群 >
create view v as select * from table1 where type=current_user(); 父主题: Hive企业级能力增强
create view v as select * from table1 where type=current_user(); 父主题: Hive企业级能力增强
Doris多租户监控告警介绍 Doris多租户基于内核Workload Group资源软限制方案实现,Workload Group只是限制组内任务在单个BE节点上的计算资源和内存资源的使用,所以租户没有整体资源池的概念,而是在执行查询任务时,动态的在各个BE节点上进行资源分配。
在退出后不会清理containers,NodeManager会假设自己会立即重启和恢复containers。 true 父主题: Yarn企业级能力增强
在退出后不会清理containers,NodeManager会假设自己会立即重启和恢复containers。 true 父主题: Yarn企业级能力增强
shutdown.cleaner.max.timeout executor执行自定义代码的超时时间。 240s 父主题: Spark Core企业级能力增强
看路径下的数据: desc formatted table_1 partition(pt='2021-12-18'); 父主题: Hive企业级能力增强
Streaming对接Kafka是否开启可靠性功能: true:开启可靠性功能 false:不开启可靠性功能 false 父主题: Spark Streaming企业级能力增强