-
ClickHouse增加磁盘容量 - MapReduce服务 MRS
如果购买MRS集群的计费模式为按需计费,扩容磁盘容量后MRS集群不支持转包周期。 本章节仅适用于MRS 3.1.0版本。 前提条件 ClickHouse集群和实例状态正常。 已评估好要扩容的ClickHouse节点数据盘磁盘容量大小。
-
快速购买Kafka流式集群 - MapReduce服务 MRS
计费模式:选择“按需计费”时,可能需要冻结一定的保证金。具体内容请参见 计费说明。 集群名称:可以设置为系统默认名称,但为了区分和记忆,建议带上项目拼音缩写或者日期等。例如:“mrs_20200321”。 集群类型:选择“流式集群”。 版本类型:选择“普通版”。
-
使用BulkLoad工具向HBase中批量导入数据 - MapReduce服务 MRS
华北-北京四 计费模式 MRS提供两种计费模式: 包年/包月 按需计费 选择“按需计费”时,可能需要冻结一定的保证金。详细内容,请参见计费说明。 按需计费 集群名称 集群名称不允许重复。只能由字母、数字、中划线和下划线组成,并且长度为1~64个字符。
-
配置存算分离集群(委托方式) - MapReduce服务 MRS
计费模式:选择“按需计费”。 可用区:默认即可。 虚拟私有云:默认即可。 子网:默认即可。 安全组:默认即可。 弹性公网IP:默认即可。 企业项目:默认即可。 CPU架构:默认即可。MRS 3.x之前版本支持该参数。 集群节点:请根据自身需求选择节点规格和数量。
-
Flume对接OBS文件系统 - MapReduce服务 MRS
使用本章节前已参考配置存算分离集群(委托方式)或配置存算分离集群(AKSK方式)完成存算分离集群配置。 配置委托。 登录MRS控制台,在左侧导航栏选择“现有集群”。 单击集群名称,进入集群详情页面。
-
购买自定义集群 - MapReduce服务 MRS
图1 软件配置 部分区域仅支持一种计费方式,请以控制台实际方式为准。 参考硬件配置配置集群信息后,单击“下一步”。
-
使用Stream Load方式导入数据至Doris - MapReduce服务 MRS
columns 待导入数据的函数变换配置,目前 Stream Load支持的函数变换方法包含列的顺序变化以及表达式变换,其中表达式变换的方法与查询语句一致。 format 指定导入数据格式,支持CSV、JSON、Parquet、ORC等,默认是CSV。
-
配置MapReduce应用安全认证 - MapReduce服务 MRS
安全认证有两种方式: 命令行认证: 提交MapReduce应用程序运行前,在MapReduce客户端执行如下命令获得认证。 kinit 组件业务用户 代码认证: 通过获取客户端的principal和keytab文件在应用程序中进行认证。
-
MRS集群内节点的登录方式如何切换? - MapReduce服务 MRS
MRS集群内节点的登录方式如何切换? 问:MRS集群内节点的登录方式(密码或密钥对)如何切换? 答:不可以切换。创建集群时选择了节点登录方式后不能更改登录方式。 父主题: 集群访问类
-
什么是MapReduce服务 - MapReduce服务 MRS
集群管理 以Hadoop为基础的大数据生态的各种组件均是以分布式的方式进行部署,其部署、管理和运维复杂度较高。 MRS集群管理提供了统一的运维管理平台,包括一键式部署集群能力,并提供多版本选择,支持运行过程中集群在无业务中断条件下,进行扩缩容、弹性伸缩。
-
配置存算分离集群(AKSK方式) - MapReduce服务 MRS
MRS提供如下访问OBS的配置方式,请选择其中一种配置即可(推荐使用委托方式): 通过为MRS集群绑定ECS委托方式访问OBS,避免了AK/SK直接暴露在配置文件中的风险,具体请参考配置存算分离集群(委托方式)。
-
Structured Streaming 任务提交方式变更 - MapReduce服务 MRS
Structured Streaming 任务提交方式变更 问题 用户提交结构流任务时,通常需要通过--jars命令指定kafka相关jar包的路径,例如--jars /kafkadir/kafka-clients-x.x.x.jar,/kafkadir/kafka_2.11-x.x.x.jar
-
Structured Streaming 任务提交方式变更 - MapReduce服务 MRS
Structured Streaming 任务提交方式变更 问题 用户提交结构流任务时,通常需要通过--jars命令指定kafka相关jar包的路径,例如--jars /kafkadir/kafka-clients-x.x.x.jar,/kafkadir/kafka_2.11-x.x.x.jar
-
Structured Streaming 任务提交方式变更 - MapReduce服务 MRS
Structured Streaming 任务提交方式变更 问题 用户提交结构流任务时,通常需要通过--jars命令指定kafka相关jar包的路径,例如--jars /kafkadir/kafka-clients-x.x.x.jar,/kafkadir/kafka_2.11-x.x.x.jar
-
Structured Streaming 任务提交方式变更 - MapReduce服务 MRS
Structured Streaming 任务提交方式变更 问题 用户提交结构流任务时,通常需要通过--jars命令指定kafka相关jar包的路径,例如--jars /kafkadir/kafka-clients-x.x.x.jar,/kafkadir/kafka_2.11-x.x.x.jar
-
使用hive-table方式同步数据报错 - MapReduce服务 MRS
使用hive-table方式同步数据报错 问题 使用hive-table方式同步数据报错。 回答 修改hive-site.xml,加入如下值。 父主题: Sqoop常见问题
-
使用hcatalog方式同步hive parquet表报错 - MapReduce服务 MRS
使用hcatalog方式同步hive parquet表报错 问题 同步hive parquet表,其分区字段为非string类型,无法正常使用hive import导入,只能考虑使用hcatalog方式,但是hcatalog方式报错如下: 回答 修改sqoop源码SqoopHCatUtilities
-
通过专线访问Manager页面方式出现503报错 - MapReduce服务 MRS
通过专线访问Manager页面方式出现503报错 问题现象 通过专线方式访问Manager界面,出现503报错:当前无法使用此页面”。 原因分析 随着任务量的增大或者任务并发较高,有可能会导致Executor内存不足,进而导致访问Manager异常。
-
通过JDBC方式实现查询HetuEngine SQL任务 - MapReduce服务 MRS
通过JDBC方式实现查询HetuEngine SQL任务 功能简介 通过JDBC连接方式,组装对应的SQL发送到HetuServer执行,并能查询对应的SQL语句执行进度和状态。
-
使用Broker Load方式导入数据至Doris - MapReduce服务 MRS
使用Broker Load方式导入数据至Doris Broker Load是一个异步的导入方式,支持的数据源取决于Broker进程支持的数据源。