-
BulkLoad工具配置文件说明 - MapReduce服务 MRS
使用BulkLoad工具批量导入HBase数据时,支持用户自定义的组合rowkey实现。用户可编写rowkey实现代码,导入时根据该代码逻辑进行组合rowkey导入。 配置自定义rowkey实现步骤如下: 用户编写自定义rowkey的实现类,需要继承接口,该接口所在的Jar包路径为
-
Presto接口介绍 - MapReduce服务 MRS
Presto接口介绍 Presto JDBC接口遵循标准的JAVA JDBC驱动标准,详情请参见JDK1.7 API。Presto JDBC使用参见https://prestodb.io/docs/current/installation/jdbc.html。 父主题: Presto应用开发常见问题
-
配置Kafka数据均衡工具 - MapReduce服务 MRS
配置Kafka数据均衡工具 操作场景 该任务指导管理员根据业务需求,在客户端中执行Kafka均衡工具来均衡Kafka集群的负载,一般用于节点的退服、入服以及负载均衡的场景。 本章节内容适用于MRS 3.x及后续版本。3.x之前版本请参考均衡Kafka扩容节点后数据 前提条件 MR
-
配置Kafka数据均衡工具 - MapReduce服务 MRS
配置Kafka数据均衡工具 操作场景 该任务指导管理员根据业务需求,在客户端中执行Kafka均衡工具来均衡Kafka集群的负载,一般用于节点的退服、入服以及负载均衡的场景。 前提条件 MRS集群管理员已明确业务需求,并准备一个Kafka管理员用户(属于kafkaadmin组,普通模式不需要)。
-
使用BulkLoad工具批量更新HBase数据 - MapReduce服务 MRS
使用BulkLoad工具批量更新HBase数据 操作场景 支持根据RowKey的命名规则、RowKey的范围、字段名以及字段值进行批量更新。 操作步骤 执行如下命令更新从“row_start”到“row_stop”的行,并且把输出结果定向到“/output/destdir/”。 hbase
-
使用BulkLoad工具批量导入HBase数据 - MapReduce服务 MRS
使用BulkLoad工具批量导入HBase数据 操作场景 您可以按照自定义的方式,通过命令批量导入数据到HBase中。 您可以在“configuration.xml”文件中定义多个方式来批量导入数据。导入数据时可不创建索引。 列的名称不能包含特殊字符,只能由字母、数字和下划线组成。
-
使用BulkLoad工具批量删除HBase数据 - MapReduce服务 MRS
使用BulkLoad工具批量删除HBase数据 操作场景 根据rowkey的取值模式、范围、字段名、字段值对HBase做批量删除。 操作步骤 执行如下命令删除从“row_start”到“row_stop”的行,并且把输出结果定向到“/output/destdir/”。 hbase
-
BulkLoad工具配置文件说明 - MapReduce服务 MRS
使用BulkLoad工具批量导入HBase数据时,支持用户自定义的组合rowkey实现。用户可编写rowkey实现代码,导入时根据该代码逻辑进行组合rowkey导入。 配置自定义rowkey实现步骤如下: 用户编写自定义rowkey的实现类,需要继承接口,该接口所在的Jar包路径为
-
使用loader-backup工具备份作业数据 - MapReduce服务 MRS
使用loader-backup工具备份作业数据 操作场景 通过Loader WebUI或客户端工具loader-tool创建好作业后,可使用loader-backup工具进行数据备份。 仅有数据导出的Loader作业才支持数据备份。 此工具为Loder的内部接口,供上层组件HBase调
-
使用BulkLoad工具查询HBase表的行统计数 - MapReduce服务 MRS
使用BulkLoad工具查询HBase表的行统计数 操作场景 支持根据rowkey的命名规则、rowkey的范围、字段名以及字段值统计符合条件的行数。 操作步骤 直接执行如下命令统计满足如下条件的行数。rowkey在从“row_start”到“row_stop”的范围,字段“f3
-
服务详情概述 - MapReduce服务 MRS
及功能区。部分服务还支持显示自定义的管理工具页面,具体支持列表如表1所示。 表1 自定义管理工具名称一览表 工具名称 对应服务 说明 Flume配置工具 Flume 用于为Flume的服务端和客户端配置采集参数。 Flume客户端管理工具 Flume 查看Flume客户端监控信息。
-
客户端工具说明 - MapReduce服务 MRS
客户端工具说明 使用命令行运行Loader作业 loader-tool工具使用指导 loader-tool工具使用示例 schedule-tool工具使用指导 schedule-tool工具使用示例 使用loader-backup工具备份作业数据 开源sqoop-shell工具使用指导
-
客户端工具说明 - MapReduce服务 MRS
客户端工具说明 使用客户端运行Loader作业 loader-tool工具使用指导 loader-tool工具使用示例 schedule-tool工具使用指导 schedule-tool工具使用示例 使用loader-backup工具备份作业数据 开源sqoop-shell工具使用指导
-
ClickHouse数据入库工具 - MapReduce服务 MRS
ClickHouse数据入库工具 最佳实践方案 ClickHouse数据加工流程最佳实践:在数据湖中通过Hive&Spark(批量)/FlinkSQL(增量)加工成大宽表后,通过CDL/Loader工具实时同步到ClickHouse,下游BI工具和应用进行实时OLAP分析。 数据加工
-
使用BulkLoad工具批量删除HBase数据 - MapReduce服务 MRS
使用BulkLoad工具批量删除HBase数据 操作场景 根据rowkey的取值模式、范围、字段名、字段值对HBase做批量删除。 操作步骤 执行如下命令删除从“row_start”到“row_stop”的行,并且把输出结果定向到“/output/destdir/”。 hbase
-
使用BulkLoad工具批量更新HBase数据 - MapReduce服务 MRS
使用BulkLoad工具批量更新HBase数据 操作场景 支持根据RowKey的命名规则、RowKey的范围、字段名以及字段值进行批量更新。 操作步骤 执行如下命令更新从“row_start”到“row_stop”的行,并且把输出结果定向到“/output/destdir/”。 hbase
-
使用BulkLoad工具批量导入HBase数据 - MapReduce服务 MRS
使用BulkLoad工具批量导入HBase数据 操作场景 您可以按照自定义的方式,通过命令批量导入数据到HBase中并创建索引。 您可以在“configuration.xml”文件中定义多个方式来批量导入数据,导入数据时可不创建索引。 列的名称不能包含特殊字符,只能由字母、数字和下划线组成。
-
配置BulkloadTool工具支持解析自定义分隔符 - MapReduce服务 MRS
配置BulkloadTool工具支持解析自定义分隔符 操作场景 Phoenix提供了批量数据导入工具CsvBulkloadTool,相关特性介绍请参见https://phoenix.apache.org/bulk_dataload.html,在此特性基础上,支持导入自定义分隔符文
-
集群管理接口 - MapReduce服务 MRS
集群管理接口 创建集群 修改集群名称 创建集群并提交作业 扩容集群 缩容集群 集群添加组件 查询集群节点列表 父主题: API V2
-
配置HDFS DiskBalancer磁盘均衡 - MapReduce服务 MRS
DiskBalancer磁盘均衡 配置场景 DiskBalancer是一个在线磁盘均衡器,旨在根据各种指标重新平衡正在运行的DataNode上的磁盘数据。工作方式与HDFS的Balancer工具类似。不同的是,HDFS Balancer工具用于DataNode节点间的数据均衡,而HDFS Disk