-
开源sqoop-shell工具使用示例(SFTP - HDFS) - MapReduce服务 MRS
开源sqoop-shell工具使用示例(SFTP - HDFS) 操作场景 本文将以“从SFTP服务器导入数据到HDFS”的作业为例,介绍如何分别在交互模式和批量模式下使用sqoop-shell工具进行创建和启动Loader作业。 本章节适用于MRS 3.x及后续版本。 前提条件
-
开源sqoop-shell工具使用示例(Oracle - HBase) - MapReduce服务 MRS
开源sqoop-shell工具使用示例(Oracle - HBase) 操作场景 本文将以“从Oracle导入数据到HBase”的作业为例,介绍如何分别在交互模式和批量模式下使用sqoop-shell工具进行创建和启动Loader作业。 本章节适用于MRS 3.x及后续版本。 前提条件
-
开源sqoop-shell工具使用示例(SFTP - HDFS) - MapReduce服务 MRS
开源sqoop-shell工具使用示例(SFTP - HDFS) 操作场景 本文将以“从SFTP服务器导入数据到HDFS”的作业为例,介绍如何分别在交互模式和批量模式下使用sqoop-shell工具进行创建和启动Loader作业。 前提条件 已安装并配置Loader客户端,具体操
-
开源sqoop-shell工具使用示例(Oracle - HBase) - MapReduce服务 MRS
开源sqoop-shell工具使用示例(Oracle - HBase) 操作场景 本文将以“从Oracle导入数据到HBase”的作业为例,介绍如何分别在交互模式和批量模式下使用sqoop-shell工具进行创建和启动Loader作业。 前提条件 已安装并配置Loader客户端,
-
loader-tool工具使用示例 - MapReduce服务 MRS
loader-tool工具使用示例 操作场景 loader-tool工具支持通过作业模板或参数选项的方式,对连接器或者作业进行创建、更新、查询、删除等操作。 本文将以“从SFTP服务器导入数据到HDFS”的作业为例,通过引用作业模板的方式,介绍loader-tool工具的使用方法。 前提条件
-
开源sqoop-shell工具使用指导 - MapReduce服务 MRS
开源sqoop-shell工具使用指导 概述 本章节适用于MRS 3.x及后续版本。 sqoop-shell是一个开源的shell工具,其所有功能都是通过执行脚本“sqoop2-shell”来实现的。 sqoop-shell工具提供了如下功能: 支持创建和更新连接器 支持创建和更新作业
-
Flink安全认证机制说明 - MapReduce服务 MRS
allow-access-address配置项中。 禁止将文件绝对路径发送到客户端: 说明:文件绝对路径发送到客户端会暴露服务端的目录结构信息,有助于攻击者遍历了解系统,为攻击者攻击提供帮助。 安全加固:Flink配置文件中所有配置项中如果包含以/开头的,则删掉第一级目录。 同源策略: 适用于MRS 3.x及之后版本。
-
使用loader-backup工具备份作业数据 - MapReduce服务 MRS
使用loader-backup工具备份作业数据 操作场景 通过Loader WebUI或客户端工具loader-tool创建好作业后,可使用loader-backup工具进行数据备份。 仅有数据导出的Loader作业才支持数据备份。 此工具为Loder的内部接口,供上层组件HBa
-
BulkLoad工具配置文件说明 - MapReduce服务 MRS
BulkLoad工具配置文件说明 配置自定义的组合rowkey 使用BulkLoad工具批量导入HBase数据时,支持用户自定义组合rowkey。BulkLoad组合rowkey即通过一些规则将多个列名经过一些自定义处理,组合生成新的rowkey。 列的名称不能包含特殊字符,只能由字母、数字和下划线组成。
-
配置Kafka数据均衡工具 - MapReduce服务 MRS
配置Kafka数据均衡工具 操作场景 该任务指导管理员根据业务需求,在客户端中执行Kafka均衡工具来均衡Kafka集群的负载,一般用于节点的退服、入服以及负载均衡的场景。 本章节内容适用于MRS 3.x及后续版本。3.x之前版本请参考均衡Kafka扩容节点后数据 前提条件 MR
-
配置Kafka数据均衡工具 - MapReduce服务 MRS
配置Kafka数据均衡工具 操作场景 该任务指导管理员根据业务需求,在客户端中执行Kafka均衡工具来均衡Kafka集群的负载,一般用于节点的退服、入服以及负载均衡的场景。 前提条件 MRS集群管理员已明确业务需求,并准备一个Kafka管理员用户(属于kafkaadmin组,普通模式不需要)。
-
使用loader-backup工具备份作业数据 - MapReduce服务 MRS
使用loader-backup工具备份作业数据 操作场景 通过Loader WebUI或客户端工具loader-tool创建好作业后,可使用loader-backup工具进行数据备份。 仅有数据导出的Loader作业才支持数据备份。 此工具为Loder的内部接口,供上层组件HBa
-
BulkLoad工具配置文件说明 - MapReduce服务 MRS
BulkLoad工具配置文件说明 配置自定义的组合rowkey 使用BulkLoad工具批量导入HBase数据时,支持用户自定义组合rowkey。BulkLoad组合rowkey即通过一些规则将多个列名经过一些自定义处理,组合生成新的rowkey。 列的名称不能包含特殊字符,只能由字母、数字和下划线组成。
-
安全加固 - MapReduce服务 MRS
包。 应用程序目录下针对工程禁用自动部署功能,只部署了web、cas和client三个工程。 禁用部分未使用的HTTP方法,防止被他人利用攻击。 更改Tomcat服务器默认shutdown端口号和命令,避免被黑客捕获利用关闭服务器,降低对服务器和应用的威胁。 出于安全考虑,更改“
-
使用BulkLoad工具批量删除HBase数据 - MapReduce服务 MRS
使用BulkLoad工具批量删除HBase数据 操作场景 根据rowkey的取值模式、范围、字段名、字段值对HBase做批量删除。 操作步骤 执行如下命令删除从“row_start”到“row_stop”的行,并且把输出结果定向到“/output/destdir/”。 hbase
-
使用BulkLoad工具批量更新HBase数据 - MapReduce服务 MRS
使用BulkLoad工具批量更新HBase数据 操作场景 支持根据RowKey的命名规则、RowKey的范围、字段名以及字段值进行批量更新。 操作步骤 执行如下命令更新从“row_start”到“row_stop”的行,并且把输出结果定向到“/output/destdir/”。 hbase
-
使用BulkLoad工具批量导入HBase数据 - MapReduce服务 MRS
使用BulkLoad工具批量导入HBase数据 操作场景 您可以按照自定义的方式,通过命令批量导入数据到HBase中并创建索引。 您可以在“configuration.xml”文件中定义多个方式来批量导入数据,导入数据时可不创建索引。 列的名称不能包含特殊字符,只能由字母、数字和下划线组成。
-
使用BulkLoad工具批量删除HBase数据 - MapReduce服务 MRS
使用BulkLoad工具批量删除HBase数据 操作场景 根据rowkey的取值模式、范围、字段名、字段值对HBase做批量删除。 操作步骤 执行如下命令删除从“row_start”到“row_stop”的行,并且把输出结果定向到“/output/destdir/”。 hbase
-
使用BulkLoad工具批量更新HBase数据 - MapReduce服务 MRS
使用BulkLoad工具批量更新HBase数据 操作场景 支持根据RowKey的命名规则、RowKey的范围、字段名以及字段值进行批量更新。 操作步骤 执行如下命令更新从“row_start”到“row_stop”的行,并且把输出结果定向到“/output/destdir/”。 hbase
-
使用BulkLoad工具批量导入HBase数据 - MapReduce服务 MRS
使用BulkLoad工具批量导入HBase数据 操作场景 您可以按照自定义的方式,通过命令批量导入数据到HBase中。 您可以在“configuration.xml”文件中定义多个方式来批量导入数据。导入数据时可不创建索引。 列的名称不能包含特殊字符,只能由字母、数字和下划线组成。