检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
速度以及任务执行的效率。 以下配置均可在客户端的“conf/flink-conf.yaml”配置文件中进行修改适配，默认已经是相对较优解，请谨慎修改，防止性能下降。 “taskmanager.network.netty.num-arenas”： 默认是“taskmanager.n
mportTsv工具之前未建表，直接运行该工具，将会在创建表时创建索引，并在生成用户数据的同时生成索引数据。 前提条件 已安装客户端，具体请参考安装客户端章节。 已根据业务需要创建具有相应权限的组件业务用户。“机机”用户需要下载keytab文件，“人机”用户第一次登录时需修改密码。
mportTsv工具之前未建表，直接运行该工具，将会在创建表时创建索引，并在生成用户数据的同时生成索引数据。 前提条件 已安装客户端，具体请参考安装客户端章节。 已根据业务需要创建具有相应权限的组件业务用户。“机机”用户需要下载keytab文件，“人机”用户第一次登录时需修改密码。
根据表中数据的key值去HBase指定表中做查询。 把相关的数据记录相加后重新写入HBase表。 创建MRS集群 购买一个MRS Spark集群，详情请参见购买自定义集群。 本文以购买的MRS 3.1.5版本的集群为例，组件包含Spark2x、Hive、HBase组件，集群开启了Kerberos认证。
配置SSL传输，用户主要在客户端的“flink-conf.yaml”文件中做如下配置： 打开SSL开关和设置SSL加密算法，配置参数如表2所示，请根据实际情况修改对应参数值。 表2 参数描述 参数 参数值示例 描述 security.ssl.enabled true 打开SSL总开关 akka
步骤4：运行作业并查看结果：运行程序并查看数据分析结果。 步骤1：创建MRS集群 创建并购买一个包含有Kafka组件的MRS集群，详情请参见购买自定义集群。 本文以购买的MRS 3.1.0版本的集群为例，组件包含Hadoop、Kafka组件，集群未开启Kerberos认证。
hive/warehouse/component_test3 --fields-terminated-by ',' -m 1 更多参数介绍请参见Sqoop常用命令及参数介绍。 表1 参数说明 参数 说明 --connect 指定JDBC连接的URL，格式为：jdbc:mysql:
据源”页面填写参数。 配置“基本配置”，填写数据源名称，选择数据源类型“JDBC > Oracle”。 配置“Oracle配置”，参数配置请参考表1 Oracle配置。 表1 Oracle配置 参数 描述 取值样例 驱动名称 选择2中已提前上传的待使用的Oracle驱动，格式为ojdbcxxx
名和IP地址请保持一一对应。 未安装客户端时： Linux环境已安装JDK，版本号需要和IDEA导出Jar包使用的JDK版本一致。 当Linux环境所在主机不是集群中的节点时，需要在Linux环境所在节点的hosts文件中设置主机名和IP地址映射。主机名和IP地址请保持一一对应。
步骤4：运行作业并查看结果：运行程序并查看数据分析结果。 步骤1：创建MRS集群 创建并购买一个包含有Spark2x、Kafka组件的MRS集群，详情请参见购买自定义集群。 本文以购买的MRS 3.1.0版本的集群为例，集群未开启Kerberos认证。 集群购买成功后，在MRS集群的任一节点
ne客户端查询表数据。 步骤1：创建MRS集群 创建一个包含有HBase、HetuEngine、Hive、IoTDB组件的MRS集群，详情请参见购买自定义集群。 本文以自定义购买的MRS 3.2.0-LTS.1版本的集群为例，集群已开启Kerberos认证。 集群购买成功后，在M
main方法提供建立一个MapReduce job，并提交MapReduce作业到Hadoop集群。 代码样例 下面代码片段仅为演示，具体代码请参见com.huawei.bigdata.mapreduce.examples.MultiComponentExample类 样例1：类Mu
安装Grafana的Linux节点需要与MRS集群具有相同的“可用区”、“虚拟私有云”和“安全组”。 步骤1：创建MRS集群 创建一个包含有IoTDB组件的MRS集群，详情请参见购买自定义集群。 本文以自定义购买的MRS 3.3.0-LTS.1版本的集群为例，集群已开启Kerberos认证。 集群购买成功后，在M
flume/conf/”下。 验证日志是否传输成功。 以具有HDFS组件管理权限的用户登录FusionInsight Manager，具体请参见访问FusionInsight Manager（MRS 3.x及之后版本）。在FusionInsight Manager界面选择“集群 >
flume/conf/”下。 验证日志是否传输成功。 以具有HDFS组件管理权限的用户登录FusionInsight Manager，具体请参见访问集群Manager。在FusionInsight Manager界面选择“集群 > 待操作集群的名称 > 服务 > HDFS”，单击
令导入环境变量，直接运行命令即可。 格式如下所示： yarn [--config confdir] COMMAND 其中COMMAND内容请参考表1。 其中版本号8.1.2.2为示例，具体以实际环境的版本号为准。 表1 常用Command描述 COMMAND 描述 resourcemanager
停止作业。 status 查询作业状态。 命令参考 sqoop2-shell有两种获取登录认证信息的方式，第一种通过配置文件获取，具体配置项请参考使用sqoop-shell工具导入数据到HDFS、使用sqoop-shell工具导入数据到HBase；第二种方式则使用参数直接提供认证信
停止作业。 status 查询作业状态。 命令参考 sqoop2-shell有两种获取登录认证信息的方式，第一种通过配置文件获取，具体配置项请参考开源sqoop-shell工具使用示例（SFTP - HDFS）、开源sqoop-shell工具使用示例（Oracle - HBase）
令导入环境变量，直接运行命令即可。 格式如下所示： yarn [--config confdir] COMMAND 其中COMMAND内容请参考表1。 其中版本号8.1.0.1为示例，具体以实际环境的版本号为准。 表1 常用Command描述 COMMAND 描述 resourcemanager
的表创建、删除以及数据的插入、查询等操作。 创建MRS ClickHouse集群 购买一个包含有ClickHouse组件的MRS集群，详情请参见购买自定义集群。 本文以购买的MRS 3.2.0-LTS.1版本的集群为例，组件包含ClickHouse组件，集群开启Kerberos认证。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
