检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
{ClassPath}表示工程jar包的存放路径，详细路径由用户指定，可参考在Linux环境中调测Spark应用章节中导出jar包的操作步骤。 命令举例： java -cp /opt/client/Spark2x/spark/conf:/opt/StructuredStreamingADScalaExample-1
已安装集群客户端。 如果ClickHouse与Kafka不在同一个集群需要建立跨集群互信，具体请参考配置跨Manager集群互信。 操作步骤 登录Kafka服务所在Manager页面，选择“系统 > 权限 > 用户 > 添加用户”，创建一个具有Kafka权限的人机用户，例如创建
目录赋予“755”权限），请用户关注授权后的安全问题。 创建访问Loader服务的用户，如果是“机机”用户需要下载keytab文件。 操作步骤 配置Loader shell客户端。 使用安装客户端的用户登录客户端所在节点。 执行以下命令，防止超时退出。 TMOUT=0 执行完本章
登录FusionInsight Manager系统，选择“集群 > 服务 > Loader > 更多 > 重启服务”，输入管理员密码重启Loader服务。 操作步骤 设置作业基本信息 登录“Loader WebUI”界面。 登录FusionInsight Manager系统，具体请参见访问集群Manager。
use表的权限，具体请参见ClickHouse用户及权限管理章节，为用户绑定对应角色。如果当前集群未启用Kerberos认证，则无需执行本步骤。 kinit 组件业务用户 例如，kinit clickhouseuser。 执行以下命令连接到要导入数据的ClickHouse实例节点。
Manager系统，选择“集群 > 待操作集群的名称 > 服务 > Loader > 更多 > 重启服务”，输入管理员密码重启Loader服务。 操作步骤 设置作业基本信息 登录“Loader WebUI”界面。 登录FusionInsight Manager系统，具体请参见访问FusionInsight
如果通过Manager界面操作，需要已登录MRS集群Manager界面，详情请参考访问MRS集群Manager。 如果当前退服DataNode节点，退服前需要进行健康检查，步骤如下。 使用客户端用户登录客户端安装节点，并切换到客户端安装目录。 如果是安全集群，需要使用hdfs用户进行权限认证。 source bigdata_env
'${db_user}'@'%' with grant option; flush privileges; 图4 为数据库用户赋权 为已有MRS集群创建RDS数据连接 该步骤指导用户为当前已有的MRS集群创建RDS数据连接。 登录MRS控制台，在导航栏选择“数据连接”。 单击“新建数据连接 ”。 参考表1配置相关参数。
无法保证正常。 可能原因 网络断连、硬件故障或操作系统执行命令缓慢。 NodeAgent进程内存不足。 NodeAgent进程故障。 处理步骤 检查网络是否断连、硬件是否故障或者操作系统执行命令缓慢。 在FusionInsight Manager页面，选择“运维 > 告警 > 告
会报错。 在MapReduce任务运行过程中禁止重启HDFS服务，否则可能会导致任务失败。 对于MapReduce访问多组件样例程序，操作步骤如下。 获取“user.keytab”、“krb5.conf”、“hbase-site.xml”、“hiveclient.properties”和“hive-site
参照ClickHouse客户端使用实践创建本地复制表和分布式表，导出时选择本地复制表。 确保没有出现ClickHouse相关告警。 操作步骤 准备操作 在ClickHouse的安装目录获取clickhouse-jdbc-*.jar包，将其保存在Loader服务主备节点的lib路
本地磁盘的配置进行性能调优。 具体包括以下配置项： 可用内存 CPU虚拟核数 物理CPU使用百分比 内存和CPU资源的协调 本地磁盘 操作步骤 如果您需要对参数配置进行调整，具体操作请参考修改集群服务配置参数。 可用内存 除了分配给操作系统、其他服务的内存外，剩余的资源应尽量分配给YARN。通过如下配置参数进行调整。
如果设置的作业需要使用指定YARN队列功能，该用户需要已授权有相关YARN队列的权限。 设置任务的用户需要获取该任务的执行权限，并获取该任务对应的连接的使用权限。 操作步骤 设置作业基本信息 登录“Loader WebUI”界面。 登录FusionInsight Manager系统，具体请参见访问集群Manager。
System.exit(job.waitForCompletion(true) ? 0 : 1); } 样例中所有zkQuorum对象需替换为实际ZooKeeper集群节点信息。 父主题： MapReduce访问多组件样例程序
单表或单分区只能关联一个Storage Policy，关联后不能删除Storage Policy，需要先解除二者的关联。 Storage Policy关联的对象信息不支持修改数据存储path的信息，例如：bucket、endpoint、root_path等信息。 Storage Policy支持进
使用直连模式从PostgreSQL导入数据时，可以将一个到达设定大小的文件分为几个独立的文件。 -inline-lob-limit 设定大对象数据类型的最大值。 -m或-num-mappers 启动n个map来并行导入数据，默认是4个，该值请勿高于集群的最大Map数。 -query，-e<statement>
System.exit(job.waitForCompletion(true) ? 0 : 1); } 样例中所有zkQuorum对象需替换为实际ZooKeeper集群节点信息。 父主题： MapReduce访问多组件样例程序
会报错。 在MapReduce任务运行过程中禁止重启HDFS服务，否则可能会导致任务失败。 对于MapReduce访问多组件样例程序，操作步骤如下。 获取“hbase-site.xml”、“hiveclient.properties”和“hive-site.xml”这三个配置文件
准备MRS应用开发用户 操作场景 开发用户用于运行样例工程。进行不同服务的组件开发时，需要赋予不同的用户权限。 操作步骤 登录FusionInsight Manager。 在FusionInsight Manager界面选择“系统 > 权限 > 角色 > 添加角色”。 填写角色的
如果设置的作业需要使用指定YARN队列功能，该用户需要已授权有相关YARN队列的权限。 设置任务的用户需要获取该任务的执行权限，并获取该任务对应的连接的使用权限。 操作步骤 设置作业基本信息 登录“Loader WebUI”界面。 登录FusionInsight Manager系统，具体请参见访问FusionInsight
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
