检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
IAM用户权限策略及同步MRS后权限对比请参考表1，Manager对应默认权限说明请参考MRS集群默认权限信息说明。 表1 IAM权限策略与MRS权限同步映射 策略类别 IAM策略 同步后用户在MRS对应默认权限 是否有权限执行同步操作 是否有权限提交作业 细粒度 MRS ReadOnlyAccess Manager_viewer
该参数未配置时为非安全Kafka。 如果需要配置SSL，truststore.jks文件生成方式可参考“Kafka开发指南 > 客户端SSL加密功能使用说明”章节。 四种类型实际命令示，以ReadFromKafka为例，集群域名为“HADOOP.COM”： 命令1： bin/flink run --class com
败的情况。 当前IAM用户名中存在空格时（例如admin 01），不支持添加作业。 单击“作业管理”，在作业列表界面单击“添加”。 “作业类型”选择“Flink”并参考表1配置Flink作业信息。 图1 添加Flink作业 表1 作业配置信息 参数 描述 示例 作业名称 作业名称
进入“弹性云服务器”页面，选择“关机”。在弹窗中勾选“强制关机”，单击“是”。 选择“节点管理”，单击对应节点组“操作”列的“缩容”，进入缩容页面。 “缩容类型”选择“指定节点缩容”，勾选待缩容节点。 勾选“我已经阅读上述信息，并了解具体影响。”并单击“确定”。 单击“组件管理”观察各个组件是否存
MRS支持的API授权项请参见权限策略和授权项。 如表1所示，包括了MRS的所有默认系统策略。 表1 MRS系统策略 策略名称 描述 策略类别 MRS FullAccess MRS管理员权限，拥有该权限的用户可以拥有MRS所有权限。 细粒度策略 MRS CommonOperations
MRS 2.x及之前版本： 在MRS Manager界面，单击“服务管理”。 单击服务列表中指定的服务名称。 单击“服务配置”。 在“参数类别”选择“全部配置”。 图2 服务全部配置 在左侧导航栏选择“自定义”，Manager将显示当前组件的自定义参数。 自定义参数支持服务级别与角色级别，请根据业务实际需要选择。
告警清除。 该告警仅适用于MRS 3.5.0及之后版本。 告警属性 告警ID 告警级别 是否可自动清除 19036 紧急 是 告警参数 类别 参数名称 参数含义 定位信息 来源 产生告警的集群名称。 服务名 产生告警的服务名称。 角色名 产生告警的角色名称。 主机名 产生告警的主机名。
文件的配置格式为key: value。 例：taskmanager.heap.size: 1024mb 注意配置项key:与value之间需有空格分隔。 配置参数类别介绍 本章节介绍如下参数配置： JobManager & TaskManager： JobManager和TaskManager是Flin
1及之后版本。 告警属性 告警ID 告警级别 是否可自动清除 19033 紧急：默认阈值为2000 重要：默认阈值为1600 是 告警参数 类别 参数名称 参数含义 定位信息 来源 产生告警的集群名称。 服务名 产生告警的服务名称。 角色名 产生告警的角色名称。 主机名 产生告警的主机名。
可以增量Checkpoint的状态后端，除了适合于FsStateBackend的场景，还适用于超大状态的场景。 表1 Flink状态后端 类别 MemoryStateBackend FsStateBackend RocksDBStateBackend 方式 Checkpoint数据直接返回给Master节点，不落盘
储，Flink依赖于state backend，作业的重启依赖于重启策略，用户可以对这两部分进行配置。配置项包括state backend类型，存储路径，重启策略等。 Kerberos-based Security： Flink安全模式下必须配置Kerberos相关配置项，配置项
on.sh脚本执行时添加上传目录，例如在执行▪命令4：之前，应首先执行yarn-session.sh -t config/ ***。 四种类型实际命令示例，以ReadFromKafka为例，集群域名为“HADOOP.COM”： 命令1： bin/flink run --class
插入空集后数据不会覆盖的问题。 解决conv函数使用多组数据，第一组正常后续数据为空值也不报错的问题。 Hive分区查询支持varchar类型下推. Hive支持对自读自写的SQL进行拦截。 Hive需要把.db库加入数据保护黑名单中防止创建表location指定路径到库后导致删表后库数据丢失。
添加角色”创建一个角色，并根据主集群HBase源数据表的权限，为角色添加备数据表的相同权限。 选择“系统 > 权限 > 用户 > 添加用户”创建一个用户，根据业务需要选择用户类型为“人机”或“机机”，并将用户加入创建的角色。使用新创建的用户，访问备集群的HBase容灾数据。 主集群HBase源数据表修改权限时，如果
添加角色”创建一个角色，并根据主集群HBase源数据表的权限，为角色添加备数据表的相同权限。 选择“系统 > 权限 > 用户 > 添加用户”创建一个用户，根据业务需要选择用户类型为“人机”或“机机”，并将用户加入创建的角色。使用新创建的用户，访问备集群的HBase容灾数据。 主集群HBase源数据表修改权限时，如果
如，若Curl仅支持TLSv1协议，修改方法如下。 登录MRS Manager页面，单击“服务管理 > HDFS > 服务配置”，在“参数类别”选择“全部配置”，在“搜索”框里搜索“hadoop.ssl.enabled.protocols”，查看参数值是否包含“TLSv1”，若不包含，则在配置项“hadoop
勾选“ClickHouse管理员权限”，单击“确定”操作结束。 选择“系统 > 权限 > 用户”，单击“添加用户”，进入添加用户页面。 “用户类型”选择“人机”，在“密码”和“确认密码”参数设置该用户对应的密码。 用户名：添加的用户名不能包含字符“-”，否则会导致认证失败。 密码：设置的密码不能携带“$”、“
<service> <domain>，其中<brokers>指获取元数据的Kafka地址，<subscribe-type>指Kafka订阅类型（一般为subscribe，代表订阅指定的topic），<topic>指读取Kafka上的topic名称，<protocol>指安全访问协
对于YARN部署的Spark，将spark.authenticate配置为真会自动处理生成和分发共享密钥。每个应用程序会独占一个共享密钥。 对于其他类型部署的Spark，应该在每个节点上配置Spark参数spark.authenticate.secret。所有Master/Workers和应用程序都将使用该密钥。
对于YARN部署的Spark，将spark.authenticate配置为真会自动处理生成和分发共享密钥。每个应用程序会独占一个共享密钥。 对于其他类型部署的Spark，应该在每个节点上配置Spark参数spark.authenticate.secret。所有Master/Workers和应用程序都将使用该密钥。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
