检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
周期性执行workflow类型任务的流程定义文件。 参数解释 “coordinator.xml”中包含的各参数及其含义，请参见表1。 表1 参数含义 参数 含义 frequency 流程定时执行的时间间隔 start 定时流程任务启动时间 end 定时流程任务终止时间 workflowAppUri
配置FlinkServer作业运行残留信息自动清理 操作场景 Flink任务异常停止时会在ZooKeeper、HDFS中残留目录，开启FlinkServer目录残留清理功能可以清理残留目录。 配置作业残留信息自动清理步骤 登录Manager页面。 选择“集群 > 服务 > Flink > 配置 > 全部配置”
org.apache.flink.yarn.YarnFlinkResourceManager (FlinkResourceManager.java:368) 父主题： Flink运维管理
credentials 回答 ZooKeeper使用系统命令kinit -R对票据进行刷新，当前MRS版本已经取消了该命令的功能，如需运行长任务，建议使用keytab方式完成鉴权功能。 在“客户端安装路径/ZooKeeper/zookeeper/conf/jaas.conf”配置文
rk集群性能做优化。 操作步骤 配置Driver内存。 Driver负责任务的调度，和Executor、AM之间的消息通信。当任务数变多，任务平行度增大时，Driver内存都需要相应增大。 您可以根据实际任务数量的多少，为Driver设置一个合适的内存。 将“spark-defaults
查看业务是否存在大SQL任务 在“计算实例”页签，展开对应租户下的实例，单击计算实例“WebUI”列的“LINK”，查看所有任务的运行情况。 在“Sort”列选择“Execution Time”对运行的任务进行排序，查看是否存在运行时间过长的任务（小时级的任务）。 是，执行10。 否，执行12。
#ip:tcp port native_dataSource_ip_list=ip:port,ip:port,ip:port 在Demo.java有三种连接JDBC的样例：节点的JDBC连接、banlancer的JDBC连接和tcp端口的banlancer的JDBC连接。 Demo
Topic监控 图5 Consumer监控 Kafka Eagle对接常见问题 问题现象： 无法获取Kafka CPU与内存监控信息日志提示。 java.io.IOException cannot be cast to javax.management.remote.JMXConnector
配置资源权限，详细配置请参见表1。 表1 设置角色 任务场景 角色授权操作 设置HDFS管理员权限 在“配置资源权限”的表格中选择“待操作集群的名称 > HDFS”，勾选“集群管理操作权限”。 说明： 设置HDFS管理员权限需要重启HDFS服务才可生效。 设置用户执行HDFS检查和HDFS修复的权限
注意：使用“--enable-az-aware”选项的前提是服务端开启了跨AZ特性，即服务端启动参数“az.aware.enable”为“true”,否则会执行失败。 “--bootstrap-server”方式由服务端生成副本分配方案，后续版本，社区将只支持这种方式来进行Top
表授权：不支持修改类权限（update、Alter、write、All）。 备份与恢复：由于ro表和rt表均由同一个Hudi源表映射的，备份其中一张表，另一张也会跟着备份，恢复也是同时恢复的，因此只需备份其中一张表即可。 组件版本： Hive：FusionInsight_HD_xxx，Hive内核版本3
数据老化。 考虑到如下两个场景： 场景1：如果需要在流场景中去删除老化的分区，只能停止流任务执行DDL命令去删除分区。 场景2：当前不支持批量的删除老化的分区。TTL现在支持在流任务或异步任务中去完成分区级数据老化。 父主题： Hudi TTL语法说明
如果服务端关闭了SSL配置，则需在客户端需也关闭SSL配置才能通信，操作为： cd 客户端安装目录/IoTDB/iotdb/conf vi iotdb-client.env 将“iotdb_ssl_enable”参数的值修改为“false”，保存并退出。 其中，服务端SSL配置，可登录FusionInsight
Sqoop导入数据到Hive表时打印如下报错日志： 查看Yarn上该Application对应的appattempt的Logs，在syslog中有如下任务日志： 回答 Hive中日志框架和Hadoop中的日志框架存在依赖冲突导致。需删除当前使用的Sqoop客户端目录中，Hive目录下的log4j-*-api-*
将用户添加到白名单，需要重启Kafka服务，这样会中断服务导致业务受影响，因此如果要采用这种方式，必须和业务侧确认后才能进行。 在FusionInsight Manager首页，选择“集群 > 待操作的集群名称 > 服务 > Kafka > 配置 > 全部配置 > Broker（角色） > 服务”，将该用户添加到“max
系统每30秒周期性检测ZooKeeper服务连接数状态，当检测到ZooKeeper实例连接数超出阈值（最大连接数的百分之八十）时产生该告警。 连接数小于阈值时，告警恢复。 告警属性 告警ID 告警级别 可自动清除 13001 严重 是 告警参数 参数名称 参数含义 ServiceName 产生告警的服务名称。 RoleName
当主备数据同步状态正常，告警恢复。 告警属性 告警ID 告警级别 是否自动清除 12039 紧急（MRS 3.3.1之前版本） 重要（MRS 3.3.1及之后版本） 是 告警参数 参数名称 参数含义 来源 产生告警的集群或系统名称。 服务名 产生告警的服务名称。 角色名 产生告警的角色名称。
查看业务是否存在大SQL任务 在“计算实例”页签，展开对应租户下的实例，单击计算实例“WebUI”列的“LINK”，查看所有任务的运行情况。 在“Sort”列选择“Execution Time”对运行的任务进行排序，查看是否存在运行时间过长的任务（小时级的任务）。 是，执行10。 否，执行12。
Flink常用的CLI如下所示： yarn-session.sh 可以使用yarn-session.sh启动一个常驻的Flink集群，接受来自客户端提交的任务。启动一个有3个TaskManager实例的Flink集群示例如下： bin/yarn-session.sh yarn-session.sh的其他参数可以通过以下命令获取：
Flink常用的CLI如下所示： yarn-session.sh 可以使用yarn-session.sh启动一个常驻的Flink集群，接受来自客户端提交的任务。启动一个有3个TaskManager实例的Flink集群示例如下： bin/yarn-session.sh yarn-session.sh的其他参数可以通过以下命令获取：
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
