检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
高可用HA部署架构 MRS服务提供了基于ELB的HA部署架构，可以将用户访问流量自动分发到多台后端节点，扩展系统对外的服务能力，实现更高水平的应用容错。如图3所示，客户端应用请求集群时，使用ELB（Elastic Load Balance）来进行流量分发，通过ELB的轮询机制，写不同节点上的本地表（Local
r服务停止工作，也不影响用户通过同一个客户端接口连接其他正常的JDBCServer服务。 多主实例模式相比主备模式的HA方案，优势主要体现在对以下两种场景的改进。 主备模式下，当发生主备切换时，会存在一段时间内服务不可用，该时间JDBCServer无法控制，取决于Yarn服务的资源情况。
shuffle(); Rebalancing (Round-robin partitioning)：基于round-robin对元素进行分区，使得每个分区负载均衡。对于存在数据倾斜的性能优化是很有用的。 dataStream.rebalance(); Rescaling：以round-robin的
Streaming常用接口 Spark Streaming中常见的类有： JavaStreamingContext：是Spark Streaming功能的主入口，负责提供创建DStreams的方法，入参中需要设置批次的时间间隔。 JavaDStream：是一种代表RDDs连续序列的数据类型，代表连续数据流。
haclusterX.remotenn1”和“dfs.namenode.rpc-address.haclusterX.remotenn2”不区分主备NameNode。NameNode实例的业务IP可登录FusionInsight Manager页面，选择“集群 > 服务 > HDFS >
如果下载到服务器或远端节点，请在使用完成后及时删除，避免认证凭据泄漏。 浏览器：下载到本地电脑。 服务器端：下载到集群的主OMS节点上。 文件生成后默认保存在主OMS节点“/tmp/FusionInsight-Keytab/”路径。如果此路径不存在，会创建此路径。如果存在认证凭据
如何处理HetuEngine数据源丢失问题 问题 登录客户端查看HSConsole界面对接的数据源，数据源丢失。 回答 数据源丢失可能原因是DBservice主备倒换或数据库连接数使用率超过阈值造成。 用户可以登录FusionInsight Manager页面查看告警信息。 根据告警指导清除DBService告警，问题即可解决。
数据库异常。 处理步骤 检查主备管理节点的数据库状态。 以root用户分别登录主备管理节点，用户密码为安装前用户自定义，请咨询系统管理员，执行su - ommdba命令切换到ommdba用户，执行gs_ctl query命令。查看回显是否显示以下信息。管理节点的主备状态及对应IP地址可在FusionInsight
2.2补丁安装后，需要重启OMS服务。 使用root用户登录主备OMS节点，切换至omm用户，执行命令sh ${BIGDATA_HOME}/om-0.0.1/sbin/restart-oms.sh重启OMS服务。 主备OMS节点都需要重启。 MRS 1.9.2.2补丁安装后，需要
ClickHouse概述 ClickHouse表引擎介绍 表引擎在ClickHouse中的作用十分关键，不同的表引擎决定了： 数据存储和读取的位置 支持哪些查询方式 能否并发式访问数据 能不能使用索引 是否可以执行多线程请求 数据复制使用的参数 其中MergeTree和Distr
集群无法对外提供Storm服务，用户无法执行新的Storm任务。 可能原因 Kerberos集群故障。 ZooKeeper集群故障或假死。 Storm集群中主备Nimbus状态异常。 处理步骤 检查Kerberos集群状态（普通模式集群跳过此步骤） 在FusionInsight Manager管理界面，选择“集群
集群无法对外提供Storm服务。 用户无法执行新的Storm任务。 可能原因 Kerberos组件故障 ZooKeeper组件故障或假死 Storm集群中主备Nimbus状态异常 处理步骤 检查Kerberos组件状态。未启用Kerberos认证的集群无需检查Kerberos状态，请执行2。 登
制失效。一旦主NameNode故障，则整个HDFS服务将不可用。 可能原因 备NameNode被停止。 备NameNode实例运行状态异常。 备NameNode合并新的FsImage失败。 备NameNode数据目录空间不足。 备NameNode推送FsImage到主NameNode失败。
产生告警的集群或系统名称。 服务名 产生告警的服务名称。 角色名 产生告警的角色名称。 主机名 产生告警的主机名。 对系统的影响 可能引起Manager主备倒换。Manager和组件WebUI认证服务不可用，无法对Web上层服务提供安全认证和用户管理功能，可能引起无法登录Manager和组件的WebUI。
脚本运行过程中会重启controller服务，同步Yarn的配置，并重启主备ResourceManager实例。 重启controller服务时，无法登录和操作FusionInsight Manager。 重启主备ResourceManager实例后，Yarn组件以及依赖Yarn的组件会出现短暂的服务不可用告警。
产生告警的集群名称。 服务名 产生告警的服务名称。 角色名 产生告警的角色名称。 主机名 产生告警的主机名。 对系统的影响 用户HA证书文件已经失效，会导致主备模式下FlinkServer将无法正常对外提供服务，FlinkServer提交Flink作业功能无法正常使用。 可能原因 用户HA证书文件失效。
查看JournalNode节点网络是否可达。 在MRS集群详情页面，单击“组件管理 > HDFS > 实例”，查看主NameNode节点的业务IP地址。 登录主NameNode节点。 使用ping命令检查主NameNode与该JournalNode之间的网络状况，是否有超时或者网络不可达的情况。 ping
登录MRS管理控制台页面，选择“现有集群”，查看MRS集群运行状态是否正常。 是，执行3。 否，如果MRS集群状态异常或正在创建中，或集群正在发生主备倒换，请先排查集群故障、或等待集群创建完成、或集群主备倒换完成后再尝试访问Manager。 检查当前用户的权限配置是否正常，是否有访问Manager的权限。 具体请参考创建MRS操作用户配置用户。
务的安装目录。 执行sh sbin/status-dbserver.sh命令查看DBService的主备HA进程状态，状态是否查询成功。 是，执行3.c。 否，执行4。 查看主备HA进程是否都处于abnormal状态。 是，执行3.d。 否，执行4。 单击“组件管理 > DBService
Manager首页，选择“集群 > 待操作集群的名称 > 服务 > HDFS > 实例”，查看主NameNode节点的业务IP地址。 以root用户登录主NameNode节点，用户密码为安装前用户自定义，请咨询系统管理员。 使用ping命令检查主NameNode与该JournalNode之间的网络状况，是否有超时或者网络不可达的情况。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
