检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
Kafka角色实例所在节点IP地址，填写Broker角色实例其中任意一个的IP地址即可。 如果集群启用Kerberos认证，则端口需要修改为“21007”。 默认情况下，ZooKeeper的“clientPort”为“2181”。 父主题： 管理Kafka Topic
xml”、“hbase-site.xml”和用于安全认证的用户凭证文件放置到“src/main/resources”的目录下。 安全登录 请根据实际情况，修改“userName”为实际用户名，例如“developuser”。 在Windows环境下和Linux环境下请使用对应的路径获取方式。 private
第三方AD”，打开第三方AD配置页面。 检查配置项“AD IP地址”、“Ldap端口”、“绑定DN”、“绑定DN密码”这四项是否配置正确。 是，执行5。 否，执行3。 修改错误参数，单击“确定”。 选择“系统 > 权限 > 用户 > AD域用户”，单击“手工同步”，确认界面右上角是否提示“手工同步成功。”。 是，告警处理完毕。
CBO功能优化查询效率 操作场景 在Hive中执行多表Join时，Hive支持开启CBO（Cost Based Optimization），系统会自动根据表的统计信息，例如数据量、文件数等，选出合适计划提高多表Join的效率。Hive需要先收集表的统计信息后才能使CBO正确的优化。 CBO
keytab=<path_to_keytab> 其中<principal_name>表示用户使用的Kerberos用户的principal，如“test@<系统域名>”。<path_to_keytab>表示<principal_name>对应的keytab文件路径，如“/opt/auth/test/user
计算实例进程故障 处理步骤 检查HDFS服务状态。 在告警列表中，查看是否有“ALM-14000 HDFS服务不可用”告警产生。 是，执行2。 否，执行4。 参考ALM-14000 HDFS服务不可用告警帮助指导处理该告警。 在告警列表中，查看“ALM-45001 HetuEngine计算实例故障”告警是否清除。
查看服务器端保存路径是否有足够磁盘空间。 登录服务器端，查看当前保存路径下是否有足够磁盘空间。 是，执行11。 否，执行10。 删除多余文件，或在监控指标转储配置页面更改保存目录。然后检查告警是否恢复。 是，执行完毕。 否，执行11。 收集故障信息。 在FusionInsight Manager界面，选择“运维
“CPU”表示节点中服务可使用的最大CPU。 “Memory”表示节点中服务可使用的最大内存。 在图表区域，查看集群服务资源使用状态指标数据图表。 可通过“为图表添加服务”，将特定服务的静态服务资源数据添至图表，最多可选择12个服务。 管理单个图表的操作，可参见查看MRS集群资源监控指标。 查看静态资源（2
Spark Structured Streaming对接Kafka样例程序（Scala） 功能介绍 使用Structured Streaming，从kafka中读取广告请求数据、广告展示数据、广告点击数据，实时获取广告有效展示统计数据和广告有效点击统计数据，将统计结果写入kafka中。
WebUI”后的链接，进入HSConsole界面。 在“计算实例”页签，在待操作的实例所属租户所在行的“操作”列单击“配置”。 在“自定义配置”单击“增加”添加如下参数。 表1 容错执行参数 参数 取值示例 参数文件 描述 retry-policy TASK coordinator.config.properties
Load进行导数，在没整改前请配置FE“max_tolerable_backend_down_num”参数值为“1”，以提升导入数据可靠性。 建议低频攒批导入数据，平均单表导入批次间隔需大于30s，推荐间隔60s，一次导入1000~100000行数据。 父主题： Doris应用开发规范
Spark Structured Streaming对接Kafka样例程序（Scala） 功能介绍 使用Structured Streaming，从kafka中读取广告请求数据、广告展示数据、广告点击数据，实时获取广告有效展示统计数据和广告有效点击统计数据，将统计结果写入kafka中。
Spark Structured Streaming对接Kafka样例程序（Scala） 功能介绍 使用Structured Streaming，从kafka中读取广告请求数据、广告展示数据、广告点击数据，实时获取广告有效展示统计数据和广告有效点击统计数据，将统计结果写入kafka中。
client.HIndexAdmin中提供的方法来管理HIndexes。 该类提供了将索引添加到现有表的方法： 根据用户是否希望在添加索引操作期间构建索引数据，有两种不同的方法可将索引添加到表中： addIndicesWithData() addIndices() 代码样例 以下代码片段在com
Spark Structured Streaming对接Kafka样例程序（Scala） 功能介绍 使用Structured Streaming，从Kafka中读取广告请求数据、广告展示数据、广告点击数据，实时获取广告有效展示统计数据和广告有效点击统计数据，将统计结果写入kafka中。
Kafka角色实例所在节点IP地址，填写Broker角色实例其中任意一个的IP地址即可。 如果集群启用Kerberos认证，则端口需要修改为“21007”。 默认情况下，ZooKeeper的“clientPort”为“2181”。 父主题： 管理Kafka Topic
用户，例如developuser，并绑定2新建的角色。 使用developuser用户重新登录FusionInsight Manager，修改该用户初始密码。 配置运行环境网络 用于程序调测或运行的节点，需要与MRS集群内节点网络互通，同时配置hosts域名信息。 场景一：配置本
大数据集（大于1TB）的并行运算。在MapReduce程序中计算的数据可以来自多个数据源，如Local FileSystem、HDFS、数据库等。最常用的是HDFS，可以利用HDFS的高吞吐性能读取大规模的数据进行计算。同时在计算完成后，也可以将数据存储到HDFS。 HDFS和Spark的关系
进入executor的日志中搜索作业ID，查看报错信息。 日志路径：/var/log/Bigdata/executor/logs/exe.log 修改“/opt/executor/webapps/executor/WEB-INF/classes/log4j.properties”文件开启
比较“max.data.size”和“Xmx*0.65”的值的大小，较小的值乘以80%为ZooKeeper Znode容量的阈值，可适当修改这两项配置，增大阈值。 观察界面告警是否清除。 是，处理完毕。 否，执行8。 收集故障信息 在FusionInsight Manager界面，选择“运维
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
