检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
定了同一个文件，导致一个文件多次被上传。 处理步骤 问题1： 重新kinit一个用户并修改相应的配置参数。 问题2： 查看hadoop相关的配置项是否正确，查看spark的conf目录下的core-site.xml，hdfs-site.xml，yarn-site.xml，mapred-site
WebUI”右侧，单击URL链接，访问KafkaUI的页面。 单击“Create Topic”进入创建Topic页面。在弹出的页面中参考表1填写信息，单击“Create”，完成Topic创建。 表1 创建Topic信息 参数名称 参数描述 备注 Topic Topic的名称，只能包含英文字母、数字、中划线和下划线，且不能多于249个字符。
在ResourceManager(主)的WebUI界面中，单击提交的MapReduce任务，在打开的页面中查看诊断信息，根据诊断信息再采取相应的措施。 或者也可以通过查看MapReduce日志了解应用运行情况，并根据日志信息调整应用程序。 父主题： MapReduce应用开发常见问题
具体操作：在公有云管理控制台，选择“基本信息 > Yarn监控信息”进入Web界面，单击提交的MapReduce任务，在打开的页面中查看诊断信息，根据诊断信息再采取相应的措施。 或者也可以通过查看MapReduce日志了解应用运行情况，并根据日志信息调整应用程序。 父主题： MapReduce应用开发常见问题
userName为准备HBase应用开发用户中开发用户名 thriftIp为安装了thriftserver2的节点的IP地址 执行如下命令创建表名为example的HBase表。 source /opt/client/bigdata_env kinit 用户名 echo "create 'example'
Kerberos认证的集群时，则文件的权限必须允许提交程序的用户访问。 处理步骤 以root用户登录集群的Master节点。 执行如下命令查看用户自定义配置文件所在父目录的权限。 ll <文件所在路径的父目录路径> 进入NFS盘待访问文件所在目录，修改用户自定义配置文件所在父目录的权限为755。
使用Tez 访问Tez WebUI查看任务执行结果 Tez常用配置参数 Tez日志介绍 Tez常见问题
在Linux中调测程序 调测OpenTSDB应用 查看OpenTSDB应用调测结果 父主题： 调测OpenTSDB应用
登录MRS集群 查看MRS集群主备管理节点 登录MRS集群节点 父主题： MRS集群运维
Manager（MRS 3.x及之后版本）。 选择“集群 > 待操作集群的名称 > 服务 > Hive > HiveServer”。 在HiveServer列表里选择设置租约隔离的HiveServer，选择“HiveServer > 实例配置 > 全部配置”。 在“全部配置”界面的右上角搜索“hive
HDFS > 服务配置”，将“参数类别”设置为“全部配置”。 搜索并查看“dfs.storage.policy.enabled”的参数值是否为“true”，如果不是，修改为“true”，并单击“保存配置”，重启HDFS。 查看代码。 如下是代码片段，详细代码请参考com.huawei.bigdata
--ssl.truststore.password xxx //10.96.101.32:9093表示kafka服务器的IP:port，XXX表示FusionInsight相应的版本号，xxx表示密码。 Kerberos+SSL模式配置 完成上文中Kerberos和SSL各自的服务端和
| 3 | 执行以下命令创建目的表t2： create table t2(col1 int,col2 int); 本样例工程中创建的表使用Hive默认的存储格式，暂不支持指定存储格式为ORC的表。 使用Yarn客户端提交任务。 yarn --config
<password>，具体操作可参考认证和加密，表3中的配置项会被默认赋值，用户也可以手动配置。 表3 参数描述 参数 参数值示例 描述 security.ssl.keystore ${path}/flink.keystore keystore的存放路径，“flink.keystore”表示用户通过generate_keystore
登录MRS管理控制台。 选择 “现有集群” ，选中需要升级Master节点规格的集群并单击集群名，进入集群信息页面。 查看集群状态，确保集群状态为“运行中”。 在“节点管理”页签查看各节点状态，确保集群所有节点的状态为“运行中”。 登录Manager，进入集群管理页面，具体请参见访问MRS集群Manager。
在Linux客户端上，使用“kafka-acls.sh”脚本进行查看和设置。 操作场景 该任务指导Kafka管理员根据业务需求，为其他使用Kafka的系统用户授予相关Topic的特定权限。 Kafka默认用户组信息表所示。 用户组名 描述 kafkaadmin Kafka管理员用
调测Flink应用 编译并调测Flink应用 查看Flink应用调测结果 父主题： Flink开发指南（安全模式）
调测Flink应用 编译并调测Flink应用 查看Flink应用调测结果 父主题： Flink开发指南（普通模式）
数据，并注入到Window算子中。 window算子每隔1秒钟统计一次最近4秒钟内数据数量。 每隔1秒钟将统计结果打印到终端。具体查看方式请参考查看Flink应用调测结果。 每隔6秒钟触发一次checkpoint，然后将checkpoint的结果保存到HDFS中。 父主题： Flink开启Checkpoint样例程序
数据，并注入到Window算子中。 window算子每隔1秒钟统计一次最近4秒钟内数据数量。 每隔1秒钟将统计结果打印到终端。具体查看方式请参考查看Flink应用调测结果。 每隔6秒钟触发一次checkpoint，然后将checkpoint的结果保存到HDFS中。 父主题： Flink开启Checkpoint样例程序
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
