检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
在IDEA界面左下方找到Terminal，单击进入终端，执行mvn clean install进行编译 当输出“BUILD SUCCESS”，表示编译成功，如下图所示。编译成功后将会在样例工程的target下生成含有“hcatalog-example-*.jar”包。 以上jar包名称仅供参考，具体名称以实际生成为主。
选择“现有集群”，选中一个运行中的集群并单击集群名称，进入集群信息页面。 单击“告警管理”。 选择“消息订阅规则 > 添加消息订阅规则”，进入添加消息订阅页面。 图1 添加消息订阅规则 配置消息订阅规则相关参数。 表1 消息订阅规则参数说明 参数 示例 参数说明 规则名称 mrs_alarm 用户自定义
对于可以压缩的数据，配置压缩算法可以有效减少磁盘的IO，从而达到提高性能的目的。 说明： 并非所有数据都可以进行有效压缩。例如一张图片的数据，因为图片一般已经是压缩后的数据，所以压缩效果有限。常用的压缩算法是SNAPPY，因为它有较好的Encoding/Decoding速度和可以接受的压缩率。
对于可以压缩的数据，配置压缩算法可以有效减少磁盘的IO，从而达到提高性能的目的。 说明： 并非所有数据都可以进行有效压缩。例如一张图片的数据，因为图片一般已经是压缩后的数据，所以压缩效果有限。常用的压缩算法是SNAPPY，因为它有较好的Encoding/Decoding速度和可以接受的压缩率。
0及之后版本在“主页”选择“下载客户端”）。 选择“更多 > 下载客户端 > 仅配置文件”。 此时生成的压缩文件包含所有服务的配置文件。 图1 下载客户端配置文件 配置相关参数。 MRS 3.3.1之前版本： 是否在集群的节点中生成配置文件？ 是，勾选“仅保存到如下路径”，单击“
流程如下所示。 安装Flume客户端。 配置Flume服务端和客户端参数。 查看Flume客户端收集日志。 停止及卸载Flume客户端。 图1 Flume使用流程 Flume模块介绍 Flume客户端/服务端由一个或多个Agent组成，而每个Agent是由Source、Chann
total += count; collector.collect(total); } } 应用代码 该段代码是流图定义代码，具体实现业务流程，另外，代码中窗口的触发时间使用了processing time。 1 2 3 4 5 6 7 8
选择“现有集群”，选中一个运行中的集群并单击集群名称，进入集群信息页面。 在集群基本信息页，单击“引导操作”。 单击“添加”，根据界面信息填写对应参数。 图1 添加引导操作 表2 参数描述 参数 示例 说明 名称 bootstrap_0 引导操作脚本的名称。 只能由数字、英文字符、空格、中划线和下划线组成，且不能以空格开头。
“Hive读写权限”：Hive数据表管理权限，可设置与管理已创建的表的数据操作权限。 Hive角色管理支持授予Hive管理员权限、访问表和视图的权限，不支持数据库的授权。 Hive管理员权限不支持管理HDFS的权限。 如果数据库中的表或者表中的文件数量比较多，在授权时可能需要等待一
“Hive读写权限”：Hive数据表管理权限，可设置与管理已创建的表的数据操作权限。 Hive角色管理支持授予管理员权限、访问库、表和视图的权限。 Hive管理员权限不支持管理HDFS的权限。 如果数据库中的表或者表中的文件数量比较多，在授权时可能需要等待一段时间。例如表的文件数量为1万时，可能需要等待2分钟。
“Hive读写权限”：Hive数据表管理权限，可设置与管理已创建的表的数据操作权限。 Hive角色管理支持授予Hive管理员权限、访问表和视图的权限，不支持数据库的授权。 Hive管理员权限不支持管理HDFS的权限。 如果数据库中的表或者表中的文件数量比较多，在授权时可能需要等待一
流程如下所示。 安装Flume客户端。 配置Flume服务端和客户端参数。 查看Flume客户端收集日志。 停止及卸载Flume客户端。 图1 Flume使用流程 Flume模块介绍 Flume客户端/服务端由一个或多个Agent组成，而每个Agent是由Source、Chann
worker.childopts，则该参数会与服务端参数worker.gc.childopts共同配置，但是后面的相同参数会将前面的覆盖掉，如上面图有两个-Xmx，-Xmx1G会覆盖掉-Xmx4096m。 如果配置了topology.worker.gc.childopts则服务端参数worker
第二次采集的数据中，第4列的数字是“rd_ios_new”，第8列的数字是“wr_ios_new”，第13列的数字是“tot_ticks_new”。 则上图中svctm值为： (19571460 - 19569526) / (1101553 + 28747977 - 1101553 - 28744856)
权限”，单击“创建自定义策略”，配置如下参数，并单击“确定”： 策略名称：填写策略名称，例如：doris-policy。 策略配置方式：选择“JSON视图”。 策略内容： { "Version": "1.1", "Statement": [ {
查询“healthMonitor.properties”关键字，找到该告警上报实例对应的健康检查配置项，记录“monitor.info”参数配置的接口或者脚本路径，如下图所示。 查看接口或者脚本中打印的日志，并修复对应问题。 等待5分钟，查看告警列表中，该告警是否已清除。 是，处理完毕。 否，执行9。 检查磁盘空间是否不足。
<value>true</value> </property> 执行以下命令创建Hive表。 可以在Hue UI里Hive面板里面直接输入以下的SQL语句。 图1 执行Hive SQL CREATE DATABASE test; CREATE TABLE IF NOT EXISTS `test`.`usr`
“允许”的安全组规则；若没有则需单击“添加规则”放开9022端口。 例如当前用户访问集群的地址为10.x.x.x，则添加的安全组规则为： 图1 配置安全组 关于安全组的具体配置可参考：配置安全组规则。 安全组中需要放开的IP地址为用户访问MRS集群的公网IP地址，如果当前网络为内
组件业务用户（如果集群未启用Kerberos认证（普通模式）请跳过该操作） spark-sql --master yarn 执行以下命令创建临时视图： CREATE TEMPORARY VIEW spark_doris_decimal USING doris OPTIONS( "table
e、Spark离线大规模分布式数据存储和计算，SparkStreaming、Flink流式数据计算，Presto交互式查询，Tez有向无环图的分布式计算框等Hadoop生态圈的组件，进行海量数据分析与查询。 HBase集群：HBase集群使用Hadoop和HBase组件提供一个稳
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
