检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
reduceByKey((x, y) => x, numPartitions).map(_._1) 这个过程比较耗时，尤其是数据量很大时，建议不要直接对大文件生成的RDD使用。 join() : (RDD[(K, V)], RDD[(K, W)]) => RDD[(K, (V, W))]，作用是将两个RDD通过key做连接。
'SPATIAL_INDEX.mygeosot.sourcecolumns'='longitude, latitude'); 准备数据 准备数据文件1：geosotdata.csv timevalue,longitude,latitude 1575428400000,116.285807
'SPATIAL_INDEX.mygeosot.sourcecolumns'='longitude, latitude'); 准备数据 准备数据文件1：geosotdata.csv timevalue,longitude,latitude 1575428400000,116.285807
Client返回写入失败的数据，是不会自动重试的，仅仅会告诉接口调用者哪些数据写入失败了。对于写入失败的数据，一定要做一些安全的处理，例如可以考虑将这些失败的数据，暂时写在文件中，或者，直接缓存在内存中。 正确示例： private List<Row> errorList = new ArrayList<Row>();
ce和FlinkServer。 FlinkResource：提供客户端配置管理，是必须安装的角色。包括供客户端下载使用的原始lib包和配置文件，以及FlinkServer提交作业所依赖的原始lib包。无实体进程，作业运行过程不依赖FlinkResource。 FlinkServe
执行程序Jar包或sql文件地址。 约束限制： 不涉及 取值范围： 最多为1023字符，不能包含;|&>,<'$特殊字符，且不可为空或全空格。 文件可存储于HDFS或者OBS中，不同的文件系统对应的路径存在差异。 OBS：以“obs://”开头。不支持KMS加密的文件或程序。 HDFS：以“/”开头。
pace String 参数解释： 可用硬盘空间。单位GB。 取值范围： 不涉及 network_read String 参数解释： 网络读取速度。单位Byte/s。 取值范围： 不涉及 network_write String 参数解释： 网络写入速度。单位Byte/s。 取值范围：
选择客户端类型：选择“完整客户端”。 选择平台类型：默认勾选即可，例如“x86_64”。 勾选“仅保存到如下路径”，使用默认保存路径，文件生成后将保存在集群主OMS节点的“/tmp/FusionInsight-Client”目录下。 图3 下载集群客户端提示框 单击“确定”后，等待客户端软件生成成功。
约束限制： 不涉及 取值范围： 不涉及 默认取值： default archive_path 否 String 参数解释： SQL执行结果的转储文件夹。只有select语句才会转储查询的结果。当前仅支持转储到OBS中。 约束限制： 不涉及 取值范围： 不涉及 默认取值： 不涉及 响应参数
个用户可指定哪些用户允许查看自己应用程序的运行状态或者控制应用程序。此外，MRS集群管理员可指定队列管理员和集群系统管理员。 动态更新配置文件。MRS集群管理员可根据需要动态修改配置参数以实现在线集群管理。 Capacity Scheduler中每个队列可以限制资源使用量。队列间
MRS_Spark_ClientConfig.tar 由于不兼容老版本客户端，建议用户获取与服务端集群相同版本的客户端安装包进行安装部署。 进入解压文件夹，即“MRS_Spark_ClientConfig”，执行下列命令安装客户端 sh install.sh /opt/client 其中“
选择客户端类型：选择“完整客户端”。 选择平台类型：默认勾选即可，例如“x86_64”。 勾选“仅保存到如下路径”，使用默认保存路径，文件生成后将保存在集群主OMS节点的“/tmp/FusionInsight-Client”目录下。 图3 下载集群客户端提示框 单击“确定”后，等待客户端软件生成成功。
ClickHouse应用程序运行完成后，可通过以下方式查看程序运行情况： 通过运行结果查看程序运行情况。 通过ClickHouse日志获取应用运行情况，即logs目录下的日志文件：clickhouse-example.log。 运行clickhouse-examples的完整样例后，控制台显示部分运行结果如下： Connected
选择客户端类型：选择“完整客户端”。 选择平台类型：默认勾选即可，例如“x86_64”。 勾选“仅保存到如下路径”，使用默认保存路径，文件生成后将保存在集群主OMS节点的“/tmp/FusionInsight-Client”目录下。 图3 下载集群客户端提示框 单击“确定”后，等待客户端软件生成成功。
可通过以下方式查看程序运行情况： 通过运行结果查看程序运行情况。 通过ClickHouse日志获取应用运行情况，即“logs”目录下的日志文件：clickhouse-example.log。 运行clickhouse-examples的完整样例后，控制台显示部分运行结果如下： Connected
ClickHouse应用程序运行完成后，可通过以下方式查看程序运行情况： 通过运行结果查看程序运行情况。 通过ClickHouse日志获取应用运行情况，即logs目录下的日志文件：clickhouse-example.log。 运行clickhouse-examples的完整样例后，控制台显示部分运行结果如下： Connected
可通过以下方式查看程序运行情况： 通过运行结果查看程序运行情况。 通过ClickHouse日志获取应用运行情况，即“logs”目录下的日志文件：clickhouse-example.log。 运行clickhouse-examples的完整样例后，控制台显示部分运行结果如下： Connected
ger策略，通过之前Hive权限插件的方式，给角色添加权限，然后把角色赋予对应用户。如果HDFS Ranger策略可以匹配到Hive库表的文件或目录权限，则优先使用HDFS Ranger策略。 Ranger策略中的URL策略是hive表存储在obs上的场景涉及，URL填写对象在o
key的角色，以分担group key中热点的负担。bucket key使Job具有可伸缩性来解决不同聚合中的数据倾斜/热点。 【示例】 资源文件配置： table.optimizer.distinct-agg.split.enabled: true table.optimizer.distinct-agg
LECT和DATA_DEFINITION等类型，匹配到不同的资源组，分配不同的资源来执行查询。 启用资源组 在创建计算实例的时候，增加参数文件“resource-groups.json”的自定义配置参数，具体操作请参见3.e。 资源组属性 资源组属性配置请参见表2。 表2 资源组属性
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
