检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
Spark应用开发常见问题 Spark常用API介绍 structured streaming功能与可靠性介绍 如何添加自定义代码的依赖包 如何处理自动加载的依赖包 运行SparkStreamingKafka样例工程时报“类不存在”问题 SparkSQL UDF功能的权限控制机制
查询ClickHouse数据 本章节介绍查询ClickHouse数据样例代码。 查询语句1：querySql1查询创建ClickHouse表创建的tableName表中任意10条数据；查询语句2：querySql2通过内置函数对创建ClickHouse表创建的tableName表中的日期字段取年月后进行聚合。
Flink DataStream样例程序 Flink DataStream样例程序开发思路 Flink DataStream样例程序（Java） Flink DataStream样例程序（Scala） 父主题： 开发Flink应用
HBase shell客户端在使用中有INFO信息打印在控制台导致显示混乱 用户问题 在使用HBase shell中会有INFO信息打印在控制台，导致显示混乱，用户在输入命令前需要按回车符清理控制台。如下图所示： 原因分析 HBase客户端中默认日志打印设置为“INFO,cons
Spark作业的Client模式和Cluster模式有什么区别？ 理解YARN-Client和YARN-Cluster深层次的区别之前先清楚一个概念：Application Master。 在YARN中，每个Application实例都有一个ApplicationMaster进程
默认无法对外部表（external）插入数据的，如需使用该功能，可以给数据源添加配置。 共部署情况 登录FusionInsight Manager，选择“集群 > 服务 > HetuEngine > 概览”，单击“HSConsole WebUI”的HSConsole链接进入计算实例界面。 然后选择“数据源
ORDER BY ORDER BY ORDER BY子句用于按一个或多个输出表达式对结果集排序。 ORDER BY expression [ ASC | DESC ] [ NULLS { FIRST | LAST } ] [, ...] 每个expression可以由输出列组成，也可以是按位置选择输出列的序号。
REWRITE HINT 提示可以与SELECT语句一起提供，用于使用指定的物化视图重写查询，这将优化查询，并有助于更快地执行它们。必须在查询开始时给出提示。目前支持两种类型的提示，如下所示： NOREWRITE 不会进行查询重写。格式为：/*+ NOREWRITE */ REW
DESCRIBE INPUT 语法 DESCRIBE INPUT statement_name 描述 列举预编译语句（prepared statement）的输入参数，以及参数位置，每个输入参数的类型。对于未确定的参数类型，会显示为unknown。 示例 准备一个预编译的语句，且
DESCRIBE OUTPUT 语法 DESCRIBE OUTPUT statement_name 描述 列举预编译语句（prepared statement）的输出列。 包括列名（或者别名），catalog，schema，表名，类型，类型的大小（in bytes）。 以及一个boolean值标识是否为别名。
EXPLAIN ANALYZE 语法 EXPLAIN ANALYZE [VERBOSE] statement 描述 执行一条SQL语句，并显示分布式执行计划，以及过程中每个操作的代价。 VERBOSE可选参数，带上这个参数意味着会显示更多详细信息和底层统计数据。这个统计信息不能保
adata。 语法 REFRESH CATALOG catalog_name 示例 登录FusionInsight Manager，选择“服务 > HetuEngine > 概览”，单击“HSConsole WebUI”后的HSConsole链接进入计算实例界面，然后选择“数据源
REFRESH TABLE 语法 REFRESH TABLE table_name 描述 用于刷新TABLE元数据缓存。 示例 refresh table fruit; REFRESH 父主题： HetuEngine辅助命令语法
datagen; 查看并修改CompiledPlan文件中算子并行度。 登录FusionInsight Manager，选择“集群 > 服务 > HDFS”，单击“NameNode Web UI”后的链接，选择“Utilities > Browse the file syste
SYNC_HIVE 本章节仅适用于MRS 3.5.0-LTS及之后版本。 命令功能 同步Hudi表（存储层中的Hudi数据目录）到Hive。 命令格式 call sync_hive(table => '[table]', tablePath => '[tablePath]') 参数描述
如何关闭MRS集群的cas认证，可以在集群外面的节点上面节点调用Impalad的queries接口，进行指标的获取操作？ 回答 登录Manager界面，选择“集群 > 服务 > Impala > 配置 > 全部配置 > Impalad（角色） > 自定义”，在“impalad.customized.confi
FE的查询连接端口，可以通过登录Manager，单击“集群 > 服务 > Doris > 配置”，查询Doris服务的“query_port”参数获取。 Doris FE实例IP地址可通过登录MRS集群的Manager界面，单击“集群 > 服务 > Doris > 实例”，查看任一FE实例的IP地址。
SQL语法兼容TIMESTAMP/DATE特殊字符 问题 在Spark 3.2.0社区版本之后，将不再支持TIMESTAMP(*)或DATE(*)的语法，其中*代表如下特殊时间字符： epoch today yesterday tomorrow now 默认只支持timestamp
Manager页面，选择“集群 > 服务 > ZooKeeper > 实例”，查看任意一个ZooKeeper角色实例的业务IP地址。例如获取到的IP为“192.168.20.36”。 clientPort：登录FusionInsight Manager页面，选择“集群 > 服务 > ZooKeeper
为已有的租户关联Doris服务和用户 在FusionInsight Manager页面，选择“租户资源”，在租户列表中选择需要操作的租户，选择“服务关联”页签，单击“关联服务”。 在弹出的页签中的“服务”选择“Doris”并按照业务需求配置其他参数，单击“确定”，关联Doris服务。 选择“用户
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
