检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
w databases”，过滤线程名包含“HiveServer2-Handler-Pool”的两条记录，第一条记录为开始编译时间，第二条记录为结束编译时间。 根据SQL变慢前后的审计记录可判断是否是HiveServer编译变慢。 图1 HiveServer正在运行的SQL 访问HDFS变慢
已超出阈值。此时，会出现上述错误。 图1 应用场景 解决措施： 方式一：推荐优化Spark Streaming应用程序中定义的批次时间，降低批次时间，可避免超过Kafka定义的阈值。一般建议以5-10秒/次为宜。 方式二：将Kafka的阈值调大，建议在FusionInsight
已超出阈值。此时，会出现上述错误。 图1 应用场景 解决措施： 方式一：推荐优化Spark Streaming应用程序中定义的批次时间，降低批次时间，可避免超过kafka定义的阈值。一般建议以5-10秒/次为宜。 方式二：将kafka的阈值调大，建议在MRS Manager中的K
告警参考处理无效。 问题现象 集群出现告警“ALM-43006 JobHistory进程堆内存使用超出阈值”并且按照指导处理以后，运行一段时间又会出现同样的告警。 原因分析 可能存在JobHistory内存泄露问题，需要安装相应的补丁修复。 处理步骤 适当调大JobHistory进程堆内存。
append：追加，例如对大于last-value指定的值之后的记录进行追加导入 lastmodified：最后的修改时间，追加last-value指定的日期之后的记录 --last-value 指定一个值，用于标记增量导入 --input-null-string 替换null字符串，如果没有指定，则字符串null将被使用。
Hive表trip_data有三个分区字段：骑行起始时间的年、骑行起始时间的年月、骑行起始时间的年月日。 例如一条骑行记录的起始时间为2018/5/11 9:40，那么这条记录会保存在分区trip_data/2018/201805/20180511下面。 对trip_data进行按时间维度统计汇总时，只需要对局部数据扫描，大大提升性能。
慢，使barrier在缓存中积压，快照的制作时间过长，导致window算子在规定时间内没有向CheckpointCoordinator报告快照制作完成，CheckpointCoordinator认为快照制作失败，如图2所示。 图1 时间监控信息 图2 关系图 回答 Flink引入
慢，使barrier在缓存中积压，快照的制作时间过长，导致window算子在规定时间内没有向CheckpointCoordinator报告快照制作完成，CheckpointCoordinator认为快照制作失败，如图2所示。 图1 时间监控信息 图2 关系图 回答 Flink引入
慢，使barrier在缓存中积压，快照的制作时间过长，导致window算子在规定时间内没有向CheckpointCoordinator报告快照制作完成，CheckpointCoordinator认为快照制作失败，如图2所示。 图1 时间监控信息 图2 关系图 回答 Flink引入
以上示例，加粗部分为TTL配置。该示例将example_table表中d时间列三年后的冷数据删除，d时间列一年后的冷数据转存到OBS。 TTL表达式只是一个简单的SQL表达式，里边包含了时间以及时间的间隔，例如： 数据存活的时间为date_time时间的3天之后。 TTL date_time + INTERVAL
partions set location指定为一个已有库的路径时，执行成功，有数据丢失风险。 Spark创建库时指定location路径和已有库路径一致时没有拦截，校验默认关闭。 spark未把.db路径加入黑名单保护列表会存在建表建分等指定location存在数据丢失风险。 spark
append：追加，比如对大于last-value指定的值之后的记录进行追加导入。 lastmodified：最后的修改时间，追加last-value指定的日期之后的记录。 --last-value 指定一个值，用于标记增量导入 --input-null-string 替换null字符串，如果没有指定，则字符串null将被使用。
NON ALIGN 支持值过滤 支持时间过滤 对齐时间查询。 UDF查询目前不支持对对齐时间序列“(Aligned Timeseries)”进行查询，当在SELECT子句中选择的序列中包含对齐时间序列时，会提示错误。 带“*”查询。 假定现在有时间序列“root.sg.d1.s1”和“root
A证书目录。 执行命令openssl x509 -noout -text -in server.crt，查看HA用户证书的生效时间与失效时间，查看目前时间是否在有效期内。 是，执行9。 否，执行5。 执行命令cd ${BIGDATA_HOME}/FusionInsight_Fli
当用户提交作业需要读写OBS时，提交作业程序会默认为用户添加访问OBS的临时accesskey和secretkey，但是临时accesskey和secretkey有过期时间。 如果需要运行像Flink和SparkStreaming这样的长时作业时，用户可通过“服务配置参数”选项框传入永久的accesskey和
WHERE SEGMENT.ID IN (1,2,3); 详细信息，请参阅DELETE SEGMENT by ID。 通过加载数据的时间删除 用户可基于特定的加载时间删除数据。 命令： DELETE FROM TABLE db_name.table_name WHERE SEGMENT.STARTTIME
Optimization，即基于代价的优化器。 其优化目标是： 在编译阶段，根据查询语句中涉及到的表和查询条件，计算出产生中间结果少的高效join顺序，从而减少查询时间和资源消耗。 Hive中实现CBO的总体过程如下： Hive使用开源组件Apache Calcite实现CBO。首先SQL语句转化成Hiv
解决执行ResourceManager主备倒换操作，偶现上报Yarn服务不可用告警，ResourceManager出现双备情况的问题。 解决任务长时间运行后日志丢失的问题。 解决Yarn内存泄漏，长时间运行导致ResourceManager主备倒换的问题。 解决Yarn资源抢占功能偶现不生效的问题。 解决Reso
应集群，单击“弹性伸缩”。 查看当前集群的弹性伸缩策略是否是关闭状态。 否，请跟业务方确认是否可以关闭，如果可以请关闭弹性伸缩，否则请另择时间进行补丁卸载。 是，弹性伸缩关闭，检查结束。 检查FusionInsight Manager是否有正在运行的任务 登录FusionInsight
正常并发运行时出现持续的主备倒换，导致YARN服务不可用。 回答 产生上述问题的原因是，full GC（GabageCollection）时间过长，超出了RM与ZK（ZooKeeper）之间定期交互时长的阈值，导致RM与ZK失联，从而造成RM主备倒换。 在多任务情况下，RM需要保
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
