数据湖探索 DLI-为什么Spark3.x的作业日志中打印找不到global_temp数据库:根因分析
根因分析
global_temp数据库是Spark3.x默认内置的数据库,是Spark的全局临时视图。
通常在Spark作业执行注册viewManager时,会校验该数据库在metastore是否存在,如果该数据库存在则会导致Spark作业执行失败。
因此当Spark3.x的作业日志中如果出现一条访问catalog查询该数据库,并提示数据库不存在是为了确保Spark作业正常运行,无需执行其他操作。
- 云日志采集的方法_日志分析_云日志服务-华为云
- 什么是Flink OpenSource SQL_数据湖探索_Flink OpenSource SQL
- 数据治理中心_数据开发_最佳实践_-华为云
- 什么是数据湖探索服务_数据湖探索DLI用途与特点
- 应用性能管理应用场景_应用性能监控_ 应用性能管理 APM-华为云
- 什么是Spark SQL作业_数据湖探索DLISpark SQL作业
- 什么是跨源连接-数据湖探索DLI跨源连接
- 数据治理中心_数据质量评估_质量规则和质量报告-华为云
- GaussDB性能_性能统计_高斯数据库性能-华为云
- GaussDB查版本命令_GaussDB命令参考_高斯数据库查版本命令-华为云