数据湖探索 DLI-Spark 2.4.x与Spark 3.3.x版本在SQL队列的差异对比:不再支持混合使用年月字段和日时间字段

时间:2025-02-12 15:01:58

不再支持混合使用年月字段和日时间字段

  • 说明:
    • Spark2.4.x:单位列表间隔文字可以混合使用年月字段(YEAR 和 MONTH)和日时间字段(WEEK、DAY、...、MICROSECOND)。
    • Spark3.3.x:单位列表间隔文字不能混合使用年月字段(YEAR 和 MONTH)和日时间字段(WEEK、DAY、...、MICROSECOND)。提示无效输入。

      在Spark3.3.x版本中如果希望恢复到Spark2.4.x之前的使用方式,可以通过设置配置项spark.sql.legacy.interval.enabled为true来实现。

  • 升级引擎版本后是否对作业有影响:

    有影响。

support.huaweicloud.com/bulletin-dli/dli_bulletin_0015.html