数据湖探索 DLI-Spark2.4.x与Spark3.3.x版本在SQL队列的差异对比:新增支持解析“+Infinity”、“+INF”和“-INF”类型字符串的值

时间:2024-12-28 16:25:09

新增支持解析“+Infinity”、“+INF”和“-INF”类型字符串的值

  • 说明:
    • Spark2.4.x:当从定义为FloatType 或 DoubleType的JSON属性读取值时,Spark2.4.x仅支持解析“Infinity”和“-Infinity”。
    • Spark3.3.x:当从定义为FloatType 或 DoubleType的JSON属性读取值时,Spark3.3.x除了支持解析“Infinity”和“-Infinity”之外,还支持解析字符串“+Infinity”、“+INF”和“-INF”。
  • 升级引擎版本后是否对作业有影响:

    功能增强,无影响

support.huaweicloud.com/bulletin-dli/dli_bulletin_0015.html