数据湖探索 DLI-Spark2.4.x与Spark3.3.x版本在SQL队列的差异对比:Spark SQL支持Char/Varchar类型

时间：2024-12-28 16:25:09

说明：
- Spark2.4.x：在Spark2.4.x版本中，Spark SQL表字段不支持Char/Varchar类型，当指定为Char/Varchar类型时会强制转换为String类型。
- Spark3.3.x：Spark SQL表字段支持CHAR/CHARACTER和VARCHAR类型。
升级引擎版本后是否对作业有影响：
无影响。

示例代码：

准备数据：

create table test_char(id int,name varchar(24),name2 char(24));

执行sql：

show create table test_char;

Spark2.4.5

create table `test_char`(`id` INT,`name` STRING,`name2` STRING)
ROW FORMAT...

Spark3.3.1

create table test_char(id INT,name VARCHAR(24),name2 VARCHAR(24))
ROW FORMAT...

新客秒杀 2核2G 3M L实例

68元/年

普惠上云领千元上云礼券

立即前往

企业专享 X实例 4核8G 5M

888元/年

热门域名 1元随心购

1元/年起

数据湖探索 DLI-Spark2.4.x与Spark3.3.x版本在SQL队列的差异对比:Spark SQL支持Char/Varchar类型

意见反馈

0/200

提交成功！非常感谢您的反馈，我们会继续努力做到更好反馈提交失败！请稍后重试！

7*24