华为云首页用户手册

数据湖探索 DLI-插入数据:约束限制

数据湖探索 DLI-插入数据:约束限制

时间：2024-05-28 10:53:07

数据湖探索 DLI Spark SQL语法参考（即将下线）

约束限制

insert overwrite语法不适用于“自读自写”场景，该场景因涉及数据的连续处理和更新，如果使用insert overwrite语法可能存在数据丢失风险。
"自读自写"是指在处理数据时能够读取数据，同时根据读取的数据生成新的数据或对数据进行修改。
使用Hive和Datasource（除Hudi外）表在执行数据修改类命令（例如insert into，load data）时由于数据源不支持事务性，在系统故障或队列资源重启后，可能会导致数据重复或数据不一致等问题。
为了避免这种情况，建议优先选择支持事务性的数据源，如Hudi类型数据源，该类数据源具备ACID（Atomicity、Consistency、Isolation、Durability）能力，有助于确保数据的一致性和准确性。

上一篇：数据湖探索 DLI-插入数据:关键字

下一篇：数据湖探索 DLI-导出查询结果:响应消息

数据湖探索 DLI-插入数据:约束限制

意见反馈

0/200

提交成功！非常感谢您的反馈，我们会继续努力做到更好反馈提交失败！请稍后重试！

推荐文章

解决方案
相关专题