华为云首页用户手册

数据湖探索 DLI-DLI作业开发流程:DLI数据导入指引

数据湖探索 DLI-DLI作业开发流程:DLI数据导入指引

时间：2025-02-12 15:05:19

数据湖探索 DLI

DLI 数据导入指引

DLI支持在不迁移数据的情况下，直接对OBS中存储的数据进行查询分析，您只需要将数据上传OBS即可使用DLI进行数据分析。
上传数据至OBS请参考《对象存储用户指南》。
当需要将来自不同源的数据进行集中存储和处理时，迁移数据至DLI可以提供一个统一的数据平台。
您可以参考使用 CDM 迁移数据至DLI迁移数据至DLI后再提交作业。
如果业务需求需要实时访问和处理来自不同数据源的数据，跨源访问可以减少数据的复制和延迟。
跨源访问的必要条件包括“DLI与数据源网络连通”、“DLI可获取数据源的访问凭证”：
- DLI与数据源网络连通：您可以参考配置DLI与数据源网络连通（增强型跨源连接）配置DLI与数据源的网络连通。
- 管理数据源的凭证：
  - 您可以使用DLI提供的跨源认证功能管理访问指定数据源的认证信息。
    适用范围：SQL作业、Flink 1.12作业场景。具体操作请参考使用DLI的跨源认证管理数据源访问凭证。
  - 您还可以使用DEW管理数据源的访问凭证，并通过“自定义委托”方式授予DLI访问DEW服务的权限。
    适用范围：Spark 3.3.1及以上版本、Flink 1.15及以上版本。具体操作请参考使用DEW管理数据源访问凭证和配置DLI访问其他云服务的委托权限。

上一篇：数据湖探索 DLI-DLI作业开发流程:使用DLI提交作业

下一篇：数据湖探索 DLI-DLI作业开发流程:创建IAM用户并授权使用DLI

开年采购季抽奖赢万元免单

立即前往

续费同价 L实例 2核2G 4M

98元/年

企业专享 X实例 2核4G 5M

198元/年

热门域名 1元随心购

1元/年起

数据湖探索 DLI-DLI作业开发流程:DLI数据导入指引

意见反馈

0/200

提交成功！非常感谢您的反馈，我们会继续努力做到更好反馈提交失败！请稍后重试！

推荐文章

解决方案
相关专题