-
注册华为账号并开通华为云 - 数据湖探索 DLI
注册华为账号并开通华为云 如果您已完成华为账号注册,可跳过该步骤。 打开注册华为云官方网站。 单击华为云官网右上角“注册”进入注册页面。 在注册页面,根据提示信息完成注册。具体操作可参见账号注册。 根据页面引导勾选服务条款, 单击“开通”,开通华为云。
-
数据保护技术 - 数据湖探索 DLI
用户在控制台上删去填写的手机号、邮箱,并关闭消息通知功能后,数据库中会同步删除用户的手机号、邮箱信息。 数据传输安全 用户个人敏感数据将通过TLS 1.2、TLS1.3进行传输中加密,所有华为云DLI服务的API调用都支持 HTTPS 来对传输中的数据进行加密。
-
Flink作业推荐配置指导 - 数据湖探索 DLI
用户在消息通知服务(SMN)中提前创建一个“主题”,并将其指定的邮箱或者手机号添加至主题订阅中。此时指定的邮箱或者手机会收到请求订阅的通知,单击链接确认订阅即可。 图1 创建主题 图2 添加订阅 登录DLI控制台,创建Flink SQL作业,编写作业SQL后,配置“运行参数”。
-
Flink作业高可靠推荐配置指导(异常自动重启) - 数据湖探索 DLI
操作步骤 用户在消息通知服务(SMN)中提前创建一个“主题”,并将其指定的邮箱或者手机号添加至主题订阅中。此时指定的邮箱或者手机会收到请求订阅的通知,单击链接确认订阅即可。
-
修订记录 - 数据湖探索 DLI
2023-01-10 调整手册结构,新增入门指引、注册华为帐号并开通华为云。 2022-07-28 新增创建并提交Flink OpenSource SQL作业。 Flink SQL EOS,下线“创建并提交Flink SQL作业”相关内容。
-
数据相关 - 数据湖探索 DLI
数据相关 导入数据 插入数据 清空数据
-
Flink作业相关API - 数据湖探索 DLI
Flink作业相关API 新建SQL作业 更新SQL作业 新建Flink Jar作业 更新Flink Jar作业 批量运行作业 查询作业列表 查询作业详情 查询作业执行计划 批量停止作业 删除作业 批量删除作业 导出Flink作业 导入Flink作业 生成Flink SQL作业的静态流图
-
运维指导 - 数据湖探索 DLI
从DLI导入数据到OBS,为什么数据量出现差异? 父主题: SQL作业相关问题
-
SQL作业相关API(废弃) - 数据湖探索 DLI
SQL作业相关API(废弃) 导入数据(废弃) 导出数据(废弃) 父主题: 历史API
-
基本概念 - 数据湖探索 DLI
基本概念 账号 用户注册华为账号并开通华为云。账号对其所拥有的资源及云服务具有完全的访问权限,可以重置用户密码、分配用户权限等。由于账号是付费主体,为了确保账号安全,建议您不要直接使用账号进行日常管理工作,而是创建用户并使用他们进行日常管理工作。
-
其他常用操作 - 数据湖探索 DLI
其他常用操作 导入数据至DLI表的方式 数据湖探索监控指标说明及查看指导 云审计服务支持的DLI操作列表说明 配额管理
-
跨源连接运维报错 - 数据湖探索 DLI
错误 创建RDS跨源表报空指针错误 对跨源DWS表执行insert overwrite操作,报错:org.postgresql.util.PSQLException: ERROR: tuple concurrently updated 通过跨源表向CloudTable Hbase表导入数据
-
Spark SQL语法参考(即将下线) - 数据湖探索 DLI
Spark SQL语法参考(即将下线) 批作业SQL常用配置项说明 批作业SQL语法概览 Spark开源命令支持说明 数据库 创建OBS表 创建DLI表 删除表 查看表 修改表 分区表相关 导入数据 插入数据 清空数据 导出查询结果 多版本备份恢复数据 表生命周期管理 跨源连接HBase
-
库表管理 - 数据湖探索 DLI
库表管理 库表管理概述 数据库权限管理 表权限管理 创建数据库和表 删除数据库和表 修改数据库和表所有者 导入数据 将DLI数据导出至OBS 查看元数据 预览数据 库表管理标签管理 父主题: 数据管理
-
使用咨询 - 数据湖探索 DLI
DLI的数据可存储在哪些地方 DLI表与OBS表的区别 不上传数据到OBS,如何使用DLI DLI是否支持导入其他租户共享OBS桶的数据? 区域和可用区 全局变量的使用中,一个子账号是否可以使用其他子账号创建的全局变量 父主题: 产品咨询相关问题
-
SDK的获取与安装 - 数据湖探索 DLI
DLI依赖SDK(例如,OBS SDK),可以通过配置华为云的maven镜像源仓库下载。 (推荐)以华为镜像源作为主仓库: 配置华为maven镜像源的具体方法可参见:华为开源镜像站>选择“华为SDK”>单击“HuaweiCloud SDK”。
-
快速使用SQL语句查询数据 - 数据湖探索 DLI
Step1 登录管理控制台 步骤 ① 登录华为云。根据页面提示,登录系统。 ② 选择“大数据 > 数据湖探索”。 ③ 单击“进入控制台”,进入数据湖探索控制台。 说明 注册华为云账号操作请参考:准备工作。
-
创建消息通知主题 - 数据湖探索 DLI
如果选择“邮件”协议,需要在“订阅终端”中填写接收确认邮件的邮箱地址。 更多信息,请参考《消息通知服务用户指南》中《添加订阅》章节。 图4 添加订阅 通过单击短信或者邮件中的链接确认后,将收到“订阅成功”的信息。
-
如何获取项目ID? - 数据湖探索 DLI
查看项目ID步骤如下: 注册并登录华为云管理控制台。 将鼠标移动到右上角用户名上,在下拉列表中单击“我的凭证”。 在“我的凭证”页面的项目列表中查看项目ID。例如project_id:"5a3314075bfa49b9ae360f4ecd333695"。
-
修订记录 - 数据湖探索 DLI
修改以下内容: 5.2.3-导入数据 5.2.4-导出数据 5.2.6-查询作业详细信息 5.2.9-导出查询结果 5.5.1-队列赋权 5.5.3-数据赋权 5.5.5-查看表的使用者 2017-11-22 第六次正式发布。