-
DLI SDK功能矩阵 - 数据湖探索 DLI
删除队列的Java SDK使用说明。 资源相关 介绍上传资源包、查询所有资源包、查询指定资源包、删除资源包的Java SDK使用说明。 SQL作业相关 介绍数据库相关、表相关、作业相关Java SDK使用说明。 Flink作业相关 介绍新建Flink作业、查询作业详情、查询作业列表等Java
-
作业模板 - 数据湖探索 DLI
作业模板 SQL模板管理 Flink模板管理 Spark模板管理 附录
-
创建队列 - 数据湖探索 DLI
请求参数说明详情,请参见创建队列。 请求示例 描述:在项目ID为48cc2c48765f481480c7db940d6409d1的项目下创建一个sql类型名称为queue1的队列。 示例URL:POST https://{endpoint}/v1.0/48cc2c48765f481480
-
模板相关API(废弃) - 数据湖探索 DLI
模板相关API(废弃) 查询所有SQL样例模板(废弃) 父主题: 历史API
-
创建并提交Flink作业 - 数据湖探索 DLI
0/{project_id}/streaming/flink-jobs {project_id}信息请从获取项目ID获取。 请求参数说明详情,请参见创建数据库(废弃)。 请求示例 描述:在项目ID为48cc2c48765f481480c7db940d6409d1项目下,创建Flink自定义作业。
-
附录 - 数据湖探索 DLI
附录 SQL模板下TPC-H样例数据说明 父主题: 作业模板
-
Python SDK - 数据湖探索 DLI
Python SDK Python SDK概述 Python SDK环境配置 队列相关 资源相关 SQL作业相关 Spark作业相关
-
Flink作业相关问题 - 数据湖探索 DLI
Flink作业相关问题 使用咨询 Flink SQL作业相关问题 Flink Jar作业相关问题 性能调优 运维指导
-
Flink作业委托场景开发指导 - 数据湖探索 DLI
Flink作业委托场景开发指导 Flink Opensource SQL使用DEW管理访问凭据 Flink Jar 使用DEW获取访问凭证读写OBS 用户获取Flink作业委托临时凭证
-
API快速入门 - 数据湖探索 DLI
API快速入门 创建队列 创建并提交SQL作业 创建并提交Spark作业 创建并提交Flink作业 创建并使用跨源链接
-
Java SDK - 数据湖探索 DLI
Java SDK Java SDK概述 Java SDK环境配置 OBS授权 队列相关 资源相关 SQL作业相关 Flink作业相关 Spark作业相关 Flink作业模板相关
-
Flink作业运行异常,如何定位 - 数据湖探索 DLI
log”文件,搜索“RUNNING to FAILED”关键字,通过上下文的错误栈,确认失败原因。 如果“jobmanager.log”文件中的信息不足以定位,可以在运行日志中找到对应的“taskmanager.log”日志,搜索“RUNNING to FAILED”关键字,确认失败原因。 父主题: 运维指导
-
数据分析 - 数据湖探索 DLI
使用DLI将CSV数据转换为Parquet数据 使用DLI进行电商BI报表分析 使用DLI进行账单分析与优化 使用DLI Flink SQL进行电商实时业务数据分析 永洪BI对接DLI提交Spark作业 FineBI工具对接DLI Trino PowerBI工具对接DLI Trino
-
运维指导 - 数据湖探索 DLI
create failed. The plan xxx target cu is out of quota报错 在default队列执行DLI SQL失败,上报超时异常 怎样查看弹性资源池和作业的资源使用情况? 父主题: 队列相关问题
-
返回结果 - 数据湖探索 DLI
对于获取用户Token接口,接口,返回如图1所示的消息头,其中“x-subject-token”就是需要获取的用户Token。有了Token之后,您就可以使用Token认证调用其他API。 图1 获取用户Token响应消息头 响应消息体 响应消息体通常以结构化格式返回,与响应消息头中Cont
-
工程配置 - 数据湖探索 DLI
请勿将该OBS桶用作其它用途,避免出现作业结果混乱等问题。 OBS桶需要由用户主账户统一设置及修改,子用户无权限。 不配置DLI作业桶无法查看作业日志。 您可以通过配置桶的生命周期规则,定时删除桶中的对象或者定时转换对象的存储类别。 DLI的作业桶设置后请谨慎修改,否则可能会造成历史数据无法查找。
-
用户获取Spark作业委托临时凭证 - 数据湖探索 DLI
委托的AK、SK、SecurityToken。 Spark Jar作业获取作业委托凭证 import org.apache.spark.sql.SparkSession; import org.slf4j.Logger; import org.slf4j.LoggerFactory;
-
Python SDK环境配置 - 数据湖探索 DLI
”,可能是由于缺少C++编译器导致的报错,建议您根据提示信息安装相应版本的Visual Studio编译器解决。部分操作系统Visual Studio安装后需重启才可以生效。 安装DLI服务Python SDK。 选择SDK获取与安装获取的安装包,解压安装包。 将"dli-sdk-python-<version>
-
跨源认证权限管理 - 数据湖探索 DLI
单击操作列的“权限设置”,修改当前用户的权限。详细权限描述如表1所示。 当“权限设置”中的选项为灰色时,表示您不具备修改此跨源认证权限的权限。可以向管理员用户、组所有者等具有赋权权限的用户申请“跨源认证的赋权”和“跨源认证权限的回收”权限。 如需回收当前用户的全部权限,可单击操作列的
-
手动续费 - 数据湖探索 DLI
进入支付页面,选择支付方式,确认付款,支付订单后即可完成续费。 统一包年/包月资源的到期日 如果您持有多个到期日不同的资源,或者您的队列资源到期日不同,可以将到期日统一设置到一个日期,便于日常管理和续费。 图4展示了用户将两个不同时间到期的资源,同时续费一个月,并设置“统一到期日”后的效果对比。