选择“作业管理 > Flink作业”。
Spark jar作业 开发Flink OpenSource SQL作业 开发Flink Jar作业 CloudTable HBase 创建HBase关联表 插入数据 查询数据 scala样例代码 pyspark样例代码 java样例代码 Hbase源表 Hbase结果表 Hbase维表
Flink 1.12新增支持Redis维表、RDS维表。 父主题: 版本支持公告
Spark3.3.x: `PARTITION(col=null)`始终在分区规范中解析为null,即使分区列是字符串类型。 通过part_col is null查询空值分区的数据。
选择“作业管理 > Flink作业”。
选择“作业管理 > Flink作业”。
Doris Doris Connector概述 Doris源表 Doris结果表 Doris维表 父主题: Connector列表
Redis Redis源表 Redis结果表 Redis维表 父主题: Connector列表
数据定义语句DDL 创建源表 创建结果表 创建维表 Format 父主题: Flink Opensource SQL1.12语法参考
数据定义语句DDL 创建源表 创建结果表 创建维表 父主题: Flink Opensource SQL1.10语法参考
选择“作业管理 > Flink作业”。
选择“作业管理 > Flink作业”。
选择“作业管理 > Flink作业”。
DWS DWS Connector概述 DWS源表(不推荐使用) DWS结果表(不推荐使用) DWS维表(不推荐使用) 父主题: Connector列表
获取到AK、SK、SecurityToken后,请参考如何使用凭据管理服务替换硬编码的数据库账号密码查询凭据。 约束限制 仅支持Flink1.15版本使用委托授权访问临时凭证: 在创建作业时,请配置作业使用Flink1.15版本 已在作业中配置允许DLI访问DEW的委托信息。
表1 支持类别 类别 详情 支持表类型 源表、维表、结果表 父主题: Doris
详情可参考HBase SQL 连接器 Hbase源表 Hbase结果表 Hbase维表 父主题: Connector列表
适用于按队列管理资源的场景,可以更细粒度地控制资源分配。
join优化 维表join根据左表进入的每条记录join关联键,先在缓存中匹配,如果匹配不到,则从远程拉取。
它可管理多种大数据服务,极大降低用户使用大数据的门槛,帮助用户快速构建大数据处理中心。 通过数据治理中心的DLI SQL节点传递SQL语句到DLI中执行,请参考《DLI SQL》。
您即将访问非华为云网站,请注意账号财产安全