检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
DLI在创建运行作业需要连接外部其他数据源，如：DLI连接MRS、RDS、CSS、Kafka、DWS时，需要打通DLI和外部数据源之间的网络。 DLI提供的增强型跨源连接功能，底层采用对等连接的方式打通与目的数据源的vpc网络，通过点对点的方式实现数据互通。 图1 增强型跨源连接配置流程 配置DLI队列与公网网络连通
extraClassPath=/usr/share/extension/dli/spark-jar/datasource/css/* 通过控制台提交作业请参考《数据湖探索用户指南》中的“选择依赖资源参数说明”。 通过API提交作业请参考《数据湖探索API参考》>《创建批处理作业》中“表2-请求参数说明”关于“modules”参数的说明。
RIGHT OUTER JOIN：返回右表的所有记录，没有匹配值的记录将返回NULL。 注意事项 所要进行JOIN连接的表必须是已经存在的表，否则会出错。 示例 右外连接和左外连接相似，但是会将右边表（这里的course_info)中的所有记录返回，没有匹配值的左表记录将返回NULL。 1
OUTER JOIN：根据左表与右表的所有记录进行匹配，没有匹配值的记录返回NULL。 注意事项 所要进行JOIN连接的表必须是已经存在的表，否则会出错。 示例 利用全外连接可以将两张表中的所有记录返回，没有匹配值的左表及右表记录将返回NULL。 1 2 SELECT student_info
通过DLI跨源写DWS表，非空字段出现空值异常怎么办？ 问题现象 客户在DWS建表，然后在DLI创建跨源连接读写该表，突然出现如下异常，报错信息显示DLI向该表某非空字段写入了空值，因为非空约束存在导致作业出错。 报错信息如下： DLI.0999: PSQLException: ERROR:
DIS源表 JDBC源表 DWS源表 Redis源表 Hbase源表 userDefined源表 创建结果表 ClickHouse结果表 Kafka结果表 Upsert Kafka结果表 DIS结果表 JDBC结果表 DWS结果表 Redis结果表 SMN结果表 Hbase结果表
跨源连接DWS表 创建DLI表关联DWS 插入数据至DWS表 查询DWS表 父主题： 跨源连接相关
跨源连接OpenTSDB表 创建DLI表关联OpenTSDB 插入数据至OpenTSDB表 查询OpenTSDB表 父主题： 跨源连接相关
跨源连接DDS表 创建DLI表关联DDS 插入数据至DDS表 查询DDS表 父主题： 跨源连接相关
跨源连接Oracle表 创建DLI表关联Oracle 插入数据至Oracle表 查询Oracle表 父主题： 跨源连接相关
跨源连接HBase表 创建DLI表关联HBase 插入数据至HBase表 查询HBase表 父主题： 跨源连接相关
跨源连接RDS表 创建DLI表关联RDS 插入数据至RDS表 查询RDS表 父主题： 跨源连接相关
跨源连接CSS表 创建DLI表关联CSS 插入数据至CSS表 查询CSS表 父主题： 跨源连接相关
DBC源表、MySQL CDC源表、Postgres CDC源表、Redis源表、Upsert Kafka源表、Hbase源表。 Flink 1.12新增支持小文件合并功能。 Flink 1.12新增支持Redis维表、RDS维表。 父主题： 版本支持公告
创建源表 Kafka源表 DIS源表 JDBC源表 DWS源表 Redis源表 Hbase源表 userDefined源表 父主题： 数据定义语句DDL
示例 查询表test_oracle中的数据。 1 SELECT * FROM test_oracle limit 100; 父主题： 跨源连接Oracle表
查询表opentsdb_table中的数据。 1 SELECT * FROM opentsdb_table limit 100; 父主题： 跨源连接OpenTSDB表
Password类型的跨源认证：适用于DWS、RDS、DDS、DCS数据源。 跨源认证类型 DLI支持四种类型的跨源认证，不同的数据源按需选择相应的认证类型。 CSS类型跨源认证：适用于“6.5.4”及以上版本的CSS集群且集群已开启安全模式。配置时需指定集群的用户名、密码、认证证书，通过跨源认证将以上信息存储到D
所查询的表必须是已经存在的表，否则会出错。 示例 查询表test_ct中的数据。 1 SELECT * FROM dli_to_rds limit 100; 父主题： 跨源连接RDS表
示例 查询表dli_to_css中的数据。 1 SELECT * FROM dli_to_css limit 100; 父主题： 跨源连接CSS表
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
