数据湖探索 DLI-创建DWS维表:参数说明

时间：2024-07-01 21:07:17

数据湖探索 DLI 创建维表

参数说明

表1 参数说明
参数	是否必选	说明
connector.type	是	connector类型，需配置为'gaussdb'
connector.url	是	jdbc连接地址，格式为：jdbc:postgresql://${ip}:${port}/${dbName} 。
connector.table	是	读取数据库中的数据所在的表名
connector.driver	否	jdbc连接驱动，默认为: org.postgresql.Driver。
connector.username	否	数据库认证用户名，需要和'connector.password'一起配置
connector.password	否	数据库认证密码，需要和'connector.username'一起配置
connector.read.partition.column	否	用于对输入进行分区的列名与connector.read.partition.lower-bound、connector.read.partition.upper-bound、 connector.read.partition.num必须同时存在或者同时不存在
connector.read.partition.lower-bound	否	第一个分区的最小值与connector.read.partition.column、connector.read.partition.upper-bound、 connector.read.partition.num必须同时存在或者同时不存在
connector.read.partition.upper-bound	否	最后一个分区的最大值与connector.read.partition.column、connector.read.partition.lower-bound、 connector.read.partition.num必须同时存在或者同时不存在
connector.read.partition.num	否	分区的个数与connector.read.partition.column、connector.read.partition.upper-bound、 connector.read.partition.upper-bound必须同时存在或者同时不存在
connector.read.fetch-size	否	每次从数据库拉取数据的行数。默认值为0，表示忽略该提示
connector.lookup.cache.max-rows	否	维表配置，缓存的最大行数，超过该值时，最先添加的数据将被标记为过期。-1表示不使用缓存。
connector.lookup.cache.ttl	否	维表配置，缓存超时时间，超过该时间的数据会被剔除。格式为：{length value}{time unit label}，如123ms, 321s，支持的时间单位包括: d,h,min,s,ms等，默认为ms。
connector.lookup.max-retries	否	维表配置，数据拉取最大重试次数，默认为3。