检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
如果通过SQL节点分别执行导入脚本,需要开发大量脚本和节点,导致重复性工作。在这种情况下,我们可以使用For Each节点进行循环作业,节省开发工作量。 配置方法 准备源表和目的表。为了便于后续作业运行验证,需要先创建DLI源数据表和目的表,并给源数据表插入数据。 创建DLI表。您可以在DataArts
使用Token认证时必选。 workspace 是 String 工作空间ID,获取方法请参见实例ID和工作空间ID。 X-Project-Id 否 String 项目ID,获取方法请参见项目ID和账号ID。 多project场景采用AK/SK认证的接口请求,则该字段必选。 Content-Type
project_id 是 String 项目ID,获取方法请参见项目ID和账号ID。 请求参数 表2 请求Header参数 参数 是否必选 参数类型 描述 workspace 是 String 工作空间ID,获取方法请参见实例ID和工作空间ID。 X-Auth-Token 是 String IAM
使用Token认证时必选。 workspace 是 String 工作空间ID,获取方法请参见实例ID和工作空间ID。 X-Project-Id 否 String 项目ID,获取方法请参见项目ID和账号ID。 多project场景采用AK/SK认证的接口请求,则该字段必选。 Content-Type
表5 TimeRange 参数 是否必选 参数类型 描述 time_type 是 String 时间类型。 start 是 String 开始时间。 end 是 String 结束时间。 响应参数 状态码: 200 表6 响应Body参数 参数 参数类型 描述 count Integer
解决方案 优先联系DBA修改表结构,将需要过滤的列配置为索引列,然后重试。 如果由于数据不离散,导致还是失败请参考2~4,通过增大JDBC超时时间解决。 根据作业找到对应的MySQL连接名称,查找连接信息。 图2 连接信息 单击“连接管理”,在“操作”列中,单击“连接”进行编辑。 图3
=${dateformat(yyyy-MM-dd, -1, DAY)}']表示抽取DS分区值为2024-07-15的数据。 其他场景请参见时间宏变量使用解析。 父主题: 配置CDM作业源端参数
ync-bulk 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目ID,获取方法请参见项目ID和账号ID。 请求参数 表2 请求Header参数 参数 是否必选 参数类型 描述 X-Auth-Token 是 String 用户Token
在新建白名单窗口,设置需要授权的租户名称、租户ID、授权的截止时间、选择集群(仅专享版涉及),然后单击“确认”,完成IAM认证方式的API针对其他华为账号的授权。 租户名称和租户ID,需要登录到待授权的账号或其归属用户查看,可以参考如下步骤进行获取,租户名称和租户ID即账号名和账号ID: 注册并登录管理控制台。
sync_msg String 同步信息。 sync_time Long 同步时间。 create_time Long 创建时间。 create_user String 创建者。 update_time Long 更新时间。 update_user String 更新者。 状态码: 400
ges:jobs:getDetail Import GES作业节点运行 ECS ecs:servers:list ecs:servers:get ecs:servers:stop ecs:servers:start ecs:cloudServers:list Open/Close Resource作业节点运行,创建主机连接
Kafka。 数据连接名称 是 数据连接的名称,只能包含字母、数字、下划线和中划线,且长度不超过100个字符。 标签 否 标识数据连接的属性。设置标签后,便于统一管理。 说明: 标签的名称,只能包含中文、英文字母、数字和下划线,不能以下划线开头,且长度不能超过100个字符。 适用组件 是
SPECIFIC_PROJECT: 指定项目可见 market_sort_type 否 String 排序参数。 枚举值: updateTime: 更新时间 createTime: 创建时间 asc_or_desc 否 String 排序方式。 枚举值: asc: 升序 desc: 降序 offset 否 Integer
作业算子名称,表关联作业算子列表接口响应体的job_name。 start_time 是 Number 搜索参数时间范围的开始时间,例:1705248000000。 end_time 是 Number 搜索参数时间范围的结束时间,例:1705311669796 offset 是 Integer 分页参数偏移量。
sync_time Long 策略同步时间。 sync_msg String 策略同步日志。 create_time Long 策略创建时间。 create_user String 策略创建者。 update_time Long 策略更新时间。 update_user String
String 时间过滤左边界,与end_time一起使用,只支持时间范围过滤,单边过滤无效。格式遵循RFC3339,精确到秒,UTC时区,即yyyy-mm-ddTHH:MM:SSZ,如1970-01-01T00:00:00Z。 end_time 否 String 时间过滤右边界,与
api_using_time Long 使用截止时间。 app_id String APP编号。 app_name String APP名称。 apply_time Long 申请时间。 approval_time Long 授权时间。 approver_name String 审核人名称。
api_using_time Long 使用截止时间。 app_id String APP编号。 app_name String APP名称。 apply_time Long 申请时间。 approval_time Long 授权时间。 approver_name String 审核人名称。
项目ID,获取方法请参见项目ID和账号ID。 instance_id 是 String DataArts Studio实例ID,获取方法请参见实例ID和工作空间ID。 workspace_id 是 String 工作空间ID ,获取方法请参见实例ID和工作空间ID。 请求参数 表2
"ecs:servers:get", "ecs:servers:list", "ecs:servers:stop", "ecs:servers:start", "ecs:flavors:get"