检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
修改组合任务 功能介绍 修改组合任务。 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。API Explorer可以自动生成SDK代码示例,并提供SDK代码示例调试功能。 URI PUT /v2/{project_id}/fdi/instances/{ins
TaskBeanFacade objects 成功的任务信息。 数组长度:0 - 999999 表6 TaskBeanFacade 参数 参数类型 描述 task_id String 任务ID。 最小长度:1 最大长度:64 task_name String 任务名称。 最小长度:1 最大长度:64
最大长度:64 task_tag 否 String 任务标签,可为空。 最小长度:0 最大长度:64 task_mode 否 String 任务模式,如果为空查询所有任务。 NORMAL (普通任务) CDC (组合任务) FLOW (编排任务) 最小长度:0 最大长度:6 请求参数 表3
创建数据集成任务(普通任务) 配置任务基本信息 配置源端数据信息 配置目标端数据信息 配置数据映射规则 配置异常数据存储(可选) 配置任务完成后执行(可选) 父主题: 数据集成指导
String 实例ID。 最小长度:1 最大长度:64 task_id 是 String 任务唯一标识,任务的ID。 最小长度:1 最大长度:64 mapping_id 是 String 组合任务映射唯一标识。 最小长度:1 最大长度:64 请求参数 表2 请求Header参数 参数
a2映射到目标端字段b2。 完成Mapping信息配置后,若需要配置异常数据存储、任务完成后执行,请前往配置异常数据存储(可选)、配置任务完成后执行(可选);否则可直接单击“保存”,完成数据集成任务的配置。 MRS Hive分区字段映射配置说明 当目标端数据类型为MRS Hive
手工停止当前执行的任务 功能介绍 手工停止当前执行的任务。 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。API Explorer可以自动生成SDK代码示例,并提供SDK代码示例调试功能。 URI POST /v2/{project_id}/fdi/ins
forma”错误 FDI任务失败,修改问题后任务写入仍然报错 表名存在乱码导致Camel访问数据库失败 插入数据违反非空约束 DWS变成只读状态导致FDI任务运行失败 向DWS写入数据时越来越慢怎么解决
Kafka到Mysql的实时任务时,MQS中的Topic下有数据,但是FDI任务没有采集到数据。 原因分析 数据源配置的不是本实例下的MQS地址,所以本实例下的MQS中虽然有消息,但是FDI任务采集不到数据。 解决方案 检查任务配置与数据源配置,修改数据源配置为正确的MQS地址。
查询组合任务的映射列表 功能介绍 查询组合任务的映射列表。 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。API Explorer可以自动生成SDK代码示例,并提供SDK代码示例调试功能。 URI GET /v2/{project_id}/fdi/inst
每种状态任务的数量信息。 cdc_task_details TaskStatisticDetails object 每种状态任务的数量信息。 表4 TaskStatisticDetails 参数 参数类型 描述 running_tasks_count Integer 运行任务数量。
DWS变成只读状态导致FDI任务运行失败 原因分析 在DWS磁盘空间达到阈值,例如80%,或者某些大数据量的表存在数据倾斜时,DWS集群会变为只读状态。从FDI侧来看,在某个时间点,所有访问DWS的任务均异常停止。 解决方案 处理DWS只读状态问题,恢复数据库服务后,如果FDI的任务停止时间没有
FDI任务只能采集单张表到单张表吗? 普通任务只能从源端的单个表采集到目标端单个表,组合任务可以配置多个表采集到多个表。 父主题: 数据集成普通任务
failed.Writer data to kafka failed”错误。 解决方案 等待定时任务下次任务调度,或者停止任务再重新启动任务。 父主题: 数据集成任务
执行以下命令退出数据库连接。 exit; 创建XStream出站服务器。 一个XStream出站服务器只能在一个FDI集成任务中使用,若该数据库需要用于多个集成任务,需创建多个XStream出站服务器。 在命令行工具中执行以下命令以xstrmadmin用户连接到数据库实例。 sqlplus
怎样保证API对应的后端服务器的安全? 通过以下方法确保API的后端服务器的安全: 为API绑定签名密钥。在绑定签名密钥后,APIC到后端服务的请求增加签名信息,后端服务收到请求后计算签名信息,验证计算后的签名信息与APIC的签名信息是否一致。 使用HTTPS对请求进行加密。使用
采集任务”。在任务列表中找到需要启动的任务,单击“操作”栏中的“启动”即可启动任务。 启动:表示启动采集任务的定时任务,即按照创建采集任务时配置的开始执行时间、周期类型以及执行周期启动采集任务。 执行:表示立即执行一次此采集任务。 任务启动后,“启动”按钮会变为“停止”按钮,单击“停止”即可停止任务。
supplemental log data (all) columns; 执行以下命令退出数据库连接。 exit; 父主题: 创建数据集成任务(组合任务)
roma为2中创建的数据库连接用户名。 password为数据库连接用户的密码。 执行以下命令退出数据库连接。 exit; 父主题: 创建数据集成任务(组合任务)
数据集成普通任务 FDI各类数据库支持哪些数据类型? 跟踪号是什么,能跟踪到数据吗? FDI任务是否支持清空目标表? FDI任务只能采集单张表到单张表吗? 用户创建的FDI任务,同一账号的其他用户可见吗? FDI通过公网对接其他租户的MRS HIVE如何配置? 从OBS解析文件到