检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
并同步。 需要组合任务支持源端新增数据表和数据字段的同步。 源端CDC归档日志被清理导致组合任务同步失败。 MySQL由于未采用GTID模式,发生了主备切换,导致组合任务同步失败。 仅当“任务状态”为“停止”时,才能进行重置同步进度操作。 删除组合任务时,GaussDB、Post
如果查询到的状态为“Aborted”,则说明CDC的出站服务器状态异常。输入以下命令后按Enter键,再输入/按Enter键执行该命令手工启动出站服务器: BEGIN DBMS_XSTREAM_ADM.START_OUTBOUND(server_name => 'dbzxout');
完成数据源接入配置后,单击“测试连接”,检测ABM与数据源之间是否能够连通。 若测试结果为“测试连接成功!”,则继续下一步。 若测试结果为“测试连接失败!”,则检查数据源状态和数据源连接参数配置,然后单击“测试连接”,直到连接成功为止。 单击“保存”,完成数据源的接入。 父主题: 数据源管理
部署在VPC下的应用是否可以调用API? 默认部署在VPC下的应用可以调用API。如果域名解析失败,则参考怎样切换内网DNS,在当前终端节点上配置DNS服务器。配置完成后,部署在VPC下的应用可以调用API。 父主题: 服务集成
表名不支持“-”、“#”等特殊字符。 任务启动后修改表结构会导致任务异常,需要重新启动执行任务。 目标端不支持映射字段全部为主键的表。 仅支持至少一次(at least once)交付,不支持精确一次(exactly once)交付,即无法保证数据不会重复,因此需依赖主键及目标系统的能力来确保数据一致性。
您可以使用平台提供的技术架构或者自身创建的技术架构,通过创建采集任务,完成对技术模型的采集。采集任务创建后,您可以查看和管理采集任务,包括任务的启动、执行、编辑配置信息等。 前提条件 已接入数据源。 操作步骤 登录ROMA Connect,在“实例”页面单击实例上的“查看控制台”,进入实例控制台。
完成数据源接入配置后,单击“测试连接”,检测ABM与数据源之间是否能够连通。 若测试结果为“测试连接成功!”,则继续下一步。 若测试结果为“测试连接失败!”,则检查数据源状态和数据源连接参数配置,然后单击“测试连接”,直到连接成功为止。 单击“保存”,完成数据源的接入。 父主题: 数据源管理
务。 步骤四:启动数据集成任务 数据集成任务创建后,“任务状态”为“停止”状态,此时任务不会执行,需先启动任务。 数据集成任务有两种启动方式: 启动任务计划,任务按照创建任务时所设置的计划执行。 在数据集成任务左侧勾选上要启动的任务,单击任务列表上方的“启动”,启动任务计划,然后等待任务按计划时间执行。
连接数据库的用户密码。 描述 填写连接器的描述信息,用于识别不同的连接器。 支持的动作 获取数据库变更 实时获取数据库变更 ,需要在数据库中启动CDC配置。 配置参数 表1 获取数据库变更 参数 说明 表名 填写或者选择要获取数据变更的数据表名。 数据库操作 选择数据库变更的操作。
Mysql到Mysql时源端报“Illegal mix of collations for operation 'UNION'”错误 原因分析 从源端数据源视图中查看,视图定义语句使用了union,但是union两边字段编码不一致,须统一编码。 解决方案 建议使用CONVERT转换为统一编码,如:CONVERT
启了Binlog。 show variables like 'log_bin'; 若变量log_bin的值为“OFF”,则说明Binlog未开启,继续执行下一步。 若变量log_bin的值为“ON”,则说明Binlog已开启,继续执行以下SQL命令,检查相关参数的配置是否符合要求。
2:创建成功 3:创建失败 4:初始化中 5:注册中 6:运行中 7:初始化失败 8:注册失败 10:安装中 11:安装失败 12:升级中 13:升级失败 20:回滚中 21:回滚成功 22:回滚失败 23:删除中 24:删除失败 25:注销中 26:注销失败 27:创建超时 28:初始化超时
v1.RabbitMqProducer 说明 生产RabbitMQ消息。若发送消息没有异常,则消息发送成功;若发送消息抛出异常,则消息发送失败。 使用示例 用direct交换器生产消息,把消息路由到bindingKey与routingKey完全匹配的Queue中。 importClass(com
连接数据库的用户密码。 描述 填写连接器的描述信息,用于识别不同的连接器。 支持的动作 获取数据库变更 实时获取数据库变更 ,需要在数据库中启动CDC配置。 配置参数 表1 获取数据库变更 参数 说明 表名 填写或者选择要获取数据变更的数据表名。 数据库操作 选择数据库变更的操作。
74da1)获取RealtimeConnector.rar包。 用户程序向MQS写入消息的TPS不能超过6000/s。 操作步骤 创建SpringBoot模板工程,在Main方法中启动对实时数据源的消费,对消费的数据使用MQS SDK生产到MQS中。 示例代码: @SpringBootApplication
Server等几种关系型数据库,具体请参见数据库的CDC配置。 启动集成任务。 定时任务启动后,ROMA Connect按照任务计划进行数据集成。首次执行时,会把所有符合条件的源端数据集成到目标端,后续根据任务配置,集成符合条件的全量数据或只集成增量数据。 实时任务启动后,ROMA Connect会不断检测
作对组合任务的影响主要包含以下两种: 如果变更中重启耗时较短,组合任务中会重试连接,恢复正常运行任务。 如果变更中重启耗时较长,任务会报错失败,等变更完成,需重启组合任务。 父主题: 数据集成组合任务
在左侧导航栏选择“组合应用”,在组合应用页面单击要查看监控的组合应用。 在组合应用详情页面,选择“监控”页签。 根据需要,可查看组合应用流任务的“运行监控”、“耗时监控”和“失败次数监控”的监控数据。 父主题: 组合应用管理
流任务的运行时间。 状态 流任务的运行状态。 (可选)配置访问日志,实现异常监控日志的存储。 如果组合应用未启动,请单击“启动并配置运行记录”,选择一个实例启动此组合应用。 如果组合应用已启动,单击“点击开启”弹出“运行记录配置”窗口,然后配置日志接入信息。 表2 配置访问日志 参数 说明
API请求体大小可以在实例配置参数中配置(1-9536 MB),但是有以下几点限制: 使用APP认证时,认证签名只能签12MB,如果请求体大于12MB,签名会失败。 托管类API的请求体最大为2GB。 函数API请求体受内部沙箱内存大小的限制,无精确计算值。 父主题: 服务集成