检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
、IMF、RocketMQ类型时需要配置。 数据源为WEBSOCKET类型,认证方式(basicauth)时需要配置。 数据源为LDAP,安全认证类型(security_auth_type)为simple时需要配置。 最小长度:1 最大长度:255 password String
RabbitMQ RabbitMQ是一个开源的消息队列系统,它实现了高效的消息传递机制,可以在分布式系统中进行消息的异步传递和处理。RabbitMQ基于AMQP(Advanced Message Queuing Protocol)协议,支持多种编程语言,包括Java、Python、Ruby、
查看组合应用监控 本章节指导您如何查看组合应用的监控信息。 查看监控 登录新版ROMA Connect控制台。 在左侧导航栏选择“组合应用”,在组合应用页面单击要查看监控的组合应用。 在组合应用详情页面,选择“监控”页签。 根据需要,可查看组合应用流任务的“运行监控”、“耗时监控”和“失败次数监控”的监控数据。
Connect可实现数据源的实时数据同步以及数据表的物理删除同步。 ROMA Connect支持Oracle的XStream和LogMiner两种CDC模式,本章节主要介绍如何为Oracle数据库开启XStream模式的CDC功能。另外,根据Oracle数据库类型为CDB数据库还是非CDB数据库,CDC的配置有所不同。
Connect可实现数据源的实时数据同步以及数据表的物理删除同步。 ROMA Connect支持Oracle的XStream和LogMiner两种CDC模式,本章节主要介绍如何为Oracle数据库开启LogMiner模式的CDC功能。另外,根据Oracle数据库类型为CDB数据库还是非CDB数据库,CDC的配置有所不同。
Capture),即数据变更抓取,通过为源端数据源开启CDC,ROMA Connect可实现数据源的实时数据同步以及数据表的物理删除同步。 本章节主要介绍如何为MySQL数据库开启Binlog模式CDC功能。 前提条件 不支持采集二进制类型的字段,例如:TINYBLOB、BLOB、MEDIUMBLOB、LONGBLOB。
业务对接适配和验证 概述 在ROMA Connect实例中完成集成资产的恢复或迁移后,周边对接的业务应用也需要完成相应的对接适配,才能正常处理业务。 业务对接适配 与ROMA Connect对接的业务应用或设备,需要修改如下对接配置。 分类 业务场景 配置数据 服务集成 调用API
16384 262144 默认的批量处理消息字节数上限。producer将试图批处理消息记录,以减少请求次数。这将改善client与server之间的性能。不会试图处理大于这个字节数的消息字节数。 发送到brokers的请求将包含多个批量处理,其中会包含对每个partition的一个请求。
Connect提供的SDK,对API请求进行签名处理。 IAM认证(Token认证):调用侧先获取云服务平台的认证Token,然后把认证Token携带到API请求中。 IAM认证(AK/SK认证):调用侧集成ROMA Connect提供的SDK,对API请求进行签名处理。 自定义后端开发:用户在使用
instance updateRomaInstanceName 修改实例描述 instance updateRomaInstanceDesc 修改实例安全组 instance updateRomaInstanceSecurityGroup 修改实例维护时间窗 instance updateR
已开启SASL认证 若ROMA Connect实例开启了消息集成的SASL_SSL访问,则客户端向Topic生产和消费的消息时会加密传输,安全性更高。以下操作命令以Linux系统为例进行说明。 解压Kafka命令行工具和客户端证书。 进入文件压缩包所在的目录,然后执行以下命令解压文件。
在“工作台”页单击“智能助手”,弹出“智能助手”窗口。 在输入框输入想创建的组合应用描述内容,或者单击输入框下面的行为描述语句。 单击带下划线的连接器或处理器,可以在下拉框中替换所需的其它连接器或处理器。 单击键盘的“Enter”键生成组合应用,再单击“应用结果”,生成组合应用。 继续在编辑组合应用画布页面,进行流任务的配置和编排。
s Studio)可以通过订阅Kafka或MRS Kafka获取消息,并根据实际需要选择是否执行数据抽取任务。 本章节介绍任务执行完成后,如何配置消息发送,如果不需要发送消息可不配置。 前提条件 已经在对应的应用下创建Kafka和MRS Kafka数据源,数据源创建参考接入Kafka数据源和接入MRS
"APIC.0301", "request_id": "******" } 可能原因 用户的API所属IAM认证,Token解析失败。 解决办法 检查获取Token的方法,Token是否正确。 检查获取Token的环境与调用的环境是否一致。 Incorrect IAM authentication
项”、“到期不续费项”页签查询全部待续费资源,对资源进行手动续费的操作。 所有需手动续费的资源都可归置到“手动续费项”页签,具体操作请参见如何恢复为手动续费。 手动续费资源。 单个续费:在资源页面找到需要续费的资源,单击操作列的“续费”。 批量续费:在资源页面勾选需要续费的资源(
成本管理 随着上云企业越来越多,企业对用云成本问题也越发重视。使用ROMA Connect时,如何进行成本管理,减轻业务负担呢?本文将从成本构成、成本分配、成本分析和成本优化四个维度介绍成本管理,帮助您通过成本管理节约成本,在保障业务快速发展的同时获得最大成本收益。 成本构成 使用ROMA
查看组合应用系统日志 概述 本章节指导您如何查看组合应用的系统日志。 查看系统日志 登录新版ROMA Connect控制台。 在左侧导航栏选择“组合应用”,在组合应用页面单击要查看日志的组合应用。 在组合应用详情页面,选择“系统日志”页签,可查看该组合应用下流任务的启停记录和部署记录等日志信息。
图1 资产目录 资产中心权限 在进行资产相关操作前,请先确认您的账号是否已获取相关操作的权限,具体所需的权限请参考ROMA资产市场权限。 如何配置账号权限请参考配置ROMA Connect使用权限。 查看资产信息 登录新版ROMA Connect控制台。 在左侧导航栏选择“资产中心>资产目录”。
仅支持MySQL,Gauss200,PostgreSQL,Oracle,SQL Server或DB2数据库。 loop_index 上一个循环处理节点,当前循环的索引,从0开始。 loop_size 上一个循环处理节点的循环总次数。 split_index 上一个数据拆分节点,在数据拆分时当前数据块的索引,从0开始。
配置目标端数据信息 概述 本节主要提供数据集成任务目标端信息的配置说明。目标端信息用于告诉ROMA Connect如何将待集成的数据写入到目标端,包括数据源、数据存储信息等。对于不同的数据源类型,其目标端信息配置有所差异。 数据迁移过程中若目标端数据存在主键冲突,则根据主键自动更新数据。