检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
生产消息接口说明 功能介绍 向指定队列发送消息，可同时发送多条消息。 每次最多发送10条。 每次发送的消息总负载不超过2MB。 endpoint为https://{rest_connect_address}:9292，通过指定实例接口查询rest_connect_address的IP地址。
为什么规则引擎的数据目的端未收到设备发送的消息？ 数据目的端未收到设备发送的消息主要有以下原因： 可能是您的安全组没有添加正确的入方向规则。 请您进入“实例信息”界面，找到您的安全组。单击安全组名称进入安全组详情页面，然后根据表1添加相应的入方向规则。 表1 安全组参数 参数 端口
其他语言客户端使用说明 MQS完全兼容Kafka开源客户端。 如果您使用其他语言，也可以从Kafka官网获取客户端，按照Kafka官网提供的连接说明，与MQS对接。 获取客户端的地址请参考Kafka官网。 父主题： MQS连接开发（开源客户端）
MRS Hive写入时数据全部写在第一个字段里 原因分析 建表时没有使用列分隔符。 解决方案 在数据库中执行以下命令设置分隔符： alter table 表名set serdeproperties('field.delim'='分隔符') 父主题： 数据集成任务
自定义数据源开发示例（实时任务） 操作场景 对于实时数据源，当前自定义连接器不支持直接接入，只能通过消息中转的方式进行接入。本章节以MQS数据源类型为例进行开发，示例使用Java语言进行开发，Demo代码参考RealtimeConnector.rar。 前提条件 准备装有1.8及以上版本JDK的Linux服务器。
配置任务完成后执行（可选） 概述 定时数据集成任务执行成功后，根据配置发送消息至Kafka或MRS Kafka。第三方平台（比如DataArts Studio）可以通过订阅Kafka或MRS Kafka获取消息，并根据实际需要选择是否执行数据抽取任务。 本章节介绍任务执行完成后，
配置SQL Server CDC 概述 CDC（Change Data Capture），即数据变更抓取，通过为源端数据源开启CDC，ROMA Connect可实现数据源的实时数据同步以及数据表的物理删除同步。 本章节主要介绍如何为SQL Server数据库开启CDC功能。 前提条件
源数据库重启等操作对组合任务是否有影响？ 在业务使用过程中，Oracle等数据库可能需要扩容、重启等操作，这些操作对组合任务的影响主要包含以下两种： 如果变更中重启耗时较短，组合任务中会重试连接，恢复正常运行任务。 如果变更中重启耗时较长，任务会报错失败，等变更完成，需重启组合任务。
Kafka集到Mysql目标端报“cannot find record mapping field”错误 原因分析 查看任务mapping配置，源端字段类型的长度超出目标端字段类型的长度限制，或者配置的映射字段中某个字段在源端的数据中不存在。 解决方案 检查字段映射配置的字段类型
Mysql到Mysql时源端报“Illegal mix of collations for operation 'UNION'”错误 原因分析 从源端数据源视图中查看，视图定义语句使用了union，但是union两边字段编码不一致，须统一编码。 解决方案 建议使用CONVERT转换为统一编码，如：CONVERT
配置索引生命周期策略（可选） ElasticSearch存储的数据，默认未设置过期时间，用户可根据磁盘空间情况，为ElasticSearch数据设置索引生命周期策略。 创建生命周期策略 登录Kibana可视化界面。 访问地址：IP:Port 其中，IP为ELK所部署服务器的IP；
获取数据源中某个表中所有字段 功能介绍 获取数据源中某个表中所有字段。 调试 您可以在API Explorer中调试该接口，支持自动认证鉴权。API Explorer可以自动生成SDK代码示例，并提供SDK代码示例调试功能。 URI GET /v2/{project_id}/fd
创建设备自定义Topic 功能介绍 在ROMA Connect创建一个Topic。 URI POST /v1/{project_id}/link/instances/{instance_id}/topics 表1 参数说明 名称 类型 是否必填 描述 project_id string
API到MySQL的定时任务时会出现源端报“connect timeout”错误 原因分析 数据面有6个节点，其中两个节点ping不通API的IP。 解决方案 属于网络问题，需要找VPC定位。 父主题： 数据集成任务
C#客户端使用说明 操作场景 本文介绍C#版本的Kafka客户端连接指导，包括Kafka客户端安装，以及生产、消费消息。 前提条件 已获取MQS连接信息，具体请参见开发准备。 已安装开发工具和C#开发语言环境，具体请参见开发准备。 引入Kafka客户端 MQS基于Kafka社区版本1
如何修复意外重启等原因导致的XStream模式Oracle CDC功能异常？ 因Oracle数据库意外重启等原因导致CDC功能异常时，可以在Oracle数据库中执行以下命令来排查和修复。 以sys用户连接到Oracle数据库，然后执行以下命令： SELECT CAPTURE_NAME
目标表中配置的RowId字段类型不正确导致写入数据失败 原因分析 使用RowId的方式采集Oracle表数据时，由于设置表字段类型不正确，导致报错，如下图。 解决方案 修改表字段类型，RowId一般是使用字母、数字生成的18位字符串，采集到目标端需要为字符类型。 父主题： 数据集成组合任务
同一个实例中，为什么看到的数据跟其他人看到的不一样？ ROMA Connect对用户资源实现了严格的权限管理。 在同一实例内，用户只能查看和管理自己创建的集成应用和资源，默认不能查看其他用户创建的集成应用和资源。 用户可以通过集成应用授权的方式，把集成应用下的资源共享给同一账号下的其他用户来查看和使用。
读取MySQL的binlog时报“binlog probably contains events generated with statement or mixed based replication forma”错误 问题描述 组合任务运行失败，界面报错为binlog probably
OBS源端的CSV文件解析到关系型数据库时，列的值不对怎么办？ 任务配置时源端OBS的元数据填写顺序必须与CSV文件中列的顺序一致，需修改任务配置，按照文件中列的顺序填写元数据。 父主题： 数据集成普通任务
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
