检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
变更实例规格 如果当前使用的实例规格不能满足业务使用需要,或者需要开启或关闭某个集成能力,可通过调整RCU分配对集成能力进行动态的扩缩容。 约束与限制 消息集成当前仅支持扩容,不支持缩容,但是支持将RCU调整为0关闭消息集成能力。 关闭某个集成能力前,请确保该集成能力已不再被使用。
每个接入的数据源都要归属到某个集成应用下,在接入数据源前您需要有可用的集成应用,否则请提前创建集成应用。 MRS Kafka数据源所在的MRS集群已开启Kerberos认证,并已为机机交互用户配置执行权限,具体请参考准备开发用户。 操作步骤 登录ROMA Connect控制台,在“实例”页
则填写规则名称,方便您快速识别和查找。 集成应用 选择规则所属的集成应用名称。 规则描述 填写规则的描述信息。 状态 选择是否启用规则,默认启用。只有启用后,规则才生效。 规则创建完成后,在规则列表中单击已创建规则的名称,进入规则详情页面。 配置规则的数据源端。 单击“数据源端”
约束与限制 若两个数据集成任务分别使用了不同版本的MRS数据源(包含MRS Hive、MRS HDFS和MRS HBase),且该MRS数据源均开启了Kerberos认证,则这两个数据集成任务不能同时运行,否则会导致集成任务运行失败。 数据集成中仅支持百万以内数据量。 前提条件 每个接
HBase),且该MRS数据源均开启了Kerberos认证,则这两个数据集成任务不能同时运行,否则会导致集成任务运行失败。 前提条件 每个接入的数据源都要归属到某个集成应用下,在接入数据源前您需要有可用的集成应用,否则请提前创建集成应用。 MRS HDFS数据源所在的MRS集群已开启Kerbero
HBase),且该MRS数据源均开启了Kerberos认证,则这两个数据集成任务不能同时运行,否则会导致集成任务运行失败。 前提条件 每个接入的数据源都要归属到某个集成应用下,在接入数据源前您需要有可用的集成应用,否则请提前创建集成应用。 MRS HBase数据源所在的MRS集群已开启Kerbero
消息集成 MQS公网连接地址(仅开启公网访问时展示) 您可以单击连接地址右侧的“”复制连接地址信息。 公网访问入口 若实例未开启公网入口,您可以单击右侧“”开启公网入口。 若实例已开启公网入口,您可以单击地址右侧的“ ”复制地址信息。 若实例已开启公网入口,您可以单击公网带宽右侧的“
置“结果分页选项”。 若开启结果分页选项,可在后端请求中添加查询参数pageNum和pageSize,对查询结果进行分页,并指定返回第几页的数据。 pageNum:分页时指定要返回第几页的数据,从1开始。 pageSize:分页时每页包含的数据条数。 开启和关闭结果分页选项时,响
连接器RESTful接口规范 数据读取接口 接口规范定义 接口URI POST /reader 接口请求 { "job_name": "job_name", "datasource": { "para1": "******", "para2":
源端API类型数据源自定义周期如何设置? 创建FDI普通任务时,当源端数据源选择API类型并且开启增量迁移时,支持自定义周期,自定义周期配置详细说明可参照以下示例: 当粒度单位为“小时”时,分别有以下四种配置场景。 以时间点2020-11-05 22:10为例,如下图。 周期指定
SASL_SSL 选择是否开启消息传输的SASL认证和SSL加密,建议您开启SASL认证和SSL加密,提高数据传输的安全性。 数据加密传输 SASL_SSL一旦开启后将无法修改,请根据实际业务需要选择是否启用。 VPC内网明文访问 仅当“数据加密传输 SASL_SSL”开启时可配置。 选择VPC内部是否使用明文访问。
后端服务请求的超时时间,默认为60000ms。 重试次数 ROMA Connect调用后端服务失败后的重试次数。 值为-1时,表示不开启重试功能。 值为0-10时,表示开启重试功能,并根据设置的值执行重试。 高级设置 前端请求方法 选择前端API的请求方法。“ANY”表示该API支持任意请求
任务源端数据源类型元数据定义。 数据源为API配置。 path 否 String 文件路径。 FTP服务器中要访问的文件夹路径,例如“/data/FDI”。 file_name 否 String 文件名。 FTP服务器中要访问的文件。 file_name_charset 否 String 文件名称字符编码。
邮箱 QQ邮箱 163邮箱 父主题: 连接器
排序 “排序”处理器用于处理数据的排序。 配置参数 参数 说明 数据集 待排序的数据,可以是上一步传过来的数据,也可以是自定义的数据。 可通过变量的方式引用前序步骤中的数据,请参考引用变量。 参数路径 排序使用的参数。 可通过变量的方式引用前序步骤中的数据,请参考引用变量。 排序方式
终止 “终止”处理器用于结束组合应用内的流任务。 “终止”处理器一般置于流任务的末端。 “终止”处理器无需配置参数。 父主题: 处理器
不同的响应参数。 绿色通道 选择是否开启绿色通道,开启绿色通道后,需要设置白名单和黑名单。 白名单 仅当“绿色通道”开启时需要配置。 填写要添加到白名单的IP地址或地址段,白名单中的地址可以不用认证即可调用API。 黑名单 仅当“绿色通道”开启时可配置。 填写要添加到黑名单的IP
不同的响应参数。 绿色通道 选择是否开启绿色通道,开启绿色通道后,需要设置白名单和黑名单。 白名单 仅当“绿色通道”开启时需要配置。 填写要添加到白名单的IP地址或地址段,白名单中的地址可以不用认证即可调用API。 黑名单 仅当“绿色通道”开启时可配置。 填写要添加到黑名单的IP
HTTP HTTP请求 HTTP响应 父主题: 连接器
数据筛选 “数据筛选”组件对传入该组件的数据按照指定的表达式进行筛选,并将筛选出的结果通过节点变量传递给后续节点。通常“数据筛选”组件会作为“数据拆分”组件的后续步骤以配合使用。 配置参数 参数 说明 表达式 数据筛选的表达式。 使用表达式对数据进行筛选,并传递给后续节点。例如数