检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
用也需要完成相应的对接适配,才能正常处理业务。 业务对接适配 与ROMA Connect对接的业务应用或设备,需要修改如下对接配置。 分类 业务场景 配置数据 服务集成 调用API API的调用地址(仅资产迁移场景需要)。 API的认证信息,包括集成应用/客户端的Key和Secret、AppCode、AK/SK。
图1 ROMA Connect使用流程 创建实例。 在ROMA Connect服务控制台创建一个ROMA Connect实例,实例规格配置根据实际业务情况选择。 创建集成应用。 在实例控制台创建一个集成应用,实例中的所有资源都要有归属的集成应用。 根据不同的业务场景,选择使用不同ROMA
任务监控管理 查询任务监控信息列表 查询单个任务的日志详情 查询单次调度日志详情 查询指定任务的调度信息总览 父主题: 数据集成API
properties”、“core-site.xml”,“hdfs-site.xml”,“hosts”和“version”文件。 参考更新客户端配置文件,在MRS控制台下载客户端配置文件,解压后: 从“MRS_Services_ClientConfig_ConfigFiles > MRS_Service
xml”、“hdfs-site.xml”和“hosts”文件。 参考更新客户端配置文件,在MRS控制台下载客户端配置文件,解压后: 从“MRS_Services_ClientConfig_ConfigFiles > MRS_Services_ClientConfig_Config
Producer使用建议 同步复制客户端需要配合使用:acks=-1 配置发送失败重试:retries=3 发送优化:linger.ms=0 生产端的JVM内存要足够,避免内存不足导致发送阻塞 Topic使用建议 配置要求:推荐3副本。 单Topic最大分区数建议为20。 Topic副本数为3(当前版本限制,不可调整)。
String 后端服务器组名称。为后端服务地址选择服务器组,便于统一修改对应服务器组的后端地址。 status Integer 后端服务器状态 1:可用 2:不可用 port Integer 后端服务器端口 最小值:0 最大值:65535 ecs_id String 后端云服务器的编号。
bind_num Integer 流控绑定的API数量 is_inclu_special_throttle Integer 是否包含特殊流控配置 1:包含 2:不包含 create_time String 创建时间 状态码: 401 表4 响应Body参数 参数 参数类型 描述 error_code
2及以上版本 Python:2.0.1及以上版本 Go:1.8.2及以上版本 C#:1.5.2及以上版本 客户端开发和配置建议: 请参见客户端使用建议和客户端参数配置建议。 父主题: 开发说明
获取“core-site.xml”、“hbase-site.xml”、“hdfs-site.xml”和“hosts”文件。 参考更新客户端配置文件,在MRS控制台下载客户端配置文件,解压后: 从“MRS_Services_ClientConfig_ConfigFiles > MRS_Services_
VPC通道后端服务器组描述 member_group_weight Integer VPC通道后端服务器组权重值。 当前服务器组存在服务器且此权重值存在时,自动使用此权重值分配权重。 最小值:0 最大值:100 dict_code String VPC通道后端服务器组的字典编码 支持英文,数字,特殊字符(-_
终止 “终止”处理器用于结束组合应用内的流任务。 “终止”处理器一般置于流任务的末端。 “终止”处理器无需配置参数。 父主题: 处理器
数据集成任务 MRS Hive目标端写入时出现数据乱码 MRS Hive写入时数据全部写在第一个字段里 目标端任务报任务运行超时 MySQL到MRS Hive时目标端报“could only be written to 0 of the 1 minReplication nodes
”。 EDIFACT版本 仅当“标准”选择“EDIFACT”时需要配置。 选择EDIFACT的版本号。EDIFACT主要用于欧洲和亚洲地区,默认版本为40100。 X12版本 仅当“标准”选择“X12”时需要配置。 选择X12的版本号。X12主要用于北美地区,默认版本为005010。
腾讯问卷 腾讯问卷连接器用于实现在工作流中通过配置操作腾讯问卷相关功能。 腾讯问卷是腾讯推出的在线问卷调查平台,提供从问卷设计、数据采集到统计分析的⼀站式专业调查研究服务。 创建腾讯问卷连接 登录新版ROMA Connect控制台。 在左侧导航栏选择“连接器”,在连接器页面单击“新建连接”。
在左侧导航栏选择“组合应用”,在组合应用页面找到要添加变量配置的组合应用。 单击组合应用上的“”,选择“编辑”,进入组合应用的编辑界面。 单击页面正上方的“变量配置”。 在变量配置弹窗中单击“添加”,添加变量。 表2 配置变量 参数 说明 变量名 填写变量的名称,后续将通过变量名称进行引用。 配置类型 选择变量的数据
数据源的接入配置示例如下图所示。 图1 LDAP数据源配置示例 完成数据源接入配置后,单击“开始检测”,检测ROMA Connect与数据源之间是否能够连通。 若测试结果为“数据源连接成功!”,则继续下一步。 若测试结果为“数据源连接失败!”,则检查数据源状态和数据源连接参数配置,然后单击“重新检测”,直到连接成功为止。
数据源”,单击“创建数据源”,进入创建数据源页面。接着选择“SFTP”类型的数据源,然后在数据源输入框中输入数据源名称。 在页面中配置数据源的连接信息,如下表所示。 表1 数据源连接信息 参数 配置说明 数据源名称 填写数据源的名称,根据规划自定义。建议您按照一定的命名规则填写数据源名称,方便您快速识别和查找。
录,可以将历史测试参数导入到左侧测试参数中,并再次测试。 部署后端。 后端测试完成后,在页面右上角单击“部署”,在确认弹窗中单击“立即部署”,部署后端服务。 发布函数API。 在页面右上角单击“发布”。 在发布弹窗中配置前端API的相关信息,完成后单击“立即发布”,为该后端创建一
后端创建完成后,页面自动跳转到该后端的编辑器页面,后端类型默认为数据后端。 配置和部署数据后端。 在编辑器页面左侧单击“添加数据源”。 在添加数据源弹窗中配置数据源信息,完成后单击“立即添加”。 表2 数据源配置 参数 配置说明 选择数据源 选择创建MQS到数据库的集成任务中接入的MySQL数据源。