检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
配置源端数据信息 概述 本节主要提供数据集成任务源端信息的配置说明。源端信息用于告诉ROMA Connect如何从源端获取待集成的数据,包括数据源、数据格式、数据范围等。对于不同的数据源类型,其源端信息配置有所差异。 支持“定时”模式的源端数据类型 支持“实时”模式的源端数据类型
图解应用与数据集成平台
配置检索 概述 帮助用户精确检索到目标数据资产,快速掌握数据的信息架构和分布情况等重要信息。 前提条件 已完成相关数据的采集,数据采集操作参考采集技术模型和录入业务模型。 操作步骤 登录ROMA Connect,在“实例”页面单击实例上的“查看控制台”,进入实例控制台。 在左侧的导航栏选择“应用业务模型ABM
填写任务的描述信息。 集成模式 选择数据集成的模式。使用API作为源端数据源时仅支持定时任务,此处选择“定时”。 任务标签 添加任务标签,用来对任务进行分类,方便用户快速查询。为简单起见,此处不设置。 企业项目 选择任务所属的企业项目,保持默认设置“default”。 配置任务计划信息。 为简单起见,任务计划信息保持默认设置。
基本概念 RCU RCU(ROMA Compute Unit)即ROMA计算单元,为新版ROMA Connect的能力计算单元。每个RCU可分配到不同的集成能力上,包括数据集成、服务集成、消息集成、设备集成、组合应用等。根据分配的RCU数量,各集成能力提供不同的性能规格,分配的RCU数量越多,集成能力的性能规格越高。
配置标注 概述 用户可以通过创建标注规则来对所关注的数据进行标注,以帮助用户更好地管理和使用数据。支持创建标注任务,可以自动或者手动对数据进行标注。 前提条件 已完成相关数据的采集,模型采集操作参考采集技术模型和录入业务模型。 操作步骤 登录ROMA Connect,在“实例”页
创建模型主题 概述 在这里用户可以使用简单易用的绘制工具,自定义数据资产模型的架构流程图,可在数据地图中进行展示。 前提条件 已完成采集技术模型和录入业务模型。 创建模型主题 登录ROMA Connect,在“实例”页面单击实例上的“查看控制台”,进入实例控制台。 在左侧的导航栏选择“应用业务模型ABM
的控制资源的访问。 通过IAM,您可以在华为云账号中给员工创建IAM用户,并使用策略来控制他们对华为云资源的访问范围。例如您的员工中有负责软件开发的人员,您希望他们拥有ROMA Connect的使用权限,但是不希望他们拥有删除ROMA Connect等高危操作的权限,那么您可以使
并实时将新增的数据集成到目标端。 使用Kafka作为源端数据源时仅支持实时任务,此处选择“实时”。 任务标签 添加任务标签,用来对任务进行分类,方便用户快速查询。 企业项目 选择任务所属的企业项目,保持默认设置“default”。 配置源端数据信息。 表4 源端信息 参数 配置说明
考表1。 描述 建议按照任务的实际用途补充任务描述,方便区分不同任务。任务描述在创建完成后可修改。 任务标签 添加任务标签,用来对任务进行分类,方便用户快速查询。可选择已有的标签进行关联,如果没有可单击添加按钮,添加新标签,新标签会在任务保存时被保存,再创建任务时可直接搜索该标签。
创建集成应用 集成应用概述 ROMA Connect通过集成应用来实现同一实例内不同用户间的资源隔离。用户在ROMA Connect实例中创建的资源(如数据源、API、Topic、产品等)都要有归属的集成应用,非管理员权限(Tenant Administrator权限)的IAM用
ROMA Connect自定义策略 如果系统预置的ROMA Connect权限,不满足您的授权要求,可以创建自定义策略。自定义策略中可以添加的授权项(Action)请参考细粒度策略支持的授权项。 目前华为云支持以下两种方式创建自定义策略: 可视化视图创建自定义策略:无需了解策略语
Mysql到Mysql时源端报“Illegal mix of collations for operation 'UNION'”错误 原因分析 从源端数据源视图中查看,视图定义语句使用了union,但是union两边字段编码不一致,须统一编码。 解决方案 建议使用CONVERT转换为统一编码,如:CONVERT
检索模型 概述 通过模型地图,用户可以根据模型的名字和路径关键字进行资产检索,快速查找所需数据信息。 前提条件 已完成采集技术模型和录入业务模型。 操作步骤 登录ROMA Connect,在“实例”页面单击实例上的“查看控制台”,进入实例控制台。 在左侧的导航栏选择“应用业务模型ABM
创建资产 您可以新建资产并上架到资产目录,开放给本租户内的用户订阅。 新建资产 登录新版ROMA Connect控制台。 在左侧导航栏选择“资产中心>我的资产”。 在“我的创建”页签下,单击“新建资产”。 在“新建资产”弹窗中,配置如下参数。 表1 新建资产说明 参数 说明 资产类型
配置业务术语 概述 在业务术语中,您可以添加数据标准,模型术语。其中数据标准中可以同步第三方数据标准,仅支持上架和下架功能,不支持修改。在模型目录中编辑模型实例时,可以绑定数据标准。上架之后,数据标准在模型地图中可以进行检索。在模型术语详情中,您可以将模型术语和模型实例进行绑定。
接入扩展采集器(可选) 概述 扩展采集器可以支持同一网段内本地ABM服务采集远端服务模型数据,增强扩展能力。扩展采集器提供远端服务注册采集器能力,比如支持用户注册技术模型采集器,结合自定义数据源,可以采集远端服务的技术模型,在模型地图中进行检索。注册业务模型采集器,结合自定义数据
目标表中配置的RowId字段类型不正确导致写入数据失败 原因分析 使用RowId的方式采集Oracle表数据时,由于设置表字段类型不正确,导致报错,如下图。 解决方案 修改表字段类型,RowId一般是使用字母、数字生成的18位字符串,采集到目标端需要为字符类型。 父主题: 数据集成组合任务
读取MySQL的binlog时报“binlog probably contains events generated with statement or mixed based replication forma”错误 问题描述 组合任务运行失败,界面报错为binlog probably
Go SDK使用说明 操作场景 使用Go语言调用APP认证的API时,您需要先获取SDK,然后新建工程,最后参考调用API示例调用API。 前提条件 已获取API的调用信息,具体请参见开发准备。 已安装开发工具和Go开发语言环境,具体请参见开发准备。 已在IntelliJ IDE