检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
MRS HBase 获取MRS HBase配置文件方法如下: 获取“krb5.conf”和“user.keytab”文件。 参考下载用户认证文件,在MRS Manager下载用户认证文件,解压后得到“krb5.conf”和 “user.keytab”文件。 获取“core-site
MRS Kafka 获取MRS Kafka配置文件方法如下: 获取“krb5.conf”和“user.keytab”文件。 参考下载用户认证文件,在MRS Manager下载用户认证文件,解压后得到“krb5.conf”和 “user.keytab”文件。 获取“fikafka-producer
最大长度:64 manufacturer_id String 厂商ID,未填写产品ID时厂商ID和型号必填。 最小长度:0 最大长度:64 model String 型号,未填写产品ID时厂商ID和型号必填。 最小长度:0 最大长度:64 protocol_type Integer 产品
选填,建议通过页面创建。 AppName 应用名称。 必填,应用名称应已存在。 Sources 数据源端配置。 选填,建议通过页面创建。 Destinations 数据目标端配置。 选填,建议通过页面创建。 父主题: 规则引擎
已完成采集技术模型和录入业务模型。 创建模型主题 登录ROMA Connect,在“实例”页面单击实例上的“查看控制台”,进入实例控制台。 在左侧的导航栏选择“应用业务模型ABM > 模型地图”,单击页面右上角的“模型主题”按钮,单击“创建模型主题”。 在模型主题设计页面配置配置基本信息,完成后单击“保存”。
在创建Topic弹窗中填写Topic相关配置信息,然后单击“确定”,创建Topic。 图1 创建Topic 表1 Topic配置 参数 配置说明 Topic名称 填写Topic的名称,根据规划自定义。建议您按照一定的命名规则填写Topic名称,方便您快速识别和查找。 集成应用 选择1中创建的集成应用。
状态码 表1 状态码 状态码 说明 200 OK 请求正常。 201 Created 创建类的请求完全成功。 202 Accepted 已经接受请求,但未处理完成。 204 No Content 请求完全成功,同时HTTP响应不包含响应体。 400 Bad Request 非法请求。
采用HTTPS协议。 Endpoint 指定承载REST服务端点的服务器域名或IP,不同服务不同区域的Endpoint不同,具体请参考地区和终端节点获取。 resource-path 资源路径,也即API访问路径。从具体API的URI模块获取,例如“获取用户Token”API的r
批量删除资产 功能介绍 批量删除资产。 创建批量删除指定条件的资产的作业任务。 最大支持100个应用和任务。 一个用户同一时刻只能创建一个资产删除作业任务,没有Running状态的作业任务存在。 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。API Exp
批量导出资产 功能介绍 批量导出资产。 创建批量导出指定条件的资产的作业任务。 最大支持100个应用和任务。 一个用户同一时刻只能创建一个资产导出作业任务,请确保当前没有Running状态的资产导出作业任务存在。 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。API
opic下有数据,但是FDI任务没有采集到数据。 原因分析 数据源配置的不是本实例下的MQS地址,所以本实例下的MQS中虽然有消息,但是FDI任务采集不到数据。 解决方案 检查任务配置与数据源配置,修改数据源配置为正确的MQS地址。 父主题: 数据集成任务
本章节介绍任务执行完成后,如何配置消息发送,如果不需要发送消息可不配置。 前提条件 已经在对应的应用下创建Kafka和MRS Kafka数据源,数据源创建参考接入Kafka数据源和接入MRS Kafka数据源。 已创建消息集成Topic并授发布和订阅权限。创建Topic和授权参考消息集成指导章节。 配置任务完成后执行
虚拟机:与之前机器相同规格且相同架构的Linux机器。 工具:需要安装Docker、NTP、Haveged服务,Docker安装请参考安装Docker,NTP配置请参考时间同步,Haveged的安装请参考安装Haveged。浏览器用于登录华为云控制台,要求Google Chrome
请确认连接信息是否正确或目标端地址是否可达,其中用户名和密码分别对应topic所属应用的appKey和appSecret,请检查后重试 请确认连接信息是否正确或目标端地址是否可达,其中用户名和密码分别对应topic所属应用的appKey和appSecret,请检查后重试。 500 ROMA
endpoint.identification.algorithm= username和password的值分别为Topic所属集成应用的Key和Secret。您可以参考查看和编辑集成应用获取Key和Secret。 ssl.truststore.location的值为1中解压得到的客
FDI通过公网对接其他租户的MRS HIVE如何配置? 首先需要将MRS的IP全部绑定EIP,然后在MRS配置文件中的私网IP全部替换成EIP,再到hdfs-site.xml文件中添加一个配置项“dfs.client.use.datanode.hostname”,值设为“true”。
附录:QuartZ Cron表达式配置说明 参数说明 数据集成任务支持使用QuartZ Cron表达式配置定时任务的调度计划。 QuartZ Cron表达式由6个部分组成,每个部分使用空格隔开。表达式中的六个部分从左到右代表的含义如下: 秒 分 时 日 月 周 具体参数如表1所示。
查看实例信息 概述 实例创建完成后,可在控制台查看和编辑实例的配置信息,主要包含基本信息、配置参数、数据字典、导入导出资产以及后台任务。 查看后台任务请参考查看后台任务,配置参数请参考修改实例配置参数,数据字典请参考创建数据字典,导入导出资产请参考导入导出资产。 操作步骤 登录新版ROMA
Mysql驱动自动识别tinyint(1)为bit类型,所以目标端的值都变成了1。 解决方案 修改数据源配置,连接与安全配置项选择“专业”模式,在字符串最后加上tinyInt1isBit=false的配置,如:jdbc:mysql://ip:port/database?tinyInt1isBit=false。
目标表中配置的RowId字段类型不正确导致写入数据失败 原因分析 使用RowId的方式采集Oracle表数据时,由于设置表字段类型不正确,导致报错,如下图。 解决方案 修改表字段类型,RowId一般是使用字母、数字生成的18位字符串,采集到目标端需要为字符类型。 父主题: 数据集成组合任务