检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
连接器和连接器实例的关系,类似编程中的类和类对象实例。 连接器定义了针对某种数据源的规范,连接器实例则对应了具体的RESTful服务,所以需要指定RESTful连接地址 (由部署的用户服务器地址决定)。 图3 发布连接器 接入自定义数据源。 在左侧的导航栏选择“数据源管理”,单击页面右上角的“接入数据源”。
选择日志流所在的日志组。 如果没有可选的日志组,单击“查看日志组”,跳转到云日志服务管理控制台,并创建一个日志组,具体操作请参考创建日志组。 日志流 选择运行监控日志要存储的日志流。 如果没有可选的日志流,单击“查看日志流”,跳转到云日志服务管理控制台,并创建一个日志流,具体操作请参考创建日志流。 完成后单击“确认”。
WebSocket - 支持 不支持 不支持 不支持 自定义数据源 - 支持 支持 不支持 不支持 服务集成 服务集成中创建并开放的API,支持如下请求协议:RESTful、SOAP、WebSocket。 服务集成的自定义后端支持的数据源相关信息如表2所示。 表2 自定义后端支持的数据源 数据源类型
使用Kibana查看日志 登录Kibana可视化界面。 访问地址:IP:Port 其中,IP为ELK所部署服务器的IP;Port为Kibana端口号,默认为5601,也可以在修改ELK配置时自定义端口号。如果网络中部署了防火墙,需提前配置防火墙的端口访问权限。 用户名密码:在部署ELK时自定义的用户名和密码。
在“创建物模型服务”弹窗中配置物模型服务相关信息,完成后单击“确认”。 表2 服务能力信息配置 参数 配置说明 物模型服务名称 填写物模型服务的名称,根据规划自定义。建议您按照一定的命名规则填写物模型服务名称,方便您快速识别和查找。 是否启用 是否启用该物模型服务,默认启用。 描述 填写物模型服务的描述信息。
在停止被重置消费组客户端后,需要经过ConsumerConfig.SESSION_TIMEOUT_MS_CONFIG配置的时间(默认10000毫秒),服务端才认为消费组客户端真正下线。 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。API Explorer可以自动生成
在实际业务场景中,为消息Key加随机后缀,会导致消息全局不保序,需根据实际业务判断是否适合给消息Key加随机后缀。 服务端 合理设置Topic的分区数,在不影响业务处理效率的情况下,调大Topic的分区数量。 当服务端出现消息堆积时,对生产者进行熔断,或将生产者的消息转发到其他Topic。
columns; 执行以下命令退出数据库连接。 exit; 创建XStream出站服务器。 一个XStream出站服务器只能在一个FDI集成任务中使用,若该数据库需要用于多个集成任务,需创建多个XStream出站服务器。 在命令行工具中执行以下命令以xstrmadmin用户连接到数据库实例。
量、低延迟的平台,可以处理大量的实时数据流。Kafka主要由三个部分组成:生产者、消费者和代理服务器。生产者将数据发布到Kafka集群,消费者从Kafka集群订阅数据并进行处理,代理服务器则是Kafka集群中的核心组件,负责处理消息的存储和转发。Kafka的主要优点是可扩展性、高
设备集成开发 操作场景 本文提供了通过设备集成实现设备的接入、消息收发功能的操作指导,主要分为配置设备连接信息、收发消息两部分。 设备集成支持标准的MQTT协议,您可以使用开源Eclipse paho MQTT Client与LINK进行对接,本例中Demo使用Java版本的SDK
配置检索 概述 帮助用户精确检索到目标数据资产,快速掌握数据的信息架构和分布情况等重要信息。 前提条件 已完成相关数据的采集,数据采集操作参考采集技术模型和录入业务模型。 操作步骤 登录ROMA Connect,在“实例”页面单击实例上的“查看控制台”,进入实例控制台。 在左侧的导航栏选择“应用业务模型ABM
接入OBS数据源 概述 ROMA Connect支持把OBS(对象存储服务)作为一个数据源,并用于数据集成任务。在使用OBS数据源前,您需要先接入数据源。 前提条件 每个接入的数据源都要归属到某个集成应用下,在接入数据源前您需要有可用的集成应用,否则请提前创建集成应用。 操作步骤
Polarion Polarion连接器用于实现在工作流中通过配置操作Polarion相关功能。 Polarion是一种全生命周期管理平台,用于软件开发和产品管理。它提供了一系列的工具和功能,包括需求管理、缺陷跟踪、版本控制、测试管理、项目管理等。Polarion可以帮助团队在整
接入DWS数据源 概述 ROMA Connect支持把DWS(数据仓库服务)作为一个数据源,并用于数据集成任务或用于创建数据API。在使用DWS数据源前,您需要先接入数据源。 请使用PostgreSQL数据源类型来对接DWS数据库(DWS数据源类型不推荐使用,但因历史原因,暂不下线)。
少保留2天以上的归档日志。 在首次执行数据同步期间,建议不要对源端数据库做DDL操作。 如果创建组合任务个数过多,对数据库服务器、FDI插件进程均会产生资源消耗,所以建议对一个数据库,不要创建过多组合任务。 FDI支持单个CDC任务中配置多个Schema下的多个数据库表,实现统一的全量或增量采集能力。
配置标注 概述 用户可以通过创建标注规则来对所关注的数据进行标注,以帮助用户更好地管理和使用数据。支持创建标注任务,可以自动或者手动对数据进行标注。 前提条件 已完成相关数据的采集,模型采集操作参考采集技术模型和录入业务模型。 操作步骤 登录ROMA Connect,在“实例”页
保持默认设置,不开启。 配置API的请求参数。为简单起见,此处不定义请求参数,直接单击“下一步”。 选择“后端服务类型”,为简单起见,本配置样例中选择“Mock”类型后端服务,固定返回指定响应结果。 配置API的后端配置信息。 图3 后端配置信息 表3 后端配置信息 参数 配置说明
高级:可调用不同用户和不同区域的DIS通道。 AK 填写DIS通道所属用户的访问密钥ID,AK/SK是用户在云服务平台的长期身份凭证,您可以参考访问密钥获取AK/SK。 SK 填写DIS通道所属用户的秘密访问密钥,AK/SK是用户在云服务平台的长期身份凭证,您可以参考访问密钥获取AK/SK。 Endpoint 仅当“配置类别”选择“高级”时需要配置。
Connect)对服务端(ArtemisMQ)进行身份认证。 双向认证:客户端(ROMA Connect)和服务端(ArtemisMQ)相互进行身份认证。 公钥库文件 仅当“是否开启SSL认证”选择“是”时需要配置。 SSL认证过程中,客户端使用的公钥库文件,与服务端使用的私钥相匹配。
修改集成应用配置 概述 集成应用的用户授权信息为非资产数据,在导入集成资产后根据需要重新配置。 对于资产恢复场景,需要对导入的集成应用进行配置。 对于资产迁移场景,可根据实际使用逐步配置。 前提条件 已完成集成资产的导入。 操作步骤 在实例控制台的“集成应用”页面,单击集成应用右侧的“应用授权管理”。