检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
DataSourceClient类说明 路径 com.roma.apic.livedata.client.v1.DataSourceClient 说明 连接数据源,执行SQL语句、存储过程或NOSQL查询语句。 使用示例 SQL数据源示例: importClass(com.roma
的“查看控制台”,进入实例控制台。 在左侧的导航栏选择“消息集成 MQS > Topic管理”,单击“导入Topic”。 在弹窗中选择本地保存的Topic文件,并导入。 导入成功后,在页面的Topic列表中可查看导入的Topic。 导出Topic 登录ROMA Connect控制
接入MongoDB数据源 概述 ROMA Connect支持把MongoDB数据库作为一个数据源,并用于数据集成任务或用于创建数据API。在使用MongoDB数据源前,您需要先接入数据源。 前提条件 每个接入的数据源都要归属到某个集成应用下,在接入数据源前您需要有可用的集成应用,否则请提前创建集成应用。
接入DM数据源 概述 ROMA Connect支持把DM数据库作为一个数据源,并用于数据集成任务。在使用DM数据源前,您需要先接入数据源。 前提条件 每个接入的数据源都要归属到某个集成应用下,在接入数据源前您需要有可用的集成应用,否则请提前创建集成应用。 操作步骤 登录ROMA
接入DB2数据源 概述 ROMA Connect支持把DB2数据库作为一个数据源,并用于数据集成任务。在使用DB2数据源前,您需要先接入数据源。 前提条件 每个接入的数据源都要归属到某个集成应用下,在接入数据源前您需要有可用的集成应用,否则请提前创建集成应用。 操作步骤 登录ROMA
容器Filebeat被删除并重新启动,会继续读取该目录中的内容(如registry),并在收集数据时更新该目录,这样可确保Filebeat只收集新的日志数据,避免将已经发送过的数据再次发送。 执行以下命令为log目录配置权限。 chmod 777 /filebeat/log 编辑filebeat
的配置请参见触发器。 执行动作:执行动作可选择各类型的连接器和处理器,具体触发器和连接器的配置请参考连接器和处理器。 完成后单击右上角的“保存”。 在新建组合任务弹窗中填写组合应用的名称和描述,然后单击“确定”,完成组合应用的创建。 父主题: 创建组合应用
DWS变成只读状态导致FDI任务运行失败 原因分析 在DWS磁盘空间达到阈值,例如80%,或者某些大数据量的表存在数据倾斜时,DWS集群会变为只读状态。从FDI侧来看,在某个时间点,所有访问DWS的任务均异常停止。 解决方案 处理DWS只读状态问题,恢复数据库服务后,如果FDI的
配置触发器节点。根据触发器节点类型,配置对应的触发参数,如Open API节点您可能需要配置API请求参数和请求Body等。 图3 配置Open API节点参数 单击“保存”,开启工作流调试。 执行调试操作,对工作流进行调试。 图4 调试工作流 添加断点:单击工作流中的节点,即可添加断点,工作流在调试过程中可
"user": "abc" } } status:必选字段,用于标识认证结果。只支持“allow”或“deny”,“allow”表示认证成功,“deny”表示认证失败。 context:必选字段,为认证的响应结果。只支持字符串类型键值对,键值不支持JSON对象或数组。 context中的
"user": "abc" } } status:必选字段,用于标识认证结果。只支持“allow”或“deny”,“allow”表示认证成功,“deny”表示认证失败。 context:必选字段,为认证的响应结果。只支持字符串类型键值对,键值不支持JSON对象或数组。 context中的
定时任务启动后,ROMA Connect按照任务计划进行数据集成。首次执行时,会把所有符合条件的源端数据集成到目标端,后续根据任务配置,集成符合条件的全量数据或只集成增量数据。 实时任务启动后,ROMA Connect会不断检测源端数据变更。首次执行时,会把所有符合条件的源端数据集成到目标端,后续若检测到新增数据,则将其集成到目标端。
函数工作流 函数工作流连接器用于对接华为云函数工作流(FunctionGraph)服务,可以调用已创建的函数进行数据处理,后续节点可引用变量的方式引用函数处理的结果。 前提条件 使用函数工作流服务时,还需要具备项目级服务FunctionGraph Administrator角色权限。
数据集成任务 MRS Hive目标端写入时出现数据乱码 MRS Hive写入时数据全部写在第一个字段里 目标端任务报任务运行超时 MySQL到MRS Hive时目标端报“could only be written to 0 of the 1 minReplication nodes
是否启用该规则,保持默认开启。 在规则列表中单击2中创建的规则名称,进入规则详情页面。 在“数据源端”下单击“创建数据源端”,设置数据源端相关配置,然后单击“保存”。 图2 数据源端配置 表8 数据源端配置 参数 配置说明 产品名称 选择步骤一:定义产品所创建的产品。 设备名称 选择步骤二:注册设备所创建的设备。
为设备设置标签信息,用于快速查找设备。 说明: 编辑标签时如遇到实际没有重复,但提示重复的情况,可在编辑页面将标签全部删除后,重新添加,然后保存即可。 设备描述 填写设备的描述信息。 为设备添加自定义Topic(可选) 如果设备的基础Topic无法满足您的使用需要,您可以为设备自定义Topic。
数据都能被集成到Redis数据源的不同key中。 “数据类型”选择“List”、“Set”或“ZSet”时,“key后缀字段”可以为空,即只由“key前缀”生成一个key,此时所有数据行作为元素被集成到Redis数据源的同一个key中。 分隔符 仅当“key后缀字段”不为空时需要配置。
方案概述 应用现状 随着信息化技术的不断发展,企业的业务系统越来越多,各业务系统间需要进行数据的互联互通,以提升企业的运作效率。如何实现企业内新老业务系统之间的数据安全互通,甚至是跨企业业务系统的数据安全互通,成为企业越来越重视的问题。 随着企业的跨区域发展,企业的业务系统也随之
组合任务自动映射 功能介绍 组合任务自动映射(最大支持2000张表)。 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。API Explorer可以自动生成SDK代码示例,并提供SDK代码示例调试功能。 URI POST /v2/{project_id}/f
查询自定义后端服务数据源列表 功能介绍 查询自定义后端服务数据源列表。 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。API Explorer可以自动生成SDK代码示例,并提供SDK代码示例调试功能。 URI GET /v2/{project_id}/ap