-
接入PostgreSQL数据源 - 应用与数据集成平台 ROMA Connect
填写数据源的描述信息。 连接模式 选择连接数据库模式。 默认:由系统根据用户配置自动拼接数据源连接字符串。 专业:由用户自己输入数据源连接字符串。 连接地址 仅当“连接模式”选择“默认”时需要配置。 填写数据库的连接IP地址和端口号。 数据库名 仅当“连接模式”选择“默认”时需要配置。
-
接入自定义数据源 - 应用与数据集成平台 ROMA Connect
数据层。 完成数据源接入配置后,单击“测试连接”,检测ABM与数据源之间是否能够连通。 若测试结果为“测试连接成功!”,则继续下一步。 若测试结果为“测试连接失败!”,则检查数据源状态和数据源连接参数配置,然后单击“测试连接”,直到连接成功为止。 单击“保存”,完成数据源的接入。
-
数据源管理 - 应用与数据集成平台 ROMA Connect
接入FI Hive数据源 接入MySQL数据源 接入MongoDB数据源 接入MRS Hive数据源 接入MRS HBase数据源 接入FI HBase数据源 接入Oracle数据源 接入SQL Server数据源 接入DAMENG数据源 接入POSTGRESQL数据源 接入SFTP数据源
-
创建组合任务映射 - 应用与数据集成平台 ROMA Connect
数组长度:1 - 9999 表4 ext_info 参数 是否必选 参数类型 描述 server_id 否 String mysql的serverId.数据源为Mysql时,ServerID必填 最小长度:1 最大长度:20 表5 MultiTaskColumnInfo 参数 是否必选
-
修改组合任务映射 - 应用与数据集成平台 ROMA Connect
数组长度:1 - 9999 表4 ext_info 参数 是否必选 参数类型 描述 server_id 否 String mysql的serverId.数据源为Mysql时,ServerID必填 最小长度:1 最大长度:20 表5 MultiTaskColumnInfo 参数 是否必选
-
创建信息架构 - 应用与数据集成平台 ROMA Connect
若数据源分组选择BIGDATA,即可选HIVE/FIHIVE;若数据源分组选择DB,即可选MYSQL/GAUSSDB/GAUSSDB_T/ORACLE/SQLSERVER/POSTGRESQL/DAMENG;若数据源组选择FILE,即可选EXCEL/SWAGGER/FILE_SYSTEM
-
什么是应用与数据集成平台 - 应用与数据集成平台 ROMA Connect
、快速、无侵入式的数据集成,可以实现跨机房、跨数据中心、跨云的数据集成方案,并能自助实施、运维、监控集成数据。 例如集团企业场景中,企业与合作伙伴使用的数据源不一样,难以形成企业之间有效的信息传输。FDI提供了多种数据源之间转换的方式,支持MySQL、Kafka、API等主流格式之间的转换。
-
通过函数API开放数据 - 应用与数据集成平台 ROMA Connect
var config = new DataSourceConfig() config.setType("mysql") config.setUrl("jdbc:mysql://127.0.0.1:3306/db?allowPublicKeyRetrieval=true")
-
接入POSTGRESQL数据源 - 应用与数据集成平台 ROMA Connect
host为数据库的连接地址。 port为数据库的连接端口号。 dbname为要接入的POSTGRESQL数据库名。 用户名 数据库的登录用户名。 密码 数据库的登录密码。 完成数据源接入配置后,单击“测试连接”,检测ABM与数据源之间是否能够连通。 若测试结果为“测试连接成功!”,则继续下一步。
-
QQ邮箱 - 应用与数据集成平台 ROMA Connect
录管理,还可以设置邮件过滤和垃圾邮件过滤等安全保护措施。 前提条件 已获取QQ邮箱授权码,具体操作请参考配置QQ邮箱授权码。 创建QQ邮箱连接 登录新版ROMA Connect控制台。 在左侧导航栏选择“连接器”,在连接器页面单击“新建连接”。 选择“QQ邮箱”连接器。 在弹窗中配置连接器信息,完成后单击“确定”。
-
接入DWS数据源 - 应用与数据集成平台 ROMA Connect
是否使用JDBC字符串 选择连接数据库模式。 否:由系统根据用户配置自动拼接数据源连接字符串。 是:由用户自己输入数据源连接字符串。 JDBC字符串 仅当“是否使用JDBC字符串”选择“是”时需要配置。 DWS数据库的JDBC格式连接串,格式:jdbc:postgresql://host:port/dbname。
-
IBM MQ - 应用与数据集成平台 ROMA Connect
和格式化。 创建IBM MQ连接 登录新版ROMA Connect控制台。 在左侧导航栏选择“连接器”,在连接器页面单击“新建连接”。 选择“IBM MQ”连接器。 在弹窗中配置连接器信息,完成后单击“确定”。 参数 说明 连接名称 填写连接器实例名称。 主机IP地址 填写IBM
-
创建后端API脚本 - 应用与数据集成平台 ROMA Connect
oracle:oracle数据源类型 mysql:mysql数据源类型 mongodb:mongodb数据源类型 redis:redis数据源类型 postgresql:postgresql/opengauss数据源类型 hive:hive数据源类型 mssql:sqlserver数据源类型 sql
-
163邮箱 - 应用与数据集成平台 ROMA Connect
63邮箱授权码。 创建163邮箱连接 登录新版ROMA Connect控制台。 在左侧导航栏选择“连接器”,在连接器页面单击“新建连接”。 选择“163邮箱”连接器。 在弹窗中配置连接器信息,完成后单击“确定”。 参数 说明 连接名称 填写连接器实例名称。 邮箱地址 发件人的163邮箱地址。
-
IBM MQ - 应用与数据集成平台 ROMA Connect
和格式化。 创建IBM MQ连接 登录新版ROMA Connect控制台。 在左侧导航栏选择“连接器”,在连接器页面单击“新建连接”。 选择“IBM MQ”连接器。 在弹窗中配置连接器信息,完成后单击“确定”。 参数 说明 连接名称 填写连接器实例名称。 主机IP地址 填写IBM
-
连接器RESTful接口规范 - 应用与数据集成平台 ROMA Connect
Object 数据源参数对象。包括连接器接数据库依赖的参数,所有参数组成的Json体。 params 是 Params 连接器所需参数对象。 meta-data 是 List<Meta-data> 元数据参数列表。 datas 是 List<Object> 连接器处理的数据列表。 表7 Params说明
-
查看监控指标 - 应用与数据集成平台 ROMA Connect
指标主要针对Oracle类型任务,MySQL类型可忽略。 如果一个事务的数据量超过了10W,可认定此事务为超大事务,此指标统计上一统计周期内(5分钟)出现超大事务的数量,根据业务实际情况,如果认为实际业务不应该存在超过10W 数据量的事务,则可以配置 >= 1。 ≥0 单位:个 任务
-
HTTP请求 - 应用与数据集成平台 ROMA Connect
HTTP请求连接器可以通过HTTP/HTTPS协议调用其它开放的API,以获取编排所需的数据。 创建HTTP请求连接 登录新版ROMA Connect控制台。 在左侧导航栏选择“连接器”,在连接器页面单击“新建连接”。 选择“HTTP请求”连接器。 在弹窗中配置连接器信息,完成后单击“确定”。
-
FTP - 应用与数据集成平台 ROMA Connect
决定。 创建FTP连接 登录新版ROMA Connect控制台。 在左侧导航栏选择“连接器”,在连接器页面单击“新建连接”。 选择“FTP”连接器。 在弹窗中配置连接器信息,完成后单击“确定”。 参数 说明 连接名称 填写连接器实例名称。 协议 选择FTP连接所使用的协议,当前支持选择“FTP”和“SFTP”。
-
定时器 - 应用与数据集成平台 ROMA Connect
定时器 定时器是一种能够按照预定的时间间隔触发特定操作的触发器。它可以在设定的时间周期内周期性地触发操作,也可以在指定的时间点触发操作。定时器常用于实现定时任务、定时调度等功能。 支持的动作 每分钟触发 每小时触发 每周触发 每月触发 固定时间间隔触发 配置参数 表1 每分钟触发