检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
oracle:oracle数据源类型 mysql:mysql数据源类型 mongodb:mongodb数据源类型 redis:redis数据源类型 postgresql:postgresql/opengauss数据源类型 hive:hive数据源类型 mssql:sqlserver数据源类型 sql
oracle:oracle数据源类型 mysql:mysql数据源类型 mongodb:mongodb数据源类型 redis:redis数据源类型 postgresql:postgresql/opengauss数据源类型 hive:hive数据源类型 mssql:sqlserver数据源类型 sql
oracle:oracle数据源类型 mysql:mysql数据源类型 mongodb:mongodb数据源类型 redis:redis数据源类型 postgresql:postgresql/opengauss数据源类型 hive:hive数据源类型 mssql:sqlserver数据源类型 sql
Connect实例控制台选择“数据集成 FDI > 任务管理”,单击创建MQS到数据库的集成任务中创建的任务名称,在任务信息的“日志 > 运行日志”页签下,可看到任务执行成功的记录。 在停车场管理系统的数据库中,可查看写入数据表的车位状态数据。 父主题: 传统停车场管理系统数字化改造
oracle:oracle数据源类型 mysql:mysql数据源类型 mongodb:mongodb数据源类型 redis:redis数据源类型 postgresql:postgresql/opengauss数据源类型 hive:hive数据源类型 mssql:sqlserver数据源类型 sql
oracle:oracle数据源类型 mysql:mysql数据源类型 mongodb:mongodb数据源类型 redis:redis数据源类型 postgresql:postgresql/opengauss数据源类型 hive:hive数据源类型 mssql:sqlserver数据源类型 sql
MultiTaskMappingElement objects 映射关系列表,只返回前10条。 数组长度:1 - 9999 schema_mappings Array of MultiTaskSchemaMappingElement objects schema映射关系列表,只返回前10条。 数组长度:1 - 9999
为与1一致。 最小值:0 最大值:999999 缺省值:1 limit 否 Integer 每页显示条目数量,最大数量999,超过999后只返回999。 最小值:0 最大值:999999 缺省值:10 begin_time 否 Integer 日志查询的起始时间,格式timestamp(ms),使用UTC时区。
任务名称。由英文字母、数字、下划线、中划线组成,长度为4~64字符。 datasource 是 Object 数据源参数对象。包括连接器接数据库依赖的参数,所有参数组成的Json体。 params 是 Params 连接器所需参数对象。 表2 Params说明 参数 是否必选 参数类型
若使用Excel工具编辑导入文件,在编辑完成后需要按如下操作保存。 在Excel中保存时,以另存的方式保存为“CSV(逗号分隔)(*.csv)”类型文件。 使用文本编辑器打开1中保存的csv格式文件,并再次另存,另存时编码选择“带有 BOM 的 UTF-8”,保存后即得到最终的csv格式导入文件。 导入规则
使用根据连接器名称首字母生成的标准图标。 连接器名称 填写连接器的名称。 标签 填写连接器的标签。 类别 选择连接器的类别。 HTTP 数据库 华为云服务 SaaS应用 邮箱 其他 消息系统 描述 填写连接器的描述信息,用于识别不同的连接器。 单击“创建并配置详情”,进入连接器的动作配置页面。
on_delay CDC未提交最早事务的时延 统计CDC任务(组合任务)当前在处理的还未提交的最早事务对应时间距离实时的时间差。 对于MySQL类型的CDC任务,此指标表示任务正在读取的Binlog日志对应的时间与当前系统时间的差值,代表了实时读取的延迟情况。此指标的值与任务调度
Connect提供的SDK,对API请求进行签名处理。 自定义后端开发:用户在使用服务集成APIC的自定义后端创建函数后端和数据后端时,涉及函数脚本或数据库执行语句的编写开发。 函数后端:创建函数后端时需要编写函数脚本,进行函数功能开发,ROMA Connect提供了部分Java类函数供用户直接使用。
SOURCE 数据源处于任务源端 TARGET 数据源处于任务目标端 最小长度:0 最大长度:6 db_name 否 String 数据库名称,只支持MRSHIVE类型的数据源。 最小长度:0 最大长度:64 table_name 是 String 字段所在的表名。 最小长度:0
在“Delete phase”处设置数据的过期时间“Move data into phase when”。 单击“Save policy”保存策略。 创建索引模板 在页面左上角单击“”,然后选择“Management > Stack Management > Index Management”。
若使用Excel工具编辑导入文件,在编辑完成后需要按如下操作保存。 在Excel中保存时,以另存的方式保存为“CSV(逗号分隔)(*.csv)”类型文件。 使用文本编辑器打开1中保存的csv格式文件,并再次另存,另存时编码选择“带有 BOM 的 UTF-8”,保存后即得到最终的csv格式导入文件。 导入产品
dataSize:数据大小。 例如,内容${taskName},表示只发送任务名称。 FDI任务 当“执行动作”选择“FDI任务”时需要配置。 选择需要执行的下一个FDI任务。如当前任务执行完成而选择的FDI任务如果处于运行中,跳过本次调度。 完成配置后,单击“保存”,完成数据集成任务的配置。 父主题: 创建数据集成任务(普通任务)
避免和处理欠费 若ROMA Connect实例不再使用,您可以将他们删除,以免继续扣费。实例删除后,数据无法恢复,如需保存缓存数据,请提前执行数据备份并下载保存。 您可以在“费用中心 > 总览”页面设置“可用额度预警”功能,当可用额度、通用代金券和现金券的总额度低于预警阈值时,系统自动发送短信和邮件提醒。
定时任务启动后,ROMA Connect按照任务计划进行数据集成。首次执行时,会把所有符合条件的源端数据集成到目标端,后续根据任务配置,集成符合条件的全量数据或只集成增量数据。 实时任务启动后,ROMA Connect会不断检测源端数据变更。首次执行时,会把所有符合条件的源端数据集成到目标端,后续若检测到新增数据,则将其集成到目标端。
若使用文件默认目录,可填写“hdfs:///hacluster”,需要用户具有管理员权限。 若使用用户规划的目录,可填写具体目录。 若使用用户数据库目录,如“/user/hdfs/testdb”,需要用户具有对应目录的权限。 机机交互用户名 填写连接MRS HDFS的机机类型用户名。 上传配置文件