检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
仅当“连接模式”选择“专业”时需要配置。 填写PostgreSQL数据库的JDBC格式连接串,例如:jdbc:postgresql://{hostname}:{port}/{dbname}。 {hostname}为数据库的连接地址。 {port}为数据库的连接端口号。 {dbname}为要接入的数据库名。 用户名
插入数据违反非空约束 原因分析 任务执行异常失败,查看日志有如下信息: 解决方案 可参考以下内容进行问题排查解决: 源表中此字段可为null,但创建目标表时设置此字段为非null属性,需修改字段属性保持一致。 用户配置任务时多了一个表映射,将一个相似名称的源表配置采集数据到此目标
写速率(MB/S) MRS Hive 5 2 MRS HDFS 5 2 DWS 5 2 MySQL 6 3 Oracle 6 2 Kafka 10 8 SQL Server 6 3 PostgreSQL 4 2 Gauss100 6 3 FTP 5 3 OBS 6 3 MongoDB 0
SQL语法 数据后端与各数据库的SQL语法差异 如果需要把后端服务请求中携带的参数传递给SQL,使用${参数名}的方式传递,其中String类型的参数需要用单引号括起来,int类型的参数则不需要。 如以下示例,name为String类型参数,id为int类型参数。 select *
"info":"zz"},其中xx、yy、zz为从源端传入的数据值。 MySQL 返回页首 任务的“集成模式”为“定时”或“实时”时,可以选择MySQL作为目标端数据源,具体配置如下。 表7 目标端MySQL信息 参数 配置说明 目标端表 选择已有的表,单击“选择表字段”,可以选择只需要集成的数据列字段。
对于包年/包月计费模式的ROMA Connect实例,用户在购买时会一次性付费,服务将在到期后自动停止使用。 如果在计费周期内不再使用包年/包月资源,您可以执行退订操作,系统将根据资源是否属于五天无理由退订、是否使用代金券和折扣券等条件返还一定金额到您的账户。详细的退订规则请参见云服务退订规则概览。
选择接入数据源中已创建的数据源。 选择执行语句类型 选择执行语句的类型,可选择“SQL”和“SP”(Stored Procedure)。 如果是Redis或MongoDB数据源,选择“SQL”,实际执行语句为NoSQL。 高级设置 返回对象 填写返回对象的名称,执行语句的执行结果将封装在该对象中返回。
String 源端数据库模式,gauss100数据库使用。 sourceSelectedColumnList 否 List<Column> 源端选择的字段名列表,关系型数据库使用。 orderColumn 否 String 源端排序的字段名,可为空,关系型数据库使用。 orderType
Integer 映射关系总数 最小值:0 最大值:1000000 表5 ext_info 参数 参数类型 描述 server_id String MySQL的ServerID。 最小长度:1 最大长度:20 表6 MultiTaskMappingElement 参数 参数类型 描述 id String
选择接入数据源中已创建的数据源。 选择执行语句类型 选择执行语句的类型,可选择“SQL”和“SP”(Stored Procedure)。 如果是Redis或MongoDB数据源,选择“SQL”,实际执行语句为NoSQL。 高级设置 返回对象 填写返回对象的名称,执行语句的执行结果将封装在该对象中返回。
修改python镜像。 执行以下命令进入python镜像。 docker run -it python_image_id bash 其中,python_image_id为4中查询到的python镜像的镜像ID。 执行以下命令在镜像内安装依赖。 pip install requests 执行以下命令检查安装的依赖是否存在。
后端创建函数后端和数据后端时,涉及函数脚本或数据库执行语句的编写开发。 函数后端:创建函数后端时需要编写函数脚本,进行函数功能开发,ROMA Connect提供了部分Java类函数供用户直接使用。 数据后端:创建数据后端时需要编写执行语句,用于对数据源进行操作。 后端服务签名校验开发:若API在ROMA
libs/java-sdk-core-*.jar中com.cloud.sdk.auth.signer.DefaultSigner.class中的sign函数。 java(版本>=3.1.0) libs/java-sdk-core-*.jar中com.cloud.sdk.auth.signer.Signer
execute_status 否 String 需要搜索任务的执行状态,非必填参数,如果为空,搜索所有任务: UNSTARTED(未启动) WAITING(等待执行) RUNNING(执行中) SUCCESS(执行成功) CANCELLED(任务取消) ERROR(执行异常) 最小长度:0 最大长度:10
端字段b1,源端字段a2映射到目标端字段b2。 完成Mapping信息配置后,若需要配置异常数据存储、任务完成后执行,请前往配置异常数据存储(可选)、配置任务完成后执行(可选);否则可直接单击“保存”,完成数据集成任务的配置。 MRS Hive分区字段映射配置说明 当目标端数据类型为MRS
GMT。 任务模式 并行:总是按照设定周期执行。 串行:当前任务执行完成后才会触发下一次任务,实际执行周期=MAX(任务耗时,周期)。 立即执行一次 启动后是否立即执行一次。 表6 固定时间间隔触发 参数 说明 执行间隔 执行的时间间隔数值。 执行间隔单位 秒。 分钟。 小时。 天。 星期。
选择任务所属的集成应用,ROMA Connect会使用该集成应用的认证信息调用API。 描述 填写任务的描述信息。 开始启动时间 定时任务的开始执行时间,定时任务在执行时间开始后根据触发条件开始执行。 触发器类型 定时任务的触发方式。 CRON:使用CRON表达式设置任务的触发时间。 CALENDAR:按固定周期设置任务的触发时间。
X-Apig-count 请求经过APIC的总次数 经过APIC调用的合法请求都会返回此参数,当X-Apig-count请求头取值大于10时,会报错APIC.0612 父主题: 调用API
execute_status 否 String 执行状态,可为空。 UNSTARTED (未启动) WAITING (等待执行) RUNNING (执行中) SUCCESS (执行成功) CANCELLED (任务取消) ERROR (执行异常) 最小长度:0 最大长度:64 source_app_id
X-Apig-count 请求经过APIC的总次数 经过APIC调用的合法请求都会返回此参数,当X-Apig-count请求头取值大于10时,会报错APIC.0612 父主题: 调用API