检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
在传输CSV文件的时候会跳过标题行,这时源端抽取的行数,会比目的端写入的行数多一行,并在日志文件中进行说明跳过了标题行。 写入文件大小 这个参数是针对数据库导出到CSV文件的场景,如果一张表的数据量比较大,那么导出到CSV文件的时候,会生成一个很大的文件,有时会不方便下载或查看。
abnormal_table_out_data_number Integer 异常表输出行数,0代表全量输出。 score_switch Boolean 是否开启质量评分。 score_schema String 质量评分表所在schema。
Shell或Python脚本可以在该ECS主机上运行的最大并发数由ECS主机的/etc/ssh/sshd_config文件中MaxSessions的配置值确定。请根据Shell或Python脚本的调度频率合理配置MaxSessions的值。
表4 FormData参数 参数 是否必选 参数类型 描述 file 是 File 导入主题用的excel文件,大小必须小于4MB,且行数小于3000行。 响应参数 状态码:200 表5 响应Body参数 参数 参数类型 描述 data data object 返回的数据信息。
响应参数 状态码: 200 表4 响应Body参数 参数 参数类型 描述 total_count Integer 当前数据连接数据库记录数。 dw_id String 数据连接id。 databases Array of DatabasesList objects 数据库列表。
不同规格的资源组支持迁移的任务数或创建作业的最大数存在上限,您需要根据业务需要选择合适规格的资源组。单个作业(最少需要2 CU)最多支持创建50张表。 小规格:16CUs,创建作业的最大数量为7。适用于测试,不支持高可用,不建议选择。
Shell或Python脚本可以在该ECS主机上运行的最大并发数由ECS主机的/etc/ssh/sshd_config文件中MaxSessions的配置值确定。请根据Shell或Python脚本的调度频率合理配置MaxSessions的值。
该参数为本次执行的作业配置相关优化参数(例如线程、内存、CPU核数等),用于优化资源使用效率,提升作业的执行性能。 注意: 系统支持Flink Jar作业运行前能够查询历史checkpoint,并选择从指定checkpoint启动。
响应参数 状态码: 200 表4 响应Body参数 参数 参数类型 描述 count Integer 当前工作空间用户记录数。 total_page Integer 查询结果总页数。 data Array of Workspacebody objects 工作空间列表。
fail_num Integer 失败调用量(取数失败)。 legal_num Integer 合法调用量(通过校验)。 illegal_num Integer 非法调用量(无法通过校验)。
说明: 为本次执行的作业配置相关优化参数(例如线程、内存、CPU核数等),用于优化资源使用效率,提升作业的执行性能。Spark代理连接不支持该配置。 在MRS API连接模式下,单算子作业Spark SQL支持程序运行参数。
total_count Integer 当前表中字段记录数。 columns Array of ColumnsList objects 字段列表。 表5 ColumnsList 参数 参数类型 描述 comment String 字段注解。
响应参数 状态码: 200 表4 响应Body参数 参数 参数类型 描述 count Integer 当前分页返回数据连接记录数。 max_records Integer 返回记录总数,一个工作空间最多只能创建的数据连接条数。
响应参数 状态码: 200 表4 响应Body参数 参数 参数类型 描述 total_count Integer 当前数据连接schema记录数。 dw_id String 数据连接id。 database String 数据库名称。
响应参数 状态码: 200 表4 响应Body参数 参数 参数类型 描述 count Integer 当前工作空间用户记录数。 total_page Integer 查询结果总页数。
当您的每日作业节点调度次数接近、达到该规格,或需要扩充数据开发作业节点运行的并行数上限时,建议购买作业节点调度次数/天增量包,以避免作业调度和运行并发数受限。
在表达式内可以使用整型数,浮点数,字符串,常量true、false和null。 数据进行转换过程中,替换内容包含特殊字符时,需要先使用\将该字符转义成普通字符。 表达式支持以下两个环境变量: value:当前字段值。 row:当前行,数组类型。
表4 FormData参数 参数 是否必选 参数类型 描述 file 是 File 导入用的excel文件,大小必须小于4MB,且行数小于3000行。 响应参数 状态码:200 表5 响应Body参数 参数 参数类型 描述 data data object 返回的数据信息。
fail_num Integer 失败调用量(取数失败)。 legal_num Integer 合法调用量(通过校验)。 illegal_num Integer 非法调用量(无法通过校验)。
fail_num Integer 失败调用量(取数失败)。 legal_num Integer 合法调用量(通过校验)。 illegal_num Integer 非法调用量(无法通过校验)。 cost_time_avg Number 请求平均时长。