检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
view_text String 采集的视图来源,dws视图逆向使用。 target_table_name String 目的表名称。 details Array of TableMappingDetailVO objects 详情。
因此,Apache Doris能够较好的满足报表分析、即时查询、统一数仓构建、数据湖联邦查询加速等使用场景。 云数据库 RDS 华为云RDS是一种基于云计算平台的即开即用、稳定可靠、弹性伸缩、便捷管理的在线关系型数据库服务。
集群最大抽取并发数规格 该参数设置为适当的值可以有效提升迁移速度,过小则会限制迁移速度,过大则会导致源端负载过高、影响系统稳定性。 不同规格的CDM集群支持的最大抽取并发数规格不同,并发数上限建议设置为vCPU核数*2。
运行程序参数 否 为本次执行的作业配置相关优化参数(例如线程、内存、CPU核数等),用于优化资源使用效率,提升作业的执行性能。 说明: 数据连接为MRS API连接时支持为Spark SQL作业独立配置需要的资源(例如线程、内存、CPU核数并指定MRS资源队列等)。
reversed Boolean 是否是逆向的。 partition_conf String 分区表达式。 dirty_out_switch Boolean 异常数据输出开关。 dirty_out_database String 异常数据输出库。
选择了资源队列以后,单击可以查看队列性能,系统支持查看DLI运行作业数和队列CU使用量,系统显示队列近24小时性能情况。 说明: 当队列选择为“default”时,会提示“暂不支持"default"队列性能展示”。 还未选择资源队列时,图标灰化不可查看队列性能。
单个cdm.large规格实例理论上可以支持1TB~8TB/天的数据迁移,实际传输速率受公网带宽、集群规格、文件读写速度、作业并发数设置、磁盘读写性能等因素影响。更多详情请参见性能白皮书。 父主题: 数据集成(CDM作业)
reversed Boolean 是否是逆向的,只读。 table_version Integer 为2时,表示汇总表是汇总生成的,只读。 partition_conf String 分区表达式。 dirty_out_switch Boolean 异常数据输出开关。
view_text String 采集的视图来源,dws视图逆向使用。 target_table_name String 目的表名称。 details Array of TableMappingDetailVO objects 详情。
例如“规则模板”为“字段空值”时,单击告警参数“空值行数”,在“告警表达式”输入框会显示为“${1}”。 逻辑运算符 可选,本参数支持将单一告警表达式的结果进行逻辑运算,组成更复杂的告警条件。
免费版数据开发组件的脚本数和作业数的配额限制分别为20。 免费版仅用于试用场景,在业务负荷大的场景下,无法保证免费版实例上业务的正常运行。 免费版不支持通过API调用的方式使用,仅支持控制台方式使用。 免费版受成本、资源等因素限制,提供的总数量有限。
Cdm.0009 400 %s不是整型数字或超出整型数的取值范围[0~2147483647]。 输入参数不是整型数字或超出整型数的取值范围。 请根据错误提示将参数修改正确后请重试。 Cdm.0010 400 整数必须在区间[%s]。 校验程序的参数缺失或长度为0。
reversed Boolean 是否是逆向的。 partition_conf String 分区表达式。 dirty_out_switch Boolean 异常数据输出开关。 dirty_out_database String 异常数据输出库。
reversed Boolean 是否是逆向的,只读。 table_version Integer 为2时,表示汇总表是汇总生成的,只读。 partition_conf String 分区表达式。 dirty_out_switch Boolean 异常数据输出开关。
limit 否 Integer 分页返回结果,指定每页最大记录数,范围[1,100]。 默认值:10 resourceName 否 String 资源名称。
REST API SDK参考 本章节介绍了如何在API Explorer通过DataArts Studio API在线生成SDK代码,以及如何获取DataArts Studio服务的REST API SDK包和参考文档。 当前DataArts Studio服务的API Explorer
view_text String 采集的视图来源,dws视图逆向使用。 target_table_name String 目的表名称。 details Array of TableMappingDetailVO objects 详情。
脚本内容是通过gsql连接dws查询某库表数据行数的。
Shell或Python脚本可以在该ECS主机上运行的最大并发数由ECS主机的/etc/ssh/sshd_config文件中MaxSessions的配置值确定。请根据Shell或Python脚本的调度频率合理配置MaxSessions的值。
确认表内桶数。 使用Hudi BUCKET表时需要设置Bucket桶数,桶数设置关系到表的性能,需要格外引起注意。 非分区表桶数 = MAX(单表数据量大小(G)/2G*2,再向上取整,4)。 分区表桶数 = MAX(单分区数据量大小(G)/2G*2,再后向上取整,1)。