已找到以下 395 条记录
产品选择
云数据迁移 CDM
没有找到结果,请重新输入
产品选择
云数据迁移 CDM
产品选择
没有找到结果,请重新输入
  • 是否支持同步作业到其他集群? - 云数据迁移 CDM

    CDM是否支持同步作业到其他集群? 解决方案 CDM虽然不支持直接在不同集群间迁移作业,但是通过批量导出、批量导入作业功能,可以间接实现集群间作业迁移,方法如下: 将CDM集群1中所有作业批量导出,将作业JSON文件保存到本地。 由于安全原因,CDM导出作业时没有导出连接密码,连接密码全部使用“Add

  • CDM迁移数据到DWS时如何选取分布列? - 云数据迁移 CDM

    sight LibrA,且CDM在DWS端自动创建一个新表时,在创建作业字段映射界面,需要选择分布列,如图1所示。 图1 选取分布列 由于分布列选取,对于DWS/FusionInsight LibrA运行非常重要,在CDM数据迁移到DWS/FusionInsight LibrA过程中,建议按如下顺序选取分布列:

  • 是否支持批量创建作业? - 云数据迁移 CDM

    是否支持批量创建作业? 问题描述 CDM是否支持批量创建作业? 解决方案 CDM可以通过批量导入功能,实现批量创建作业,方法如下: 手动创建一个作业。 导出作业,将作业JSON文件保存到本地。 编辑JSON文件,参考该作业配置,在JSON文件中批量复制出更多作业。 将JSON文件导入CDM集群,实现批量创建作业。

  • 设置CDM告警规则 - 云数据迁移 CDM

    单击监控指标页面左上角的返回按钮,进入云监控服务界面,选择“云数据迁移服务”服务监控项对应操作列“创建告警规则”。 图1 “云数据迁移服务”服务监控项 根据界面提示设置CDM集群告警规则。 设置完成后,单击“确定”。当符合规则告警产生时,系统会自动进行通知。 更多关于监控告警信息,请参见云监控用户指南。 父主题:

  • 指定文件名迁移 - 云数据迁移 CDM

    从FTP/SFTP/OBS导出文件时,CDM支持指定文件名迁移,用户可以单次迁移多个指定文件(最多50个),导出多个文件只能写到目的端同一个目录。 在创建表/文件迁移作业时,如果源端数据源为FTP/SFTP/OBS,CDM源端作业参数“源目录或文件”支持输入多个文件名(最多50个),文件名之间

  • 基本概念 - 云数据迁移 CDM

    用户注册时账号,账号对其所拥有的资源及云服务具有完全访问权限,可以重置用户密码、分配用户权限等。由于账号是付费主体,为了确保账号安全,建议您不要直接使用账号进行日常管理工作,而是创建IAM用户并使用他们进行日常管理工作。 IAM用户 由账号在IAM中创建用户,是云服务使用人员,具有身份凭证(密码和访问密钥)。

  • 如何查看审计日志 - 云数据迁移 CDM

    通过筛选来查询对应操作事件。 其中,CDM操作事件您可以在“事件来源”中筛选“CDM”进行查看。 图1 CDM操作事件 在需要查看事件左侧,单击事件名称左侧箭头,展开该记录详细信息。 在需要查看记录右侧,单击“查看事件”,弹窗中显示了该操作事件结构详细信息。 更多关于

  • 查询集群列表 - 云数据迁移 CDM

    publicEndpoint String 集群绑定EIP。 actionProgress ActionProgress object 集群操作进度,任务信息,由key、value组成。key值为正在进行任务,value值为正在进行任务进度。示例如 "action_progress

  • 查询版本规格 - 云数据迁移 CDM

    版本ID,获取方法请参见CDM支持版本。 请求参数 表2 请求Header参数 参数 是否必选 参数类型 描述 X-Auth-Token 是 String 用户Token,使用Token认证时必选。通过调用IAM服务“获取用户Token”接口获取响应消息头中X-Subject-Token值。 响应参数

  • 错误码 - 云数据迁移 CDM

    必须指定MongoDB服务数据库名称。 未指定MongoDB服务数据库名称。 未指定MongoDB服务数据库名称,请指定数据库后,再重试。 Cdm.1307 400 必须指定MongoDB服务字段列表。 未指定MongoDB服务字段列表。 未指定MongoDB服务字段列表,请指定字段列表后,再重试。

  • 自动建表原理介绍 - 云数据迁移 CDM

    自动建表原理介绍 CDM将根据源端字段类型进行默认规则转换成目的端字段类型,并在目的端建数据表。 自动建表时字段类型映射 CDM在数据仓库服务(Data Warehouse Service,简称DWS)中自动建表时,DWS表与源表字段类型映射关系如图1所示。例如使用CDM

  • API概览 - 云数据迁移 CDM

    20次/min 查询支持版本 查询并显示支持集群版本。 20次/min 查询版本规格 查询并显示集群版本规格。 20次/min 查询规格详情 查询并显示集群规格详情。 20次/min 查询所有集群企业项目ID 查询并显示所有集群企业项目ID。 20次/min 查询集群企业项目ID 查询并显示集群的企业项目ID。

  • 上传CDM连接驱动 - 云数据迁移 CDM

    已参见FTP/SFTP连接参数说明创建SFTP连接并将对应驱动上传至线下文件服务器(可选)。 如何获取驱动 不同类型关系数据库,需要适配不同类型驱动。注意,上传驱动版本不必与待连接数据库版本相匹配,直接参考表1获取建议版本JDK8 .jar格式驱动即可。 表1 获取驱动 关系数据库类型 驱动名称

  • 删除CDM集群 - 云数据迁移 CDM

    待删除集群中所需连接和作业数据已通过批量管理CDM作业中导出作业功能进行备份。 对于购买DataArts Studio服务时系统赠送CDM集群,非常不建议您进行删除操作。该集群删除后无法再次赠送,只能另外购买。 删除集群后,CDM集群不再按需计费或扣除套餐时长。如果您为删除CDM集

  • 整库迁移到Hive,报错Identifier name is too long如何处理? - 云数据迁移 CDM

    迁移任务报错表名太长,但表名实际没有这么长。 原因分析 在任务迁移时,导入数据前会先创建一个实际表名+阶段表后缀阶段表,最终导致作业异常。 解决方案 在作业配置高级属性将导入阶段表设置为否,这样就不会先导入阶段表。 缩短实际表表名长度。 父主题: 故障处理类

  • 查询作业执行历史 - 云数据迁移 CDM

    Long 写入字节数。 TOTAL_FILES Integer 总文件数。 ROWS_READ Long 读取行数。 BYTES_READ Long 读取字节数。 ROWS_WRITTEN Long 写入行数。 FILES_WRITTEN Integer 写入文件数。 FILES_READ

  • 项目ID和账号ID - 云数据迁移 CDM

    项目ID可以通过调用查询指定条件下项目信息API获取,接口为“GET https://{Endpoint}/v3/projects”,其中{Endpoint}为IAM终端节点,可参考IAM文档获取。 接口认证鉴权请参见认证鉴权。 响应示例如下,其中projects下“id”即为项目ID

  • 如何备份CDM作业? - 云数据迁移 CDM

    如何备份CDM作业? 问题描述 如何备份CDM作业? 解决方案 用户可以先通过CDM批量导出功能,把所有作业脚本保存到本地,在需要时候再重新创建集群、重新导入作业,实现作业备份。 父主题: 功能类

  • 迁移作业原理 - 云数据迁移 CDM

    取决于源端数据源性能。 如需优化,请参见源端数据源相关说明文档。 网络带宽 CDM集群与数据源之间可以通过内网、公网VPN、NAT或专线等方式互通。 通过内网互通时,网络带宽是根据不同CDM实例规格带宽限制。 cdm.large实例规格CDM集群网卡基准/最大带宽为0

  • 性能调优 - 云数据迁移 CDM

    数据迁移作业提交运行后,CDM会根据作业配置中“抽取并发数”参数,将每个作业拆分为多个Task,即作业分片。 不同源端数据源作业分片维度有所不同,因此某些作业可能出现未严格按作业“抽取并发数”参数分片情况。 CDM依次将Task提交给运行池运行。根据集群配置管理中“最大抽取并发数”参数,超出规格Task排队等待运行。