已找到以下 160 条记录
产品选择
云数据迁移 CDM
没有找到结果,请重新输入
产品选择
云数据迁移 CDM
产品选择
没有找到结果,请重新输入
  • 通过数据开发使用参数传递灵活调度CDM作业 - 云数据迁移 CDM

    作业)。 实时处理作业:处理实时连续数据,主要用于实时性要求高场景。实时作业是由一个或多个节点组成业务关系,每个节点可单独被配置调度策略,而且节点启动任务可以永不下线。在实时作业里,带箭头连线仅代表业务上关系,而非任务执行流程,更不是数据流。 实时处理作业可以配置节点

  • 创建CDM自定义策略 - 云数据迁移 CDM

    作用。用户被授予策略中,一个授权项作用如果同时存在Allow和Deny,则遵循Deny优先原则。 如果您给用户授予CDM FullAccess系统策略,但不希望用户拥有CDM FullAccess中定义删除CDM集群权限,您可以创建一条拒绝删除CDM集群自定义策略,然后同时将CDM

  • 迁移作业原理 - 云数据迁移 CDM

    取决于源端数据源性能。 如需优化,请参见源端数据源相关说明文档。 网络带宽 CDM集群与数据源之间可以通过内网、公网VPN、NAT或专线等方式互通。 通过内网互通时,网络带宽是根据不同CDM实例规格带宽限制。 cdm.large实例规格CDM集群网卡基准/最大带宽为0

  • 参考:CDM性能实测数据 - 云数据迁移 CDM

    10000W行100列。 多并发抽取/写入速率,定义为分别取作业抽取并发数为1、10、20、30、50时,最大抽取/写入速率。 数据源抽取写入性能实测数据 常见数据源性能实测结果分别如表1和表2所示。 表1 读取性能实测数据 数据源 数据源规格 版本 单并发抽取速率(行/s)

  • 修改作业 - 云数据迁移 CDM

    源连接名称,即为通过“创建连接”接口创建连接对应连接名。 creation-user 否 String 创建作业用户。由系统生成,用户无需填写。 creation-date 否 Long 作业创建时间,单位:毫秒。由系统生成,用户无需填写。 update-date 否 Long 作业最后更新时间,单位:毫秒。由系统生成,用户无需填写。

  • 配置CDM作业定时任务 - 云数据迁移 CDM

    触发时间(天):选择每月几号执行作业,该参数值取值范围是“1~31”,可配置多个值但不可重复,中间使用“,”分隔。 有效期:分为开始时间和结束时间。 开始时间:表示定时配置生效时间。其中时、分、秒也是每次自动执行时间。 结束时间:该参数为可选参数,表示停止自动执行定时任务时间。如果没有配置,则表示一直自动执行。

  • FTP测试连通性失败,报服务器内部错误怎么解决? - 云数据迁移 CDM

    初始化连接)。 2. FTP服务器21端口到大于1024端口(服务器响应客户端控制端口)。 3. FTP服务器20端口到大于1024端口(服务器端初始化数据连接到客户端数据端口)。 4. 大于1024端口到FTP服务器20端口(客户端发送ACK响应到服务器数据端口)。

  • 指定集群创建作业 - 云数据迁移 CDM

    源连接名称,即为通过“创建连接”接口创建连接对应连接名。 creation-user 否 String 创建作业用户。由系统生成,用户无需填写。 creation-date 否 Long 作业创建时间,单位:毫秒。由系统生成,用户无需填写。 update-date 否 Long 作业最后更新时间,单位:毫秒。由系统生成,用户无需填写。

  • OBS数据迁移到DLI服务 - 云数据迁移 CDM

    高级属性里可选参数保持默认。 目的连接名称:选择创建DLI连接中“dlilink”。 资源队列:选择目的表所属资源队列。 数据库名称:写入数据数据库名称。 表名:写入数据目的表。CDM暂不支持在DLI中自动创表,这里表需要先在DLI中创建好,且该表字段类型和格式

  • 记录数据迁移入库时间 - 云数据迁移 CDM

    单击“保存并运行”,回到作业管理表/文件迁移界面,在作业管理界面可查看作业执行进度和结果。 作业执行成功后,单击作业操作列“历史记录”,可查看该作业历史执行记录、读取和写入统计数据。 在历史记录界面单击“日志”,可查看作业日志信息。 前往目的端数据源查看数据迁移入库时间。 父主题:

  • Hive连接参数说明 - 云数据迁移 CDM

    Manager用户名和密码。从HDFS导出目录时,如果需要创建快照,这里配置用户需要HDFS系统管理员权限。 如果要创建MRS安全集群数据连接,不能使用admin用户。因为admin用户是默认管理页面用户,这个用户无法作为安全集群认证用户来使用。您可以创建一个新MRS用户

  • 随机集群创建作业并执行 - 云数据迁移 CDM

    源连接名称,即为通过“创建连接”接口创建连接对应连接名。 creation-user 否 String 创建作业用户。由系统生成,用户无需填写。 creation-date 否 Long 作业创建时间,单位:毫秒。由系统生成,用户无需填写。 update-date 否 Long 作业最后更新时间,单位:毫秒。由系统生成,用户无需填写。

  • 通过CDM节点批量创建分表迁移作业 - 云数据迁移 CDM

    名称 连接名称,根据连接数据源类型,用户可自定义便于记忆、区分连接名。 mysql_link 数据库服务器 配置为要连接数据库IP地址或域名。 单击输入框后“选择”,可获取用户MySQL数据库实例列表。 192.168.0.1 端口 配置为要连接数据库端口。 3306

  • 修改连接 - 云数据迁移 CDM

    objects 输入参数列表,列表中每个参数为“name,value”结构,请参考inputs数据结构参数说明。在“from-config-values”数据结构中,不同源连接类型有不同“inputs”参数列表,请参见源端作业参数说明下章节。在“to-config-val

  • 步骤1:创建集群 - 云数据迁移 CDM

    当CDM集群与其他云服务所在区域不一致时,则需要通过公网或者专线打通网络。通过公网互通时,需确保CDM集群已绑定EIP、CDM云上安全组出方向放通云下数据源所在主机、数据源所在主机可以访问公网且防火墙规则已开放连接端口。 另外,如果创建了企业项目,则企业项目也会影响CDM集群与其他云服务网络互

  • OBS数据迁移到DLI服务 - 云数据迁移 CDM

    高级属性里可选参数保持默认。 目的连接名称:选择创建DLI连接中“dlilink”。 资源队列:选择目的表所属资源队列。 数据库名称:写入数据数据库名称。 表名:写入数据目的表。CDM暂不支持在DLI中自动创表,这里表需要先在DLI中创建好,且该表字段类型和格式

  • 创建连接 - 云数据迁移 CDM

    objects 输入参数列表,列表中每个参数为“name,value”结构,请参考inputs数据结构参数说明。在“from-config-values”数据结构中,不同源连接类型有不同“inputs”参数列表,请参见源端作业参数说明下章节。在“to-config-val

  • OBS数据迁移到云搜索服务 - 云数据迁移 CDM

    新建作业”,开始创建从OBS导出数据到云搜索服务任务。 图6 创建OBS到云搜索服务迁移任务 作业名称:用户自定义便于记忆、区分任务名称。 源端作业配置 源连接名称:选择创建OBS连接中“obslink”。 桶名:待迁移数据桶。 源目录或文件:待迁移数据路径,也可以迁移桶下所有目录、文件。 文

  • OBS数据迁移到云搜索服务 - 云数据迁移 CDM

    新建作业”,开始创建从OBS导出数据到云搜索服务任务。 图6 创建OBS到云搜索服务迁移任务 作业名称:用户自定义便于记忆、区分任务名称。 源端作业配置 源连接名称:选择创建OBS连接中“obslink”。 桶名:待迁移数据桶。 源目录或文件:待迁移数据路径,也可以迁移桶下所有目录、文件。 文

  • Hive连接 - 云数据迁移 CDM

    模式,只能使用STANDALONE模式。 说明:STANDALONE模式主要是用来解决版本冲突问题运行模式。当同一种数据连接源端或者目的端连接器版本不一致时,存在jar包冲突情况,这时需要将源端或目的端放在STANDALONE进程里,防止冲突导致迁移失败。 linkConfig