已找到以下 370 条记录
AI智能搜索
产品选择
云数据迁移 CDM
没有找到结果,请重新输入
产品选择
云数据迁移 CDM
在搜索结果页开启AI智能搜索
开启
产品选择
没有找到结果,请重新输入
  • 文件增量迁移 - 云数据迁移 CDM

    运行作业时可以导出全部新增文件,或者只导出特定目录/文件。 目前CDM支持以下文件增量迁移方式: 增量导出指定目录文件 适用场景:源端数据源为文件类型(OBS/HDFS/FTP/SFTP)。这种增量迁移方式,只追加写入文件,不会更新或删除存在记录。 关键配置:文件/路径过滤器+定时执行作业。

  • 创建MRS Hive连接器 - 云数据迁移 CDM

    Manager用户名和密码。从HDFS导出目录时,如果需要创建快照,这里配置用户需要HDFS系统管理员权限。 如果要创建MRS安全集群数据连接,不能使用admin用户。因为admin用户是默认管理页面用户,这个用户无法作为安全集群认证用户来使用。您可以创建一个新MRS用户

  • 管理集群标签 - 云数据迁移 CDM

    CDM集群已经创建成功后,支持新增、修改及删除CDM集群标签。使用标签可以标识多种云资源,后续在TMS标签系统或者CDM集群管理列表中可筛选出同一标签云资源。 一个CDM集群最多可新增10个标签。 前提条件 创建CDM集群。 操作步骤 登录CDM管理控制台。单击左侧导航上“集群管理”,进入集群管理界面。

  • 创建MRS Hive连接器 - 云数据迁移 CDM

    Manager用户名和密码。从HDFS导出目录时,如果需要创建快照,这里配置用户需要HDFS系统管理员权限。 如果要创建MRS安全集群数据连接,不能使用admin用户。因为admin用户是默认管理页面用户,这个用户无法作为安全集群认证用户来使用。您可以创建一个新MRS用户

  • 文件增量迁移 - 云数据迁移 CDM

    运行作业时可以导出全部新增文件,或者只导出特定目录/文件。 目前CDM支持以下文件增量迁移方式: 增量导出指定目录文件 适用场景:源端数据源为文件类型(OBS/HDFS/FTP/SFTP)。这种增量迁移方式,只追加写入文件,不会更新或删除存在记录。 关键配置:文件/路径过滤器+定时执行作业。

  • 删除CDM集群 - 云数据迁移 CDM

    待删除集群中所需连接和作业数据通过批量管理CDM作业中导出作业功能进行备份。 对于购买DataArts Studio服务时系统赠送CDM集群,非常不建议您进行删除操作。该集群删除后无法再次赠送,只能另外购买。 删除集群后,CDM集群不再按需计费或扣除套餐时长。如果您为删除CDM集

  • 如何查看审计日志 - 云数据迁移 CDM

    通过筛选来查询对应操作事件。 其中,CDM操作事件您可以在“事件来源”中筛选“CDM”进行查看。 图1 CDM操作事件 在需要查看事件左侧,单击事件名称左侧箭头,展开该记录详细信息。 在需要查看记录右侧,单击“查看事件”,弹窗中显示了该操作事件结构详细信息。 更多关于

  • 创建CDM集群 - 云数据迁移 CDM

    能正常通信。用户可以根据CDM迁移数据源端、目的端所处网络进行选择: 如果CDM集群与待连接数据源所属不同VPC,或者待连接为本地数据源时,CDM集群需要绑定EIP,通过公网通信。 如果待连接数据源为云上服务,则推荐CDM集群网络配置与该云服务一致,此时CDM集群不用绑定EIP,通过内网通信。

  • 新建表/文件迁移作业 - 云数据迁移 CDM

    Microsoft SQL Server PostgreSQL 支持从云端数据库服务导出数据。 这些非云服务数据库,既可以是用户在本地数据中心自建数据库,也可以是用户在ECS上部署,还可以是第三方云上数据库服务。 从这些数据源导出数据时,CDM使用JDBC接口抽取数据,源

  • DLI连接参数说明 - 云数据迁移 CDM

    DLI连接参数 参数名 说明 取值样例 名称 连接名称,根据连接数据源类型,用户可自定义便于记忆、区分连接名。 dli_link 访问标识(AK) 访问DLI数据库时鉴权所需AK和SK。 您需要先创建当前账号访问密钥,并获得对应AK和SK。 登录控制台,在用户名下拉列表中选择“我的凭证”。

  • 记录数据迁移入库时间 - 云数据迁移 CDM

    单击“保存并运行”,回到作业管理表/文件迁移界面,在作业管理界面可查看作业执行进度和结果。 作业执行成功后,单击作业操作列“历史记录”,可查看该作业历史执行记录、读取和写入统计数据。 在历史记录界面单击“日志”,可查看作业日志信息。 前往目的端数据源查看数据迁移入库时间。 父主题:

  • 记录数据迁移入库时间 - 云数据迁移 CDM

    单击“保存并运行”,回到作业管理表/文件迁移界面,在作业管理界面可查看作业执行进度和结果。 作业执行成功后,单击作业操作列“历史记录”,可查看该作业历史执行记录、读取和写入统计数据。 在历史记录界面单击“日志”,可查看作业日志信息。 前往目的端数据源查看数据迁移入库时间。 父主题:

  • CDM迁移性能如何? - 云数据迁移 CDM

    CDM迁移性能如何? 单个cdm.large规格实例理论上可以支持1TB~8TB/天数据迁移,实际传输速率受公网带宽、集群规格、文件读写速度、作业并发数设置、磁盘读写性能等因素影响。更多详情请参见性能白皮书。 父主题: 通用类

  • 云数据迁移 CDM - 云数据迁移 CDM

    简称CDM),是一种高效、易用数据集成服务。 CDM围绕大数据迁移上云和智能数据湖解决方案,提供了简单易用迁移能力和多种数据源到数据湖集成能力,降低了客户数据源迁移和集成复杂性,有效提高您数据迁移和集成效率。 什么是云数据迁移 产品优势 迁移原理 支持数据源 发布区域:全部 集群管理

  • CDM可以跨账户使用吗? - 云数据迁移 CDM

    在IAM控制台创建用户,并将其加入1中创建用户组。 用户登录并验证权限 新创建用户登录控制台,切换至授权区域,验证权限: 在“服务列表”中选择“云数据迁移服务”,进入CDM主界面查看集群,若未提示权限不足,表示“CDM ReadOnlyAccess”生效。 在“服务列表”中选择除CDM服务外任一服务,若提示权限不足,表示“CDM

  • 配置MRS Hudi目的端参数 - 云数据迁移 CDM

    不存在时创建:当目的端数据库没有“表名”参数中指定表时,CDM会自动创建该表。如果“表名”参数配置存在,则不创建,数据写入到存在表中。 不自动创表 导入前清空数据 选择目的端表中数据处理方式: 是:任务启动前会清除目标表中数据。 否:导入前不清空目标表中数据,如果选“否

  • 步骤1:创建集群 - 云数据迁移 CDM

    当CDM集群与其他云服务所在区域不一致时,则需要通过公网或者专线打通网络。通过公网互通时,需确保CDM集群绑定EIP、CDM云上安全组出方向放通云下数据源所在主机、数据源所在主机可以访问公网且防火墙规则已开放连接端口。 另外,如果创建了企业项目,则企业项目也会影响CDM集群与其他云服务网络互

  • 创建IAM用户并授权使用CDM - 云数据迁移 CDM

    根据企业用户职能,设置不同访问权限,以达到用户之间权限隔离。 将CDM资源委托给更专业、高效其他华为云账号或者云服务,这些账号或者云服务可以根据权限进行代运维。 如果华为云账号已经能满足您要求,不需要创建独立IAM用户,您可以跳过本章节,不影响您使用CDM服务其它功能。

  • 通用类 - 云数据迁移 CDM

    CDM未使用数据传输功能时,是否会计费? 购买包年包月CDM套餐包,为什么还会产生按需计费费用? 如何查看套餐包剩余时长? 套餐包到期未续订或按需资源欠费时,我数据会保留吗? CDM可以跨账户使用吗? CDM集群是否支持升级操作? CDM迁移性能如何? CDM不同集群规格对应并发作业数是多少? CDM集群可以关机吗?

  • 配置LogHub(SLS)源端参数 - 云数据迁移 CDM

    LogHub(SLS)作为源端时作业参数 参数名 说明 取值样例 源连接名称 选择配置LogHub(SLS)连接。 sls_link 日志库 目标日志库名称。 - 单次查询数据条数 一次从日志服务查询数据条数。 128 数据消费开始时间 数据消费开始时间位点,即日志数据到达