已找到以下 186 条记录
产品选择
云数据迁移 CDM
没有找到结果,请重新输入
产品选择
云数据迁移 CDM
产品选择
没有找到结果,请重新输入
  • 创建MRS Hive连接器 - 云数据迁移 CDM

    此外,您还必须确保该云服务实例与CDM集群所属企业项目必须相同,如果不同,需要修改工作空间企业项目。 新建MRS hive连接 在CDM集群管理界面,单击集群后“作业管理”,选择“连接管理 > 新建连接”,进入连接器类型选择界面,如1所示。 1 选择连接器类型 连接器类型选择“MRS

  • 迁移原理 - 云数据迁移 CDM

    用户无法从VPC访问本地数据库或操作系统。 针对恶意用户威胁:CDM对每个用户,使用单独虚拟机来运行各自CDM实例,用户之间实例是完全隔离和安全。恶意用户无法访问其他用户实例。 针对数据暴露公网威胁:CDM抽取-写入模型下,即使CDM绑定了弹性IP,也不会开放端口

  • 创建IAM用户并授权使用CDM - 云数据迁移 CDM

    根据企业用户职能,设置不同访问权限,以达到用户之间权限隔离。 将CDM资源委托给更专业、高效其他华为云账号或者云服务,这些账号或者云服务可以根据权限进行代运维。 如果华为云账号已经能满足您要求,不需要创建独立IAM用户,您可以跳过本章节,不影响您使用CDM服务其它功能。

  • 字段映射界面无法显示所有列怎么处理? - 云数据迁移 CDM

    在CDM作业管理界面,找到HBase导出数据到DWS作业,单击作业后面的“编辑”,进入字段映射界面,如1所示。 1 字段映射03 单击添加字段,在弹出框中选择“添加新字段”,如2所示。 2 添加字段04 添加完字段后,新增字段在界面不显示样值,这个不影响字段值传输,CDM会将字段值直接写入目的端。

  • 事务模式迁移 - 云数据迁移 CDM

    事务模式迁移 CDM事务模式迁移,是指当CDM作业执行失败时,将数据回滚到作业开始之前状态,自动清理目的表中数据。 参数位置:创建表/文件迁移作业时,如果目的端为关系型数据库,在目的端作业配置高级属性中,可以通过“先导入阶段表”参数选择是否启用事务模式。 参数原理:如果

  • MRS Hudi连接参数说明 - 云数据迁移 CDM

    AK和SK分别为登录OBS服务器访问标识与密钥。 您需要先创建当前账号访问密钥,并获得对应AK和SK。 您可以通过如下方式获取访问密钥。 登录控制台,在用户名下拉列表中选择“我的凭证”。 进入“我的凭证”页面,选择“访问密钥 > 新增访问密钥”,如1所示。 1 单击新增访问密钥

  • OBS连接参数说明 - 云数据迁移 CDM

    OBS连接参数 参数名 说明 取值样例 名称 连接名称,根据连接数据源类型,用户可自定义便于记忆、区分连接名。 obs_link OBS终端节点 终端节点(Endpoint)即调用API请求地址,不同服务不同区域终端节点不同。您可以通过以下方式获取OBS桶Endpoint信息:

  • 事务模式迁移 - 云数据迁移 CDM

    事务模式迁移 CDM事务模式迁移,是指当CDM作业执行失败时,将数据回滚到作业开始之前状态,自动清理目的表中数据。 参数位置:创建表/文件迁移作业时,如果目的端为关系型数据库,在目的端作业配置高级属性中,可以通过“先导入阶段表”参数选择是否启用事务模式。 参数原理:如果

  • 区域和可用区 - 云数据迁移 CDM

    区域。 资源价格 不同区域资源价格可能有差异,请参见华为云服务价格详情。 如何选择可用区? 是否将资源放在同一可用区内,主要取决于您对容灾能力和网络时延要求。 如果您应用需要较高容灾能力,建议您将资源部署在同一区域不同可用区内。 如果您应用要求实例之间网络延时较低,则建议您将资源创建在同一可用区内。

  • 设置CDM告警规则 - 云数据迁移 CDM

    单击监控指标页面左上角的返回按钮,进入云监控服务界面,选择“云数据迁移服务”服务监控项对应操作列“创建告警规则”。 1 “云数据迁移服务”服务监控项 根据界面提示设置CDM集群告警规则。 设置完成后,单击“确定”。当符合规则告警产生时,系统会自动进行通知。 更多关于监控告警信息,请参见云监控用户指南。 父主题:

  • MySQL迁移时报错:invalid input syntax for integer: "true" - 云数据迁移 CDM

    MySQL迁移时报错:invalid input syntax for integer: "true" 问题描述 数据库中存储是1或0,但没有true和false数据,但MySQL迁移时读取到是true或false,提示报错信息:Unable to execute the SQL statement

  • 创建MySQL连接器 - 云数据迁移 CDM

    方式一:单击对应驱动名称右侧操作列“上传”,选择本地已下载驱动。 方式二:单击对应驱动名称右侧操作列“从sftp复制”,配置sftp连接器名称和驱动文件路径。 在“集群管理”界面,单击集群后“作业管理”,选择“连接管理 > 新建连接”,进入连接器类型选择界面,如1所示。 1 选择连接器类型

  • 创建MySQL连接器 - 云数据迁移 CDM

    方式一:单击对应驱动名称右侧操作列“上传”,选择本地已下载驱动。 方式二:单击对应驱动名称右侧操作列“从sftp复制”,配置sftp连接器名称和驱动文件路径。 在“集群管理”界面,单击集群后“作业管理”,选择“连接管理 > 新建连接”,进入连接器类型选择界面,如1所示。 1 选择连接器类型

  • 作业配置添加字段,MongoDB字段映射存在问题 - 云数据迁移 CDM

    成功。 故障分析 查看文档提示CDM通过获取样值方式无法获得所有列。 添加字段,因为MongoDB是文档数据库,没有scheme概念。CDM字段映射取是第一条json key。CDM支持combine()函数,可以把非公共列封装为一个列。 解决方案 使用MongoDB R

  • 如何查看审计日志 - 云数据迁移 CDM

    通过筛选来查询对应操作事件。 其中,CDM操作事件您可以在“事件来源”中筛选“CDM”进行查看。 1 CDM操作事件 在需要查看事件左侧,单击事件名称左侧箭头,展开该记录详细信息。 在需要查看记录右侧,单击“查看事件”,弹窗中显示了该操作事件结构详细信息。 更多关于

  • Mysql导入数据到DLI,快执行完时失败了提示Invoke DLI service api failed错误怎么解决? - 云数据迁移 CDM

    结合报错,考虑是DLI目的端写入问题。但因日志截不全,进入CDM集群,查看客户作业日志。 根据分析步骤一报错,考虑是选错了队列类型,需要选择SQL队列。用户应该是先写到OBS文件,然后通过外表映射导入到DLI表。数据基本已经完成,最终映射时候报错,因为这种场景需要使用DLISQL队列。 解决方案 联

  • 基本概念 - 云数据迁移 CDM

    用户注册时账号,账号对其所拥有的资源及云服务具有完全访问权限,可以重置用户密码、分配用户权限等。由于账号是付费主体,为了确保账号安全,建议您不要直接使用账号进行日常管理工作,而是创建IAM用户并使用他们进行日常管理工作。 IAM用户 由账号在IAM中创建用户,是云服务使用人员,具有身份凭证(密码和访问密钥)。

  • Hive连接参数说明 - 云数据迁移 CDM

    Manager用户名和密码。从HDFS导出目录时,如果需要创建快照,这里配置用户需要HDFS系统管理员权限。 如果要创建MRS安全集群数据连接,不能使用admin用户。因为admin用户是默认管理页面用户,这个用户无法作为安全集群认证用户来使用。您可以创建一个新MRS用户

  • 认证鉴权 - 云数据迁移 CDM

    使用Token前请确保Token离过期有足够时间,防止调用API过程中Token过期导致调用API失败。 Token在计算机系统中代表令牌(临时)意思,拥有Token就代表拥有某种权限。Token认证就是在调用API时候将Token加到请求消息头,从而通过身份认证,获得操作API权限。 Token

  • 步骤1:创建集群 - 云数据迁移 CDM

    推荐与MySQL实例或DWS集群子网一致。 推荐选择已选择可用区下子网,任意选择子网创建可能会创建失败。 安全组:推荐与MySQL实例或DWS集群安全组一致。 企业项目:如果已经创建了企业项目,这里才可以选择。必须与MySQL实例或DWS集群企业项目一致。 其它参数保持默认即可。 1 创建集群1