已找到以下 370 条记录
AI智能搜索
产品选择
云数据迁移 CDM
没有找到结果,请重新输入
产品选择
云数据迁移 CDM
在搜索结果页开启AI智能搜索
开启
产品选择
没有找到结果,请重新输入
  • 如何降低CDM使用成本? - 云数据迁移 CDM

    如何降低CDM使用成本? 如果是迁移公网数据上云,可以使用NAT网关服务,实现CDM服务与子网中其他弹性云服务器共享弹性IP,可以更经济、更方便通过Internet迁移本地数据中心或第三方云上数据。 具体操作如下: 假设已经创建好了CDM集群(无需为CDM集群绑定专用弹性

  • 基本概念 - 云数据迁移 CDM

    CDM实例,实现数据访问权限隔离。 本地环境 本地环境是指用户自建或者租用IDC中数据存储系统,或者第三方云环境中数据存储系统,包括关系型数据库以及文件系统。 本地数据 本地数据是指存储在用户自建或者租用IDC中数据,或者第三方云环境中数据,包括关系型数据库、NoS

  • 步骤3:创建并执行作业 - 云数据迁移 CDM

    由于MySQL和DWS存储中文时编码不一样,所需长度也不一样,一个中文字符在UTF-8编码下可能要占3个字节。该参数选择为“是”后,在DWS中自动创表时,会将字符类型字段长度设置为原表3倍,避免出现DWS表字符字段长度不够报错。 其他可选参数保持默认即可,详细说明可参见配置DWS目的端参数。

  • 迁移原理 - 云数据迁移 CDM

    用户无法从VPC访问本地数据库或操作系统。 针对恶意用户威胁:CDM对每个用户,使用单独虚拟机来运行各自CDM实例,用户之间实例是完全隔离和安全。恶意用户无法访问其他用户实例。 针对数据暴露公网威胁:CDM抽取-写入模型下,即使CDM绑定了弹性IP,也不会开放端口

  • 配置DDS目的端参数 - 云数据迁移 CDM

    表1 DDS作为目的端时作业参数 参数名 说明 取值样例 数据库名称 选择待导入数据数据库。 ddsdb 集合名称 选择待导入数据集合,相当于关系数据库表名。单击输入框后面的按钮可进入表选择界面,用户也可以直接输入表名称。 如果选择界面没有待选择表,请确认表是否已经创建

  • 查询规格详情 - 云数据迁移 CDM

    } else { fmt.Println(err) } } 更多编程语言SDK代码示例,请参见API Explorer代码示例页签,可生成自动对应SDK代码示例。 状态码 状态码 描述 200 请求成功。 400 请求错误。 401 鉴权失败。 403

  • 查询所有可用区 - 云数据迁移 CDM

    String 通过调用IAM服务“查询区域列表”接口获取响应消息中区域ID。 请求参数 表2 请求Header参数 参数 是否必选 参数类型 描述 X-Auth-Token 是 String 用户Token,使用Token认证时必选。通过调用IAM服务“获取用户Token”接口获

  • 终端节点 - 云数据迁移 CDM

    终端节点 终端节点(Endpoint)即调用API请求地址,不同服务不同区域终端节点不同,您可以从地区和终端节点中查询所有服务终端节点。 云数据迁移服务终端节点如表1所示,请您根据业务需要选择对应区域终端节点。 表1 CDM数据集成Endpoint 区域名称 区域ID 终端节点(Endpoint)

  • Kafka连接参数说明 - 云数据迁移 CDM

    0及之后版本,则所创建的用户至少需具备Manager_viewer角色权限才能在CDM创建连接;如果需要对MRS组件库、表、列进行操作,还需要参考MRS文档添加对应组件库、表、列操作权限。 如果CDM集群为2.9.0之前版本,或MRS集群为3.1.0之前版本,则所创建用户需要具备Manager_adm

  • 权限管理 - 云数据迁移 CDM

    制其对云资源访问范围。例如您员工拥有CDM使用权限,但是不希望其拥有删除CDM集群等高危操作权限,那么您可以使用IAM为员工创建IAM用户,通过授予仅能使用CDM服务,但是不允许删除CDM集群权限策略,实现控制其对CDM使用范围。 如果云账号已经能满足您要求,不需要

  • 迁移HDFS文件,报错无法获取块怎么处理? - 云数据迁移 CDM

    迁移HDFS文件,报错无法获取块怎么处理? 问题描述 用户HDFS为线下自建,往OBS迁移文件建立好连接器后,测试源端和目的端连通性都是没问题。 任务启动时报如下错误: Error: java.io.IOException: org.apache.hadoop.hdfs.B

  • 创建IAM用户并授权使用CDM - 云数据迁移 CDM

    根据企业用户职能,设置不同访问权限,以达到用户之间权限隔离。 将CDM资源委托给更专业、高效其他华为云账号或者云服务,这些账号或者云服务可以根据权限进行代运维。 如果华为云账号已经能满足您要求,不需要创建独立IAM用户,您可以跳过本章节,不影响您使用CDM服务其它功能。

  • 事务模式迁移 - 云数据迁移 CDM

    事务模式迁移 CDM事务模式迁移,是指当CDM作业执行失败时,将数据回滚到作业开始之前状态,自动清理目的表中数据。 参数位置:创建表/文件迁移作业时,如果目的端为关系型数据库,在目的端作业配置高级属性中,可以通过“先导入阶段表”参数选择是否启用事务模式。 参数原理:如果

  • 事务模式迁移 - 云数据迁移 CDM

    事务模式迁移 CDM事务模式迁移,是指当CDM作业执行失败时,将数据回滚到作业开始之前状态,自动清理目的表中数据。 参数位置:创建表/文件迁移作业时,如果目的端为关系型数据库,在目的端作业配置高级属性中,可以通过“先导入阶段表”参数选择是否启用事务模式。 参数原理:如果

  • MySQL迁移时报错:invalid input syntax for integer: "true" - 云数据迁移 CDM

    MySQL迁移时报错:invalid input syntax for integer: "true" 问题描述 数据库中存储是1或0,但没有true和false数据,但MySQL迁移时读取到是true或false,提示报错信息:Unable to execute the SQL statement

  • 应用场景 - 云数据迁移 CDM

    本地数据是指存储在用户自建或者租用IDC中数据,或者第三方云环境中数据,包括关系型数据库、NoSQL数据库、OLAP数据库、文件系统等。 这个场景是用户希望利用云上计算和存储资源,需要先将本地数据迁移上云。该场景下,需要保证本地网络与云上网络是连通。 图1 大数据迁移上云 数据批量入湖

  • 配置DIS源端参数 - 云数据迁移 CDM

    配置DIS源端参数 消息体中数据是一条类似CSV格式记录,可以支持多种分隔符。不支持二进制格式或其他格式消息内容解析。 作业中源连接为DIS连接时,源端作业参数如所表1示。 表1 DIS作为源端时作业参数 参数类型 参数 说明 取值样例 基本参数 DIS通道 DIS通道名。 dis

  • 监控安全风险 - 云数据迁移 CDM

    监控安全风险 CDM提供基于云监控服务CES资源监控能力,帮助用户监控账号下CDM集群,执行自动实时监控、告警和通知操作。用户可以实时掌握集群运行中所产生网络流入速率、网络流出速率、CPU使用率、内存使用率、磁盘利用率、失败作业率等信息 关于CDM支持监控指标,以及如何创建监控告警规则等内容,请参见查看监控指标。

  • 文件格式介绍 - 云数据迁移 CDM

    字段分隔符 用于分隔CSV文件中字符,支持单字符和多字符,也支持特殊字符,详见表1。 编码类型 文件编码类型,默认是UTF-8,中文编码有时会采用GBK。 如果源端指定该参数,则使用指定编码类型去解析文件;目的端指定该参数,则写入文件时候,以指定编码类型写入。 使用包围符

  • Oracle数据库连接参数说明 - 云数据迁移 CDM

    Oracle数据库连接参数 参数名 说明 取值样例 名称 连接名称,根据连接数据源类型,用户可自定义便于记忆、区分连接名。 oracle_link 数据库服务器 配置为要连接数据库IP地址或域名。 192.168.0.1 端口 配置为要连接数据库端口。 默认端口:1521 数据库连接类型