已找到以下 306 条记录
AI智能搜索
产品选择
云数据迁移 CDM
没有找到结果,请重新输入
产品选择
云数据迁移 CDM
在搜索结果页开启AI智能搜索
开启
产品选择
没有找到结果,请重新输入
会话过期
当前登录超时,请重新登录
  • 资产识别与管理 - 云数据迁移 CDM

    资产识别与管理 云资源标识与管理可通过标签实现。 使用场景 通常您业务系统可能使用了华为云多种云服务,您可以为这些云服务下不同资源实例分别设置标签(对于CDM而言,标签作用于其集群上),各服务产生计费详单中都会体现这些资源实例和实例上设置标签。如果您业务系统是由多个不同应用构成

  • 云数据迁移安全结论 - 云数据迁移 CDM

    Management,简称IAM)授权用户才能访问CDM控制台和API。推拉模式下,CDM在VPC上没有开放侦听端口,用户无法从VPC访问实例,具有高度安全性。 数据传输安全 CDM在用户VPC中运行,网络隔离确保数据传输安全性。支持SSL数据源,如RDS、SFTP等,可以使用SSL。CDM还

  • 迁移原理 - 云数据迁移 CDM

    用户无法从VPC访问本地数据库或操作系统。 针对恶意用户威胁:CDM对每个用户,使用单独虚拟机来运行各自CDM实例,用户之间实例是完全隔离和安全。恶意用户无法访问其他用户实例。 针对数据暴露公网威胁:CDM抽取-写入模型下,即使CDM绑定了弹性IP,也不会开放端口

  • 迁移文件时加解密 - 云数据迁移 CDM

    端为解密,支持源端与目的端数据源如下。 源端支持数据源:HDFS(使用二进制格式传输时支持)。 目的端支持数据源:HDFS(使用二进制格式传输时支持)。 下面分别以HDFS导出加密文件时解密、导入文件到HDFS时加密为例,介绍AES-256-GCM加解密使用方法。 源端配置解密

  • 迁移文件时加解密 - 云数据迁移 CDM

    端为解密,支持源端与目的端数据源如下。 源端支持数据源:HDFS(使用二进制格式传输时支持)。 目的端支持数据源:HDFS(使用二进制格式传输时支持)。 下面分别以HDFS导出加密文件时解密、导入文件到HDFS时加密为例,介绍AES-256-GCM加解密使用方法。 源端配置解密

  • 创建FusionInsight HDFS连接报错get filesystem怎么解决? - 云数据迁移 CDM

    问题描述 创建FusionInsight HDFS数据连接时,测试连通性提示获取文件系统失败问题。 解决方案 客户使用管理ip有误,正确ip使用是集群一个浮动ip,端口使用HDFSwebui端口即可解决。 父主题: 故障处理类

  • 应用示例 - 云数据迁移 CDM

    API,迁移本地MySQL数据库中数据到云上服务DWS为例,介绍使用CDM API基本流程。 获取token 获取用户token,因为在后续请求中需要将token放到请求消息头中作为认证。 创建CDM集群 如果您已经创建过CDM集群,可以跳过该步骤,直接使用已创建集群ID。 如果您需要使用新的集群执行迁移任务,调用创建集群API创建。

  • 文件格式介绍 - 云数据迁移 CDM

    包含字段分隔符字段值 不使用包围符时候,导出CSV文件,数据会显示为: 3,hello,world,abc 如果使用包围符,导出数据则为: 3,"hello,world",abc 如果数据库中数据已经包含了双引号(""),那么使用包围符后,导出CSV文件包围符会是三个

  • 操作流程概述 - 云数据迁移 CDM

    流程介绍 使用CDM+OBS+DLI进行贸易统计分析操作过程主要包括2个步骤: 使用CDM上传数据到OBS 通过CDM将H公司存量数据上传到对象存储服务OBS。 通过CDM作业定时任务,每天自动上传增量数据到OBS。 使用DLI分析数据 通过DLI直接分析OBS中业务数据,支撑H公司客户进行贸易统计分析。

  • 文件格式介绍 - 云数据迁移 CDM

    包含字段分隔符字段值 不使用包围符时候,导出CSV文件,数据会显示为: 3,hello,world,abc 如果使用包围符,导出数据则为: 3,"hello,world",abc 如果数据库中数据已经包含了双引号(""),那么使用包围符后,导出CSV文件包围符会是三个

  • 监控安全风险 - 云数据迁移 CDM

    CDM提供基于云监控服务CES资源监控能力,帮助用户监控账号下CDM集群,执行自动实时监控、告警和通知操作。用户可以实时掌握集群运行中所产生网络流入速率、网络流出速率、CPU使用率、内存使用率、磁盘利用率、失败作业率等信息。 关于CDM支持监控指标,以及如何创建监控告警规则等内容,请参见查看监控指标。

  • 正则表达式分隔半结构化文本 - 云数据迁移 CDM

    ”必须选择“CSV格式”。 图1 正则表达式参数 在迁移CSV格式文件时,CDM支持使用正则表达式分隔字段,并按照解析后结果写入目的端。正则表达式语法请参考对应相关资料,这里举例下面几种日志文件正则表达式写法: Log4J日志 Log4J审计日志 Tomcat日志 Django日志

  • Oracle迁移到DWS报错ORA-01555 - 云数据迁移 CDM

    55 问题描述 使用CDM迁移Oracle数据至DWS,报错图1所示。 图1 报错现象 原因分析 数据迁移,整表查询且该表数据量大,那么查询时间较长。 查询过程中,其他用户频繁进行commit操作。 OracelRBS(rollbackspace 回滚时使用表空间)较小,造成

  • 入门实践 - 云数据迁移 CDM

    据自身业务需求使用CDM提供一系列常用实践。 表1 常用最佳实践 实践 描述 使用教程 创建MRS Hive连接器 MRS Hive连接适用于MapReduce服务,本最佳实践为您介绍如何创建MRS Hive连接器。 MySQL数据迁移到OBS CDM支持表到OBS迁移,本

  • 权限及授权项说明 - 云数据迁移 CDM

    对权限最小化安全管控要求。 如果您要允许或是禁止某个接口操作权限,请使用策略。 账号具备所有接口调用权限,如果使用账号下IAM用户发起API请求时,该IAM用户必须具备调用该接口所需权限,否则,API请求将调用失败。每个接口所需要权限,与各个接口所对应授权项相对应,

  • 云搜索服务(CSS)连接参数说明 - 云数据迁移 CDM

    云搜索服务(CSS)连接参数说明 华为云云搜索服务(CSS)是一个基于Elasticsearch且完全托管在线分布式搜索服务,CSS连接适用于将各类日志文件、数据库记录迁移到CSS,Elasticsearch引擎进行搜索和分析场景。 导入数据到CSS推荐使用Logstash,请参见使用Logstas

  • API概览 - 云数据迁移 CDM

    20次/min 查询支持版本 查询并显示支持集群版本。 20次/min 查询版本规格 查询并显示集群版本规格。 20次/min 查询规格详情 查询并显示集群规格详情。 20次/min 查询所有集群企业项目ID 查询并显示所有集群企业项目ID。 20次/min 查询集群企业项目ID 查询并显示集群的企业项目ID。

  • Hive连接 - 云数据迁移 CDM

    Kerveros认证所需Principal,您也可以联系管理员获取此账号。使用集群配置前需在集群配置管理中配置此参数。 linkConfig.keytab 否 FileContent Kerveros认证所需keytab文件本地绝对路径,您也可以联系管理员获取此文件。使用集群配置前需在集群配置管理中配置此参数。

  • 正则表达式分隔半结构化文本 - 云数据迁移 CDM

    ”必须选择“CSV格式”。 图1 正则表达式参数 在迁移CSV格式文件时,CDM支持使用正则表达式分隔字段,并按照解析后结果写入目的端。正则表达式语法请参考对应相关资料,这里举例下面几种日志文件正则表达式写法: Log4J日志 Log4J审计日志 Tomcat日志 Django日志

  • 场景介绍 - 云数据迁移 CDM

    Data Migration,以下简称CDM)基础使用方法,通过CDM迁移RDS for MySQL数据到数据仓库服务DWS具体操作,帮助您了解、熟悉CDM服务,具体场景如图1所示。 图1 MySQL迁移到DWS CDM基本使用流程如下: 创建CDM集群 创建连接 创建并执行作业