检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
数据迁移 DWS的OBS外表与GDS外表支持的数据格式有什么区别？ 数据如何存储到DWS？ DWS可以存储多少业务数据？ 如何使用DWS的\copy导入导出？ 如何实现DWS不同编码库之间数据容错导入 DWS导入性能都和哪些因素有关联？
表迁移 操作步骤 在CDM管理控制台的“集群管理”页面，单击集群操作列的“作业管理”，选择“表/文件迁移 > 新建作业”。 选择源端以及目的端配置。 配置源端作业参数，根据待迁移的数据库类型配置对应参数： 表1 源端作业参数 源端参数 取值样例 模式或表空间 db_user01 使用SQL语句
表迁移 表名 DWS不支持“数据库名.模式名.表名”的形式，需要对应转换为“模式名.表名”的形式。 SQL-Server语法 迁移后语法 CREATE TABLE `analytics-di-dev.abase.buyer_location` ( id_buyer INT, id_location
Developer工具进行表定义迁移。 迁移表全量数据 使用华为云迁移服务CDM完成进行数据迁移。 迁移业务SQL 使用DSC语法迁移工具进行语法改写，使Oracle的业务SQL转换成适配DWS的SQL。 父主题： 使用CDM迁移Oracle数据至GaussDB(DWS)集群
表迁移 CREATE TABLE CHARACTER SET和CASESPECIFIC VOLATILE SET MULTISET TITLE 索引 约束 COLUMN STORE PARTITION ANALYZE 支持指定部分列 父主题： Teradata语法迁移
迁移流程 前提条件 准备工作 执行DSC 查看输出文件和日志 故障处理 父主题： 使用DSC
如何使用DWS的\copy导入导出？ 由于云上DWS是全托管服务，用户无法登录后台，无法使用copy进行导入导出文件，所以云上将copy语法禁掉。云上推荐将数据文件放到obs上，使用obs外表进行入库，如果需要使用copy导入导出数据，可以参考如下方法： 将数据文件放到客户端的机器上。
类型的数据源迁移数据到GaussDB(DWS)。 CDM在迁移数据到GaussDB(DWS)时，采用的是COPY方式和GDS并行导入方式。 使用CDM迁移数据到GaussDB(DWS)的典型场景，请参见云数据迁移服务（简称CDM）的如下章节： 入门：该入门场景为使用CDM迁移本地
使用DSC工具迁移SQL脚本 DSC（Database Schema Convertor）是一款运行在Linux或Windows操作系统上的命令行工具，致力于向客户提供简单、快速、可靠的应用程序SQL脚本迁移服务，通过内置的语法迁移逻辑解析源数据库应用程序SQL脚本，并迁移为适用于GaussDB(DWS)
使用CDM迁移Oracle数据至GaussDB(DWS)集群 迁移流程 准备工具 迁移表定义 迁移表全量数据 迁移业务SQL 父主题： 数据迁移
景，-t参数应不低于业务并发数的两倍。 由于管道“读取即删除”的特点，需确保导入或导出过程中除GDS程序外无其他程序读取管道文件，避免导入过程中数据丢失或者任务报错及导出的文件内容混乱。 不支持对具有相同Location的外表并发导入导出，即GDS的多个线程同时读取管道文件或者同时写入管道文件。
以$开头的对象名称迁移 本章节介绍如何迁移以$（美元符号）开头的对象名称。 下表具体描述了这些对象名称的迁移行为。这些行为可以通过tdMigrateDollar参数来设置。 详情请参见IN/NOT IN转换。 表1 以$开头的对象名称的迁移行为 tdMigrateDollar设置
CDM提供同构/异构数据源之间批量数据迁移的功能，帮助用户实现从多种类型的数据源迁移数据到GaussDB(DWS)。CDM在迁移数据到GaussDB(DWS)时，采用的是COPY方式和GDS并行导入方式。 数据源丰富，操作简单。 使用DSC工具迁移SQL脚本 数据库、NoSQL、文件系统、大数据平台
整库迁移 使用CDM迁移数据到GaussDB(DWS) 使用DSC工具迁移SQL脚本
约束与限制 如果待迁移的表数量较多，建议分批次进行迁移。可以按业务分批，也可以按表的数据量分批。 如果在CDM迁移过程中有DELETE、UPDATE操作，无法保证迁移后的数据一致，需要重新迁移。 表的数据量太大，可以切片迁移。 整库迁移作业一次只能迁移一个数据库，如果迁移多个数据库需要配置多个迁移作业。
从上层应用向DWS写入数据。DWS支持完整的数据库事务级别的增删改(CRUD)操作。这是最简单的一种方式，这种方式适合数据写入量不太大， 并发度不太高的场景。 从MRS导入数据，将MRS作为ETL。 通过COPY FROM STDIN方式导入数据。 通过COPY FROM STDIN命令写数据到一个表。
DWS的OBS外表与GDS外表支持的数据格式有什么区别？ OBS与GDS外表支持格式文件区别如下： OBS导入支持ORC、TEXT、JSON、CSV、CARBONDATA、PARQUET文件格式，导出支持ORC、CSV、TEXT文件格式，缺省值为TEXT。 GDS导入导出支持的文件
98TB、4.47TB、160GB、1.68TB、13.41TB六种规格的存储容量，一个集群支持的节点数范围为3～256，集群总的存储容量随集群规模等比例扩充。 为增强可靠性，每个节点都有一个副本，副本会占用一半的存储空间，选择容量时副本容量会自动翻倍存储。 数据仓库系统会备份数据，
DWS导入性能都和哪些因素有关联？ dws的导入性能受多方面因素影响，主要有以下几点： 集群规格：磁盘io、网络吞吐、内存、cpu规格等。 业务规划：表字段的类型、是否压缩、行存还是列存。 数据存储：集群本地、OBS等。 数据导入的方式选择等。 父主题： 数据迁移
Developer以及instance、DSC包。 配置PL/SQL Developer的Oracle Home及OCL library。 以下以试用版的PL/SQL Developer的界面为例，实际请以新界面为准。 在输入密码的登录界面直接单击“取消”进入界面。 选择“Configure > Preferences
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
