检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
实时写入 提供H-Store存储引擎，微批数据存放在本地，周期合并到OBS存储，支持高吞吐实时写入与更新，同时支持大批量写入场景。 数据实时写入并经实时计算之后，可以用于实时大屏、实时分析、实时监控、实时风控、实时推荐。
关于COPY FROM STDIN导入数据 这种方式适合数据写入量不太大， 并发度不太高的场景。 用户可以使用以下方式通过COPY FROM STDIN语句直接向GaussDB(DWS)写入数据。 通过键盘输入向GaussDB(DWS)写入数据。
SSB测试数据 表1 SSB测试数据 序号 表名 行数 表大小 1 supplier 200000 - 2 customer 3000000 - 3 part 1400000 - 4 lineorder 60037902 - 5 lineorder_flat 60037902 -
管理GaussDB(DWS)数据库连接 操作场景 数据库默认支持一定数量的连接，管理员用户可以通过管理数据库的连接，了解当前数据库的连接性能或增加连接限制，使更多用户或应用程序可以同时连接到数据库。
导出ORC数据到OBS 规划导出数据 创建外部服务器 创建外表 执行导出 父主题： 导出数据到OBS
执行数据导入 直接查询外表查看MRS数据源的数据 如果数据量较少，可直接使用SELECT查询外表，即可查看到MRS数据源的数据。
导出ORC数据到MRS 导出ORC数据概述 规划导出数据 创建外部服务器 创建外表 执行导出 父主题： 导出数据
处理方法 对业务涉及到的常用的大表，执行VACUUM FULL操作，清理脏数据。 设置GUC内存参数。 父主题： 集群性能
使用导出的全量信息可以创建与当前集群相同的一个集群，拥有相同数据库和公共全局对象，且库中数据也与当前各库相同。 仅导出数据，即导出每个数据库中的数据，且不包含所有对象定义和公共的全局对象信息。
创建MRS数据源连接需要创建MRS集群类型为分析集群。 操作步骤 登录华为云管理控制台。 打开MRS管理控制台，创建MRS集群。
使用开源Kettle导入数据 Kettle是一款开源的ETL工具，通过Kettle工具可以完成数据的抽取、转换、装入和加载。 海量数据搬迁场景下，使用Kettle自身提供的数据入库插件，入库速度在1500条/秒左右，数据搬迁耗时较高。
迁移表全量数据 配置DWS数据源连接 配置Oracle数据源连接 表迁移 验证 父主题： 使用CDM迁移Oracle数据至GaussDB(DWS)集群
执行以下命令查询t1和写入数据。
管理MRS数据源 MRS数据源使用概述 创建MRS数据源连接 更新MRS数据源配置 父主题： 管理数据源
数据如何存储到GaussDB(DWS)？ GaussDB(DWS)支持多数据源高效入库，典型的入库方式如下所示。详细指导请参见导入数据。 从OBS导入数据。 数据上传到OBS对象存储服务中，再从OBS中导入，支持CSV，TEXT格式数据。 通过INSERT语句直接插入数据。
使用LakeFormation数据源 使用LakeFormation数据源操作详情请参见《数据仓库服务开发指南》中的“数据迁移 > 导入数据 > 使用LakeFormation数据源导入数据”章节。 父主题： 管理数据源
使用CDM迁移数据到GaussDB(DWS) 数据库、NoSQL、文件系统、大数据平台 CDM提供同构/异构数据源之间批量数据迁移的功能，帮助用户实现从多种类型的数据源迁移数据到GaussDB(DWS)。
更新MRS数据源配置 操作场景 MRS的HDFS集群参数配置变更时，可能造成GaussDB(DWS)集群无法从HDFS集群导入数据。使用HDFS集群导入数据前，需要执行MRS数据源配置的更新操作。 前提条件 GaussDB(DWS)集群已创建MRS数据源连接。
本示例分两个数据盘同步生成tpch 1000x数据。
MRS集群上的数据准备 从MRS导入数据到GaussDB(DWS)集群之前，假设您已经完成了以下准备工作： 已创建MRS集群。 在MRS集群上创建了Hive/Spark ORC表，且表数据已经存储到该表对应的HDFS路径上。 如果您已经完成上述准备，则可以跳过本章节。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
