检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
导入数据到DDM过程中出现主键重复 在DDM中创表时设置自增起始值,并确保起始值大于导入数据自增键的最大值。 父主题: DDM使用类
在左侧导航栏,选择“逻辑库管理”,查看对应实例逻辑库列表。 单击“导入逻辑库信息”,进入导入逻辑库信息页面。 JSON可重复导入,但可重复导入的前提是: 目标DDM实例没有同名逻辑库。 在“导入逻辑库信息”页面单击“上传文件”,在本地选择需要导入的.json文件(导出逻辑库导出的JSON文件),
其他参数参考MySQL的load data infile官方文档说明。其他参数的先后顺序不能乱,顺序参考官方说明。 数据导入阶段会在一定程度上影响DDM以及RDS for MySQL实例性能,请选择在业务低峰时间导入。 建议不要同时发起多个LOAD DATA请求。多个LOAD DATA同时进
XA协议的分布式事物可以实现强一致性写,整体分布式事物的一致性说明可参考MySQL官方文档。 在分布式系统里,每个参与者都可以知晓自己操作的成功或者失败,却无法知道其他节点操作的成功或失败。当一个事务跨多个节点时,为了保持事务的原子性与一致性,需要引入一个协调者(Coordinator)来统一掌控所有参与者
mysql_table_data.sql为待导入的表数据文件名 单表或普通表导入前,需要编辑表结构文本文件,将最后一行信息删除(如:Dump completed on 2018-06-28 19:53:03),否则可能导致无法导入。 如果是拆分表或广播表,采用MySQL客户端连接DDM将数据文件导入。 mysql
法”为“range”的逻辑表单次迁移记录数不超过500万条。 对于数量过大的表可以采用分批导出导入,通过mysqldump指定参数where条件来限定每批的记录数。 导入DDM只支持导入的SQL文本文件含有标准的DML插入语句。 评估应用程序SQL语句在DDM中的兼容性。 迁移前
mysql_table_data.sql为待导入的表数据文件名。 单表或普通表导入前,需要编辑表结构文本文件,将最后一行信息删除(Dump completed on 2018-06-28 19:53:03),否则可能导致无法导入。 如果是拆分表或广播表,采用MySQL客户端连接DDM将数据文件导入。 mysql
DDM_ADDRESS 待导入数据的DDM实例连接地址。 可在DDM管理控制台上,实例基本信息页面查看“内网地址”和“端口”。 DDM_PORT 待导入数据的DDM侦听端口。 DDM_USER 访问DDM的用户。 创建DDM逻辑库时使用的账号,需具备读写权限。 DB_NAME 待导入数据的DDM逻辑库名称。
分的迁移演练测试。 由于DDM仅支持通过弹性云服务器(ECS)访问,因此需要先将数据库导出为文件并上传到ECS,然后从ECS将文件中的数据导入到DDM。 迁移方式 DDM支持如下两种方式进行数据迁移。 基于MySQL官方客户端工具,此部分以RDS for MySQL 为例重点介绍该迁移方式。
大批量数据导入 推荐使用loaddata local infile来实现大批量数据导入。 这个地方只需要开一个session窗口导入即可,DDM内部会自动进行并行导入。 数据迁移场景 建议使用mysqldump导出sql文件,再使用mysql source命令导入。具体操作请参考数据从DDM实例导出。
mysql_table_data.sql为待导入的表数据文件名 单表或普通表导入前,需要编辑表结构文本文件,将最后一行信息删除(如:Dump completed on 2018-06-28 19:53:03),否则可能导致无法导入。 如果是拆分表或广播表,采用MySQL客户端连接DDM将数据文件导入。 mysql
RDS_ADDRESS为待导入数据的RDS的地址。 RDS_PORT为RDS实例的端口。 RDS_USER为RDS实例的用户名。 DB_NAME为RDS数据库名称,如果导入的是单表,DB_NAME为RDS第一个分片的物理数据库。 mysql_table_schema.sql为待导入的表结构文件名。
abnormal 异常,节点不可正常使用。 creating 创建中,申请节点成功之前的状态。 createfail 创建失败,申请节点处于失败的状态。 enlargefail 节点扩容失败。 resizing 规格变更中,节点正在变更中。 父主题: 附录
概览 本手册基于华为云分布式数据库中间件实践所编写,用于指导您完成相关设置,购买更符合业务的分布式数据库中间件实例。 表1 DDM最佳实践一览表 章节名称 简介 合理制定分片策略 介绍创建拆分表时如何选择拆分键和拆分算法。 如何选择DDM逻辑库分片数 介绍创建拆分库时如何合理选择逻辑库分片。
分布式数据库中间件 DDM 创建逻辑库和逻辑表 03:13 创建逻辑库和逻辑表 分布式数据库中间件 DDM 申请DDM实例并导入RDS实例 03:03 申请DDM实例并导入RDS实例 分布式数据库中间件 DDM 访问DDM实例 04:08 访问DDM实例
支持查看的任务说明 DDM服务支持查看以下任务: 创建实例 删除实例 规格变更 节点扩容 节点缩容 重启实例 绑定EIP 解绑EIP 恢复数据 导入逻辑库信息 分片变更 分片变更重试 删除备份 创建组 删除组 重启节点 版本升级 版本降级 版本回滚 操作步骤 登录分布式数据库中间件控制台。
创建DDM逻辑库 功能介绍 创建DDM逻辑库。 接口约束 创建前需确保已导入RDS实例,RDS实例状态正常且没有被其他DDM实例关联使用。 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。API Explorer可以自动生成SDK代码示例,并提供SDK代码示例调试功能。
单机:不允许跨分片事务。 FREE:跨分片事务commit时部分失败无法回滚,导致数据不一致。 XA分布式事务:两阶段提交,跨分片事务commit时部分失败会自动回滚,保证事务内数据一致性。 数据导入导出 支持外部数据导入,帮助用户实现数据库平滑上云。支持DDM实例数据按业务需求导出。
sh # ./configure # make # make install 测试步骤 请根据实际信息,替换数据库、连接IP与用户密码。 导入测试数据。 创建逻辑库。 使用命令行登录到DDM数据库中,创建表。 表结构:CREATE TABLE sbtest1( id int UNSIGNED
数据库账号权限说明 创建逻辑库、导入逻辑库、分片变更操作时,数据库账号需具备以下权限,建议您创建具备以下权限的账号或直接使用管理员账号进行相关操作。 SELECT, INSERT, UPDATE, DELETE, CREATE, DROP, RELOAD, PROCESS, REFERENCES