检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
GeminiDB Redis备份文件是否可以下载到本地,是否支持线下恢复数据 GeminiDB Redis的备份文件并非开源Redis的RDB文件,用户无法使用,因此,不支持下载到本地。 当实例数据受损时,可将备份数据备份恢复至新实例。 数据备份和数据恢复可参考备份概述和恢复备份到新实例。
使用Redis-Shake工具将RDB文件/AOF文件 导入到GeminiDB Redis RDB导入GeminiDB Redis 部署迁移工具。 获取工具Redis-Shake。 Redis-Shake工具可下载release版本,解压缩后即可使用。 修改配置文件“Redis-Shake.conf”,修改时需要注意以下配置项。
上传备份文件的OBS桶。 单击“添加备份文件”,选择需要导入的备份文件。 图3 添加备份文件 如果需要导入多个备份文件,可以添加多个备份文件同时导入。一次最多可同时添加128个备份文件。 如果需要删除某个备份文件,单击目标备份文件操作列“删除”。 如果需要删除所有备份文件,在“备份文件”中单击“清空”。
TO支持将数据从表中导出到csv、parquet、orc格式的文件中。 导出文件格式为csv时,需要每行都写入目标文件中的一行,其中的字段由定界符分隔。 如果未指定列名,则导出所有字段。 如果需要跳过部分列,需要指定列列表。 COPY FROM支持将数据从csv文件文件导入到现有表中。 源文件中的每一行都作为一行导入。
OBS桶类型支持并行文件系统、标准桶。 数据导出功能支持指定目标文件夹,且目标文件夹不可为空。 使用数据导出功能,会在OBS上创建一个名为data-dump-access的策略,该策略只提供PUT权限,且只针对选择的文件夹。 数据导出功能开启后,parquet文件会定时主动上传到选择的OBS目录下,上传周期为2小时。
GeminiDB Cassandra支持将备份文件存放到目标区域或者OBS存储,用户可以在异地区域使用目标区域的备份文件恢复到新的GeminiDB Cassandra实例,用来恢复业务。 实例开启跨区域备份策略后,会根据自动备份策略将该实例创建的自动备份文件备份到目标区域。您可以在管理控制台
解析社区版InfluxDB的tsm以及wal文件写入到行协议(Line Protocal)文件中,最终将行协议文件数据解析并迁移至目标端。 整个迁移过程分为导出和导入阶段两个阶段。 导出阶段会并发解析社区版InfluxDB的tsm文件,并将解析数据写入到内存中。 导入阶段会将读取数据发送至GeminiDB
被恶意或误删除,可依赖实例的备份保障数据安全。 使用须知 手动备份为全量备份。 备份过程中,备份文件会被上传到OBS桶中,最终以压缩包的形式存储在OBS桶中。在此过程中,由于备份文件上传和业务读取带宽存在一定的竞争关系,所以对OBS的上传带宽进行了相应的限流,单节点最大的上传带宽范围在20MB/s~70MB/s。
下载“robo3t-1.4.4-windows-x86_64-e6ac9ec5.zip”。 图3 下载软件包 解压3下载的压缩包文件,双击解压目录下的“robo3t.exe”文件,开始执行安装。 安装完成后,打开工具,界面展示如图4所示。 图4 工具主界面 工具安装成功后,您可以通过工具连接实例。
Influx:针对每列的数据类型选用不同的压缩算法,支持Simple8b,Delta,Delta-Of-Delta,RLE,Zigzag, Zstd, Snappy,Bit-packing等多种压缩算法,压缩率是传统HBase的10倍。 冷热分离 针对车辆的海量数据带来的存储高成本,
最大qps限制,默认15000。 -q 5000 -d 校验结果保存的文件名称,默认result.db。 -d result.db 查看校验结果文件。 校验默认执行三轮,输出三个校验结果文件,一般只需要看最后一个校验结果文件。 执行sqlite3 result.db.3。 执行select
备份策略修改成功后,您可在“备份管理”页面或“备份恢复”页签,查看或管理已经生成的备份文件。 查看增量备份文件 GeminiDB Cassandra支持查看数据备份的增量备份文件大小和记录。 如果您需要查看数据备份的增量备份文件大小和记录,您可以在管理控制台右上角,选择“工单 > 新建工单”,联系客服申请开通。
python csv读取文件时,参数csv.field_size_limit会限制单列大小。 解决方案 在cqlsh同目录下执行如下命令,查找到cqlshrc文件。 touch cqlshrc rm -rf ~/.cassandra/cqlshrc* cqlshrc文件中配置如下内容,并保存。
Influx支持使用已有的自动备份或手动备份恢复实例数据到新建实例,恢复后的数据与该备份生成时的实例数据一致。 选择通过备份文件恢复到实例上,会从OBS备份空间中将该备份文件下载到实例上进行全量恢复,恢复时长和实例的数据量有关。 使用须知 恢复时,新实例节点数应大于等于原实例的节点数。 恢
0为例,将解压后的整个文件重命名为pika_port3,复制在部署了pika的环境上(或者任一能与pika实例和GeminiDB Redis实例网络互通的服务器上),解压后的pika_port3文件夹目录结构如下: 迁移前准备 由于sbin目录下的pika-port二进制文件需要引用
集群Redis迁移至GeminiDB Redis集群操作请参考将Redis集群迁移到GeminiDB Redis。 RDB文件迁移到GeminiDB Redis操作请参考RDB文件恢复到GeminiDB Redis。 父主题: 数据迁移
基本设计规范 设计规范 规则1:禁止在数据库中存储图片、文件等大数据。图片或文件等大数据建议存储到对象存储服务中。 规则2:单行key和value数据大小最大不能超过64KB,平均大小不超过10KB。 规则3:任何表的设计都要考虑到数据的删除策略,表中的数据不能无限地增长而不删除。
登录弹性云服务器,具体操作请参见《弹性云服务器快速入门》中“登录弹性云服务器”。 使用如下命令,下载并解压Hiredis。 wget https://github.com/redis/hiredis/archive/master.zip 进入到解压目录后编译安装Hiredis。 make make install 编写测试代码connRedisTst
最大qps限制,默认15000。 -q 5000 -d 校验结果保存的文件名称,默认result.db。 -d result.db 查看校验结果文件。 校验默认执行三轮,输出三个校验结果文件,一般只需要看最后一个校验结果文件。 执行sqlite3 result.db.3。 执行select
将Cassandra客户端安装包上传到弹性云服务器。 使用如下命令,解压客户端安装包,此处以x86的客户端为例。 unzip Cassandra_cqlsh_x86_64.zip 使用如下命令,给所有文件添加执行权限。 chmod +x * 在客户端工具“cqlsh”所在的目录下,连接数据库实例。