检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
上传备份文件的OBS桶。 单击“添加备份文件”,选择需要导入的备份文件。 图3 添加备份文件 如果需要导入多个备份文件,可以添加多个备份文件同时导入。一次最多可同时添加128个备份文件。 如果需要删除某个备份文件,单击目标备份文件操作列“删除”。 如果需要删除所有备份文件,在“备份文件”中单击“清空”。
使用Redis-Shake工具将RDB文件/AOF文件 导入到GeminiDB Redis RDB导入GeminiDB Redis 部署迁移工具。 获取工具Redis-Shake。 Redis-Shake工具可下载release版本,解压缩后即可使用。 修改配置文件“Redis-Shake.conf”,修改时需要注意以下配置项。
FROM支持将数据从csv文件文件导入到现有表中。 源文件中的每一行都作为一行导入。 数据集中的所有行必须包含相同数量的字段,并且在PRIMARY KEY字段中必须具有值,该过程将验证PRIMARY KEY并更新现有记录。 如果HEADER为False并且没有指定列名,则以确定的顺序导入字段。指定
python csv读取文件时,参数csv.field_size_limit会限制单列大小。 解决方案 在cqlsh同目录下执行如下命令,查找到cqlshrc文件。 touch cqlshrc rm -rf ~/.cassandra/cqlshrc* cqlshrc文件中配置如下内容,并保存。
并发、超低时延、超大数据量等实际特性需求。因此,对核心画像数据库有如下诉求: 海量数据快速导入,确保决策精准性 需要定期将成百GB甚至数TB全量画像数据导入画像数据库;全量数据导入越快,模型越精准,广告投放效果越好。 承载高并发访问 RTA系统要承接大量的实时竞价请求。以电商、金
GeminiDB Redis备份文件是否可以下载到本地,是否支持线下恢复数据 GeminiDB Redis的备份文件并非开源Redis的RDB文件,用户无法使用,因此,不支持下载到本地。 当实例数据受损时,可将备份数据备份恢复至新实例。 数据备份和数据恢复可参考备份概述和恢复备份到新实例。
常见客户端报错及解决方法 问题现象1 问题现象:客户端打印网络超时10秒,连接失败。 CommonResponseAspect exception!Redis command timed out; nested exception is io.lettuce.core.Redis
使用Spark连接Cassandra失败 问题描述 用户使用Spark连接开源Cassandra,读取数据没问题,但是连接GeminiDB Cassandra就报错。 报错信息如下: 配置详情 如下为用户使用的组件及账号配置详情。 组件配置详情。 表1 配置详情 组件名 版本号
说明 <IDENTITY_DIR> 备份文件夹所在的目录。 <REMOTE_USER> 1中的弹性云服务器的操作系统用户。 <REMOTE_ADDRESS> 1中的弹性云服务器的主机地址。 <REMOTE_DIR> 待导入的目标弹性云服务器的文件目录。 Windows平台下,请使用传输工具上传备份目录至弹性云服务器。
驱动下载 建议使用go mod下载驱动 require go.mongodb.org/mongo-driver v1.7.6 go文件中导入: import ( "go.mongodb.org/mongo-driver/bson" "go.mongodb.org/mongo-driver/mongo"
当前发现有38GB)。 解决方法: 针对上述案例中问题,可以通过如下方法解决。 优化表结构。 创建新表保存热门短视频信息,只保留短视频公共信息,不包含用户信息,确保该表不会产生大的分区键。热门短视频信息写入该表中。 增加缓存 业务应用先从缓存中读取热门文件信息,没有查询到,则从数据库中查询,减少数据库查询次数。
/主从/Cluster集群/RDB文件等多种Redis数据源。 全量迁移原理:工具模拟源端Redis的从节点,通过全量同步获取RDB文件,解析后将数据以命令形式发送给目标端GeminiDB Redis。此外,也可将RDB文件作为数据源,方便地导入某时刻的数据快照。 增量迁移原理:
${thread} -s 1> workload-insert-mostly_run.log 2>&1 & 测试模型 workload模型 表2 测试模型 测试模型编号 测试模型 workload-read(单行读) 100% read workload-insert(单行写) 100%
${thread} -s 1> workload-insert-mostly_run.log 2>&1 & 测试模型 workload模型 表2 测试模型 测试模型编号 测试模型 workload-read-mostly 100% read workload-write-mostly 100%
com/brianfrankcooper/YCSB/releases/download/0.12.0/ycsb-0.12.0.tar.gz 测试模型 表5 测试模型 业务模型 负载描述 _read95_update5 读95%,更新5%。 _update50_read50 更新50%,读50%。 _
GeminiDB 时序车联网解决方案 应用场景 随着新能源汽车的智能化普及,车辆的实时运行过程中产生的时间序列数据(简称:时序数据)呈现极速增长,车企、车主对车辆实时状态查询的诉求越发强烈,基于传统HBase的车辆监控平台已无法满足车企、车主对车辆实时状态查询的场景诉求。 方案总览
${threadNum} -s > workload-insert-mostly_run.log 2>&1 & 测试模型 workload模型 表2 测试模型 测试模型编号 测试模型 读多写少场景 workload-read-mostly 95% read, 5% update 读写均衡场景
Cassandra接口数据管理。 常见问题 问题:在实例列表的操作列单击“登录”时或者在“基本信息”页面单击“登录数据库”时,无法跳转至DAS页面怎么办? 解决方法:请将您的浏览器设置为允许弹出窗口,然后重试。 父主题: 连接实例
HBase架构图 产品优势 相同规格实例读写性能优于开源HBase,提供更优的性能解决方案。 安全、可靠、稳定,支持多AZ容灾、备份恢复等运维手段。 平滑业务迁移。GeminiDB HBase接口兼容开源HBase的模型与连接方式,业务迁移成本大大降低,应用逻辑也无需作任何修改。 1: 目前暂不支持SSL连接
本文介绍了使用 Pipeline 访问 GeminiDB Redis 的原理以及注意事项。 Pipeline 简介 Redis 是一个请求/响应模型的服务,通常执行一个命令的流程为: 图1 Redis 命令执行流程 客户端发送命令到 Redis 服务器。 Redis 服务器收到命令,排队等待处理。