检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
如何使用物化视图 什么是物化视图 物化视图本质上是由数据库自动维护的标准cql表,自动维护符合条件的数据与源表数据的一致性。 使用限制 物化视图的primary key必须包含源表的所有primary key,不允许使用静态列。 视图中primary key的所有列必须是“IS NOT
广告主的RTA系统,是从核心的画像数据库读取数据并进行投放决策的,数据越新,投放效果越好。因此,大数据平台生成的最新数据,需要及时写入画像数据库。综合来看,广告RTA业务面临高并发、超低时延、超大数据量等实际特性需求。因此,对核心画像数据库有如下诉求: 海量数据快速导入,确保决策精准性
自动备份策略开启后,才允许恢复到指定时间点。 在实例恢复时,会将备份文件从OBS桶下载到恢复实例的数据目录中,OBS的下载带宽在40MB/s。 操作步骤 登录管理控制台。 在服务列表中选择“数据库 > 云数据库 GeminiDB Cassandra 接口”。 在“实例管理”页面,选择指定的GeminiDB
管理手动备份 GeminiDB Cassandra支持对“运行状态”为“正常”的实例创建手动备份,以保证数据可靠性。当数据库或表被恶意或误删除,可依赖实例的备份保障数据安全。 使用须知 手动备份为全量备份。 备份过程中,备份文件会被上传到OBS桶中,最终以压缩包的形式存储在OBS
支持与限制的命令 用户在连接到GeminiDB Mongo数据库后,需要关注以下支持以及限制的命令。 更多信息,请参见MongoDB官方文档。 表1 4.0版本支持与限制的命令 命令类别 命令名称 是否支持该命令 备注 Aggregates Commands aggregate √
在实例恢复时,会将备份文件从OBS桶下载到恢复实例的数据目录中,OBS的下载带宽在40MB/s。 恢复备份时,若原实例关闭了跨区域备份策略,则可能导致恢复操作失败。 不支持开启了磁盘加密的实例开启跨区域备份策略。 关闭跨区域备份 登录管理控制台。 在服务列表中选择“数据库 > 云数据库 GeminiDB Cassandra
绑定了弹性公网IP但是连接不上数据库 可能原因 安全组未放开对应端口限制,导致绑定弹性IP后连接不上。 处理步骤 单击实例名称,进入基本信息页面。 在“网络信息”页面,单击内网安全组。 图1 网络信息 选择“入方向规则”,单击“添加规则”,添加入方向规则具体配置信息如下图所示: 图2
Cassandra支持开启库表级备份策略,按照备份策略备份库表级数据。当数据库或表被恶意或误删除,可依赖实例的备份保障数据安全。 使用须知 如需开通设置库表级备份策略的权限,您可以联系客服申请。 开启或修改库表级备份策略 登录管理控制台。 在服务列表中选择“数据库 > 云数据库 GeminiDB Cassandra
使用Spark连接Cassandra失败 问题描述 用户使用Spark连接开源Cassandra,读取数据没问题,但是连接GeminiDB Cassandra就报错。 报错信息如下: 配置详情 如下为用户使用的组件及账号配置详情。 组件配置详情。 表1 配置详情 组件名 版本号
scan指定match参数,数据中确实存在匹配的key,为什么返回的是空 问题描述 如下图所示,数据库中存在key为test的数据,用scan match的方式却没有返回这个数据。 139.9.177.148:8635> scan 1 match tes* 1) "21" 2) (empty
GeminiDB Redis什么时候进入只读 为保护GeminiDB Redis实例的正常运行,在存储空间即将被写满的时候,数据库会被设置成只读状态,该状态下只支持数据的读取,不支持写入和更新,可以通过扩容存储容量来解除该状态,重新获得写入和更新的能力。 表1 实例设置只读状态说明 存储容量
GeminiDB Mongo支持使用已有的备份,将备份数据恢复到新实例或已有实例,您可根据业务需要进行恢复。 使用须知 恢复到已有实例的功能目前处于公测阶段,如需使用,请您联系客服申请开通。 操作步骤 登录管理控制台。 在服务列表中选择“数据库 > 云数据库 GeminiDB Mongo接口。 恢复备份。
访问/连接池规范 规则1:访问数据库必须使用连接池,以提升可靠性。 规则2:业务连接GeminiDB Cassandra集群负载均衡策略使用RoundRobinPolicy。 父主题: 数据库规范
性能测试结果 基于上述样本,预先注入1TB+数据并进行压力测试,测试结果如下: 数据压缩率: 写入1.1TB数据(约38亿条),压缩后数据占用约为155GB,数据压缩比约为13.8%; 性能表现: 维持业务总QPS达到约160w,此时读请求总流量约为1.5Gb/s,实例CPU利用率在60%-70%。
注意:如果原表中有大量数据,会涉及到索引数据的重建,只有当索引数据重建完成以后才能查询索引。 您可以通过查询系统的“IndexInfo”,查看索引是否重建完成。如果有您创建的索引的名字,表示索引数据已经重建完成。 图3 查询结果 通过直接指定索引列,查询索引。 图4 查询结果 每张表可以创建多个索引,且索引会影响写入性能。
查询资源实例 功能介绍 根据标签查询指定的数据库实例。 接口约束 该接口支持如下数据库实例: GeminiDB Cassandra GeminiDB Mongo GeminiDB Influx GeminiDB Redis 一个数据库实例具有20个标签配额,且标签key唯一。 调试
恢复备份到新实例 操作场景 GeminiDB Redis支持使用已有的备份,将备份数据恢复到新实例,您可根据业务需要进行恢复。 操作步骤 登录管理控制台。 在服务列表中选择“数据库 > 云数据库 GeminiDB Redis 接口”。 恢复备份。 方法一 在“实例管理”页面,单击目标实例的名称。
系统架构 架构介绍 云数据库 GeminiDB是一款基于计算存储分离架构的分布式数据库,由多个同构节点组成计算集群。数据存储在分布式共享存储池中。计算和存储资源解耦,支持独立弹性伸缩,扩缩容无数据迁移。 图1 系统架构 更多架构特点请参见系统架构。
删除实例 功能介绍 删除数据库实例。只支持删除按需实例,不支持删除包周期实例,包周期实例需要走退订。 接口约束 该接口支持如下数据库实例: GeminiDB Cassandra GeminiDB Mongo GeminiDB Influx GeminiDB Redis 调试 您可以在API
如何通过Grafana连接GeminiDB Influx Grafana是一个跨平台、开源的数据可视化平台。用户配置连接的数据源之后,Grafana可以在网络浏览器里显示数据图表和警告。 本小节主要介绍通过Grafana连接GeminiDB Influx的方法。 操作步骤 服务端