检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
广告主的RTA系统,是从核心的画像数据库读取数据并进行投放决策的,数据越新,投放效果越好。因此,大数据平台生成的最新数据,需要及时写入画像数据库。综合来看,广告RTA业务面临高并发、超低时延、超大数据量等实际特性需求。因此,对核心画像数据库有如下诉求: 海量数据快速导入,确保决策精准性
成长地图 | 华为云 云数据库 GeminiDB 云数据库 GeminiDB是一款基于计算存储分离架构的分布式多模NoSQL数据库服务。在云计算平台高性能、高可用、高可靠、高安全、可弹性伸缩的基础上,提供了一键部署、备份恢复、监控报警等服务能力。 免费体验 云图说 仅两个按钮时选用
什么是云数据库 GeminiDB 云数据库 GeminiDB是一款基于计算存储分离架构的分布式多模NoSQL数据库服务。在云计算平台高性能、高可用、高可靠、高安全、可弹性伸缩的基础上,提供了一键部署、备份恢复、监控报警等服务能力。 云数据库 GeminiDB目前兼容Cassand
用户在RP中配置热数据的保存时长。数据在写入时先保存在热存储上,GeminiDB Influx根据数据中的时间戳判断数据的冷热,如果数据的时间戳在热数据保存时长之内,则是热数据,如果是保存时长之前的数据,则是冷数据,系统自动归档到冷存储上。 图1 原理图 基本使用 设置冷热时间分界线 GeminiDB Infl
数据迁移 Redis数据迁移方案概览 迁移后Redis数据一致性校验 阿里云数据库Redis/Tair到GeminiDB Redis的迁移 腾讯云Redis到GeminiDB Redis的迁移 自建Redis到GeminiDB Redis的迁移 RDB通过迁移工具到GeminiDB
如何保证数据高可靠 云数据库 GeminiDB的数据全部存储在底层DFV分布式存储之上,为三副本,在单副本故障时: 当存储节点故障,分布式存储状态机制保证故障路由,分发到正常节点。 路由到故障分片(节点正常,其中某一分片故障),上层业务上报故障分片并重新路由到正常节点。 故障分片
数据迁移 社区版InfluxDB是非常受欢迎的时序数据库,着力于高性能地查询与存储时序型数据。 GeminiDB Influx是基于华为自研的计算存储分离架构,兼容InfluxDB的生态的时序数据库。在云计算平台高性能、高可用、高可靠、高安全、可弹性伸缩的基础上,提供了一键部署、
基本设计规范 设计规范 规则1:禁止在数据库中存储图片、文件等大数据。图片或文件等大数据建议存储到对象存储服务中。 规则2:单行key和value数据大小最大不能超过64KB,平均大小不超过10KB。 规则3:任何表的设计都要考虑到数据的删除策略,表中的数据不能无限地增长而不删除。 规则
GeminiDB Influx最大能支持到多少PB的数据 GeminiDB Influx支持的最大数据容量请参见数据库实例规格中实例的最大存储空间。 父主题: 产品咨询
GeminiDB Redis是否支持布隆过滤器等modules 支持。除此之外,GeminiDB Redis还支持Hash子field过期、分片扫描、大数据极速导入(FastLoad)等功能。 父主题: 产品咨询
图1 数据导出设置 您也可以单击实例名称,进入基本信息页面,在“数据库信息 > >桶配置”处单击“数据导出设置”。 图2 数据导出设置 进入数据导出设置页面后,单击“数据导出”按钮。 图3 数据导出 “资源类型”根据自身资源选择“并行文件系统”或者“桶列表”,且选择对应的“文件系统名”或者“OBS桶名”。
Cassandra数据库是一个高度可扩展的高性能分布式数据库,面向大数据场景,可用于管理大量的结构化数据。在业务使用的过程中,随着业务量和数据流量的持续增长,往往一些业务的设计弊端逐渐暴露出来,降低了集群的稳定性和可用性。比如主键设计不合理,单个分区的记录数或数据量过大,出现超大分
传统场景采用文件或者块存储的数据库系统,备份恢复与数据量强相关,故在大数据量场景下,无法快速备份恢复,进而影响数据库的数据可靠性。 云数据库 GeminiDB基于DFV存储,底层采取Append Only方式存储,并在该基础上结合数据库逻辑进行分布式并行算法优化,极大地提升了数据备份、恢复性能。
使用GeminiDB Influx接口保存用户行为数据,支撑精准营销和用户画像。 优势: 高效写入和查询 最高每天处理万亿级时间点写入能力,多节点多线程并行高性能查询。 实时分析 数据同步上云,支持云上时序数据分析。 都市环保数据采集 GeminiDB Influx接口支持海量时间线的写入,为环保采集点提供稳定可靠的数据库支撑。
自建Redis主备、集群实例如何迁移到GeminiDB Redis? 为什么阿里云Redis、腾讯云Redis等云服务不能使用DRS进行数据迁移? 自建主备Redis,迁移到GeminiDB Redis集群,需要考虑哪些因素? 迁移完成后数据量变少了,100GB的数据迁移到GeminiDB
一库替代多库,简化业务架构 基于高性能存储池,实例自动加载高频访问的热数据在计算节点的内存中,内部自动完成冷热数据交换,业务优先从内存中读取热数据,兼顾数据的高可靠和低时延。 GeminiDB Redis接口适合存储持续增长的重要业务数据(比如游戏玩家数据、用户画像、行为日志、文章资讯等),相比使用Re
Cassandra实例创建、连接的整体流程。 连接方式介绍 数据管理服务(Data Admin Service,简称DAS)是一款专业的简化数据库管理工具,提供优质的可视化操作界面,大幅提高工作效率,让数据管理变得既安全又简单。您可以通过数据管理服务连接并管理实例。云数据库GeminiDB Cassand
通过mongodump和mongorestore工具迁移数据 使用DRS服务迁移MongoDB数据库 全量+增量迁移 通过数据复制服务迁移数据 父主题: 数据迁移
数据库使用 scan指定match参数,数据中确实存在匹配的key,为什么返回的是空 业务侧原本做了数据分片,切换到GeminiDB Redis后如何处理这部分逻辑 GeminiDB Redis接口是否支持keys命令的模糊查询 GeminiDB Redis是否支持多DB 对于scan类的操作,GeminiDB
任意一对主从节点故障,自建开源集群将不可用 即使N-1个节点同时故障,GeminiDB实例依然可用 数据可靠性 / 弱 节点重启,网络波动等场景通常存在数千条或者上万条数据丢失;数据弱一致,容易产生脏读问题。 高可靠 数据3副本可靠存储,可用作主数据库,替代传统的DB+Cache