检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
因此,大数据平台生成的最新数据,需要及时写入画像数据库。综合来看,广告RTA业务面临高并发、超低时延、超大数据量等实际特性需求。因此,对核心画像数据库有如下诉求: 海量数据快速导入,确保决策精准性 需要定期将成百GB甚至数TB全量画像数据导入画像数据库;全量数据导入越快,模型越精准,广告投放效果越好。
该顺序导入字段,缺少和空字段设置为null。 源文件不能具有比目标表更多的字段,但是可以具有更少的字段。 仅使用COPY FROM导入数据时,数据集必须少于200万行。 使用须知 建议您尽量选择在业务低峰期导出导入数据,避免在该过程中对业务造成影响。 需要获取最新的二进制包,具体地址请参见下载二进制包。
驱动包 GeminiDB Mongo支持通过Go语言接口来操作数据,通过Go连接实例的方式有开启SSL认证连接和关闭SSL认证连接两种,其中开启SSL证书连接加密功能,具有更高的安全性。 GeminiDB Mongo新实例默认关闭SSL数据加密,开启SSL请参考开启SSL。 驱动下载
华为云GeminiDB Cassandra与自建开源Cassandra性能对比 本文基于自建开源Cassandra与华为云GeminiDB Cassandra,进行了性能对比测试,具体包括测试环境、测试模型和详细的测试步骤,作为性能参考。 测试环境 开源Cassandra测试环境
则填写true,关闭填写false。 dropDatabases:配合导入任务deleteDb选项,表明导入前所要删除的数据库列表,多个数据库使用"|"分隔,如果不需要,请配置为""。 运行导入脚本。 修改导入配置文件完毕后,请进入到解压目录/importInflux/import/目录下:
Mongo使用的驱动包“mongo-java-driver-3.12.9.jar”,此安装包提供了访问GeminiDB Mongo数据库实例的API接口。 驱动安装请参考官方指南。 环境类 客户端需配置JDK1.8。JDK是跨平台的,支持Windows,Linux等多种平台。 下面以Windows为例,介绍JDK配置流程:
什么是云数据库 GeminiDB 云数据库 GeminiDB是一款基于计算存储分离架构的分布式多模NoSQL数据库服务。在云计算平台高性能、高可用、高可靠、高安全、可弹性伸缩的基础上,提供了一键部署、备份恢复、监控报警等服务能力。 云数据库 GeminiDB目前兼容Cassand
导入数据时,报错field larger than field limit (131072) 问题现象 用户导入数据时,由于存在单个列超出128K,触发python csv单列限制。 报错信息如下: field larger than field limit (131072) 可能原因
json.gz”文件。 将数据导入至目标GeminiDB Mongo 登录到已准备的弹性云服务器或可访问GeminiDB Mongo 数据库的设备。 将要导入的数据上传到弹性云服务器或可访问GeminiDB Mongo 数据库的设备。 根据不同的平台选择相应的上传方法。 Linux下可参考命令:
认证证书 合规证书 华为云服务及平台通过了多项国内外权威机构(ISO/SOC/PCI等)的安全合规认证,用户可自行申请下载合规资质证书。 图1 合规证书下载 资源中心 华为云还提供以下资源来帮助用户满足合规性要求,具体请查看资源中心。 图2 资源中心 销售许可证&软件著作权证书
--archive=/tmp/usertable.tar.gz 将数据导入至目标GeminiDB Mongo 登录到已准备的弹性云服务器或可访问GeminiDB Mongo 的设备。 将要导入的数据上传到弹性云服务器或可访问GeminiDB Mongo 的设备。 根据不同的平台选择相应的上传方法。 Linux系统可参考如下命令:
如何通过Grafana连接GeminiDB Influx Grafana是一个跨平台、开源的数据可视化平台。用户配置连接的数据源之后,Grafana可以在网络浏览器里显示数据图表和警告。 本小节主要介绍通过Grafana连接GeminiDB Influx的方法。 操作步骤 服务端
安全性是华为云与您的共同责任,如图1所示。 华为云:负责云服务自身的安全,提供安全的云。华为云的安全责任在于保障其所提供的 IaaS、PaaS 和 SaaS 类云服务自身的安全,涵盖华为云数据中心的物理环境设施和运行其上的基础服务、平台服务、应用服务等。这不仅包括华为云基础设施和各项云服
Influx版本信息说明 GeminiDB Influx接口是一款基于计算存储分离架构,兼容InfluxDB生态的云原生NoSQL时序数据库。在云计算平台高性能、高可用、高可靠、高安全、可弹性伸缩的基础上,提供了一键部署、快速备份恢复、计算存储独立扩容、监控告警等服务能力。 版本说明 目前GeminiDB
每个租户下GeminiDB Cassandra实例的默认总配额为50。如需申请扩大配额,请联系客服进行处理。 前提条件 注册华为账号并开通华为云。 注册华为云账号后,如果需要对华为云上的资源进行精细管理,请使用统一身份认证服务(Identity and Access Management,
快速入门 快速了解Redis 购买并连接集群版实例 购买并连接主备版实例 入门实践
Redis接口广告RTA场景性能数据 RTA(RealTime API)系统是满足实时精细化投放的技术手段,属于核心业务。广告平台在进行广告检索阶段,通过RTA接口向广告主询问其广告是否参与竞价,广告平台在接收到该信息后再进行广告检索召回,一个完整的RTA广告流程如下图所示: 图1 RTA广告流程 性能测试方法
随着新能源汽车的智能化普及,车辆的实时运行过程中产生的时间序列数据(简称:时序数据)呈现极速增长,车企、车主对车辆实时状态查询的诉求越发强烈,基于传统HBase的车辆监控平台已无法满足车企、车主对车辆实时状态查询的场景诉求。 方案总览 GeminiDB 时序车联网解决方案,针对车联网行业特有的时序数据特征,通过
配置监控看板 监控看板为您提供自定义查看监控数据的功能,将您关注的监控指标集中呈现在一张监控看板里,为您定制一个立体化的监控平台。 本章节主要介绍如何为GeminiDB Redis配置监控看板的方法。 操作步骤 登录管理控制台。 在服务列表中,单击“云监控服务 CES”,进入云监控服务页面。
Redis是否支持布隆过滤器等modules 支持。除此之外,GeminiDB Redis还支持Hash子field过期、分片扫描、大数据极速导入(FastLoad)等功能。 父主题: 产品咨询