检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
key" = "xxxxx", "fs.obs.endpoint" = "obs.xxx.xxx.com" ); 查看数据插入进度。 mysql> show load order by createtime desc limit 1\G; ***************************
SQL语法,包括单表聚合、排序、过滤和多表Join、子查询等,还支持窗口函数、Grouping Set等复杂SQL语法。除此之外,Doris还实现了MySQL协议兼容,用户可以通过各类客户端工具来访问Doris,并支持与BI工具的无缝对接。 架构精简:系统只有两个Frontend(FE)和Ba
、政府、物流、制造、零售等行业。 CloudTable产品架构 CloudTable产品架构如下图所示: 图1 产品架构 Doris:MySQL生态,易上手,多表复杂分析性能优于传统MPP。 ClickHouse:万列大宽表多维聚合分析,亚秒级响应,全自助分析。 HBase:高并发,毫秒级查询响应。
数据批量导入 HBase冷热分离 使用全局二级索引 扩容集群 重启集群 删除集群 HBase监控集群 HBase审计日志 使用Doris 使用MySQL客户端访问集群 重启集群 删除集群 集群扩容 Doris参数配置 Doris用户管理 Doris角色管理 Doris慢SQL查询 Doris连接管理
date列的聚合方式为REPLACE,所以2017-10-01 07:00:00替换了2017-10-01 06:00:00保存了下来。 在同一个导入批次中的数据,对于REPLACE这种聚合方式,替换顺序不做保证。如在这个例子中,最终保存下来的,也有可能是2017-10-01 0
维度信息更新会反应到整张表中,而更新的频率直接影响查询的效率。 使用过程中,建议用户尽量使用Star Schema区分维度表和指标表。频繁更新的维度表也可以放在MySQL外部表中。而如果只有少量更新, 可以直接放在Doris中。在Doris中存储维度表时,可对维度表设置更多的副本,提升Join的性能。 父主题:
以内,每天的SQL查询量为数万条。 统一数仓构建 :一个平台满足统一的数据仓库建设需求,简化繁琐的大数据软件栈。Doris构建的统一数仓,替换了原来由Spark、Hive、Kudu、HBase、Phoenix组成的旧架构,架构大大简化。 数据湖联邦查询:通过外表的方式联邦分析位于
中的域名。请在表格存储服务管理控制台,单击集群名称,进入集群基本信息页面,获取CloudTable的相关链接地址。所获取的链接地址包含了以逗号分隔的3个内网域名,您可以ping其中任意一个内网域名。 为Windows弹性云服务器配置DNS地址 使用Administrator账号登录Windows弹性云服务器。
xml配置文件,查找相关参数。 vim hive-site.xml 常见问题 当出现以下报错的时候,需要修改MRS集群的manager页面切换HDFS的主备。 mysql> select * from hive_hdfs_test2; ERROR 1105 (HY000): errCode = 2, detailMessage
必填参数,配置为clickhouse节点的集群访问地址列表。 登录cloudtable控制台,单击集群名称,进入集群详情页,拿到集群访问地址。 多个地址使用逗号分隔,例如配置为“cloudtable-wlr-cli-server-1-1-2lIWzDO9.mycloudtable.com,clou
SQL语法参考 数据类型 CREATE DATABASE CREATE TABLE DESC查询表结构 CREATE VIEW CREATE MATERIALIZED VIEW INSERT INTO SELETC ALTER TABLE修改表结构 DROP删除表 SHOW显示数据库和表信息
paren,对于HBase集群而言就是“${CloudTable目标集群的“ZK链接地址”}:/hbase”。 families:要复制的列族列表,多个列族之间以逗号分隔。 如果要从sourceCfName复制到destCfName,请指定为sourceCfName:destCfName。 如果复制后列族名称保持不变,只需指定cfName。
xml配置文件,查找相关参数。 vim hive-site.xml 常见问题 当出现以下报错的时候,需要修改MRS集群的manager页面切换HDFS的主备。 mysql> select * from hive_hdfs_test2; ERROR 1105 (HY000): errCode = 2, detailMessage
password --secure --config-file /root/config.xml 集群内网地址:集群详情页面中集群访问地址,这里替换成您自己购买的集群的访问地址。 password为您购买集群时设置的密码,如果有特殊符号,特殊符号前面需要\进行转义,如果密码整体用单引号括起来,则特殊字符不需要转义。
数值就是集群访问地址,如图1所示。 图1 ZK链接地址 使用工具部署客户端。 请将以下命令中的"$zookeeper_address"参数替换为3获取的ZK链接地址,然后在弹性云服务器命令行窗口,执行该命令一键部署客户端。 普通集群一键部署命令。 source quick_start_hbase_shell
本地表副本关系和cluster一致,有分布式表作为分片之间的关系。 数据迁移过程中原表默认为只读状态。 数据迁移的时候数据首先会保存在临时表中,执行的时候用迁移的数据表替换原表,该过程中可能读取到错误的数据,切换时间为秒级。 数据迁移过程中可能由于集群问题导致此过程暂停,根据报错修复集群继续执行任务。 数据迁
Shell访问集群章节。 在CloudTable客户端中执行查询命令,查看使用CDM迁移到CloudTable的数据。 命令示例如下,其中table_name请替换为在CDM集群中新建作业时指定的表名。 scan 'table_name' 父主题: HBase数据批量导入
仅支持创建时开启。 是否开启https 是否开启https访问通道加密,https协议端口为8050。 说明: 开启https时连接集群只能使用MySQL8及以上客户端,连接端口为9030,使用方法请参见连接客户端。 创建集群开启https选项,后续无法关闭。 创建集群未开启https选项,后续无法开启。
关联条件。小表的数据量控制在百万~千万行级别,且需要在join前把小表数据通过条件进行有效过滤。 【建议】使用GLOBAL JOIN/IN替换普通的JOIN。 ClickHouse基于分布式表查询会转换成所有分片的本地表操作,再汇总结果。实际使用中,join和global joi
SELETC 描述如何使用SELECT语句查询数据。 基本语法 SELECT [DISTINCT] expr_list [FROM [database_name.]table | (subquery) | table_function] [FINAL] [SAMPLE sample_coeff]