检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
因此,Doris能够较好的满足报表分析、即席查询、统一数仓构建、数据湖联邦查询加速等使用场景,用户可以在此之上构建用户行为分析、AB实验平台、日志检索分析、用户画像分析、订单分析等应用。
因此,Doris能够较好的满足报表分析、即席查询、统一数仓构建、数据湖联邦查询加速等使用场景,用户可以在此之上构建用户行为分析、AB实验平台、日志检索分析、用户画像分析、订单分析等应用。
不通 应用容器化改造介绍 应用容器化改造流程 步骤1:对应用进行分析 更多 访问外网 应用容器化改造介绍 应用容器化改造流程 步骤1:对应用进行分析 步骤2:准备应用运行环境 更多 操作系统相关 应用容器化改造介绍 应用容器化改造流程 步骤1:对应用进行分析 步骤2:准备应用运行环境
Doris应用开发指导 Doris组件使用规范 建表 数据导入 数据湖分析 通过JDBC方式连接Doris 开发Doris冷热分离应用
访问CloudTable HBase集群报错,hmaster域名不识别? 怎么删除ClickHouse集群ZooKeeper节点的副本表格? ClickHouse集群创建表格后提示另外一个节点不存在此数据库?
原因分析 数据迁移单个请求写入数据太大,导致报错。 处理方法 建议单次写入不超过2M,单条不超过200k。 父主题: 数据读写类
原因分析 因为创建的是安全集群,用非安全命令连接,所以会报错。 处理方法 方法一:创建ClickHouse安全集群后,使用SSH工具连接,详情请参见使用客户端访问集群章节。 方法二:如果使用HTTPS连接,请参见ClickHouse安全通道>HTTPS连接步骤。
原因分析 Zookeeper连接数过多。 处理方法 建议业务代码连接同一个CloudTable HBase集群时,多线程创建并复用同一个Connection,不必每个线程都创建各自Connection。
分析原因 转包周期的集群未完成订单支付。 进入转包周期页面,操作异常页面关闭。 处理方法 方法一:取消未完成的支付订单后,再进行扩容(如果CBC页面无法找到未完成的订单,则集群需要重新转包周期生成待支付订单,在CBC页面找到此订单,取消订单)。
分析原因 删除数据后,导致索引表和数据表不对应,导致异常。 处理方法 短期:通过离线流进行批处理,在第二天补数据。 长期。 lemon特性暂不支持数据删除操作,删除后会出现表数据不对应查询异常,去掉数据表TTL老化。 针对CBC数据老化场景看是否可以去掉TTL增强索引。
HBase服务增加了MetricController实例,开启热点检测能力,能够监控每个RegionServer节点的请求流量,通过聚合分析,识别出请求偏高的节点和Region,有助于快速发现热点问题;并提供一定的热点问题自愈能力,比如热点Region自动转移或Split。
Will not attempt to authenticate using SASL (unknown error) 原因分析 出现该问题的可能原因为: 网络访问不通。 由于CloudTable的链接地址是内网地址,不是公网地址,不能在公网环境直接连接CloudTable。
图1 结果示意图 原因分析 在创建集群的时候,只在一节点上创建了数据库在其他的节点上未创建数据库。 处理方法 在其他的节点上创建数据库。 方法一: 创建数据库。 create database demo; 使用数据库demo。
问题分析 频繁写入数据、删除过多垃圾文件,导致磁盘不均衡。 解决办法 尽量一次性写入数据,避免磁盘负载频繁变化。 手动删除垃圾文件,并调低垃圾文件超时时间,待数据均衡,且垃圾文件较少时,再调回垃圾超时时间,回收站时间设置请参考设置回收站时间。 父主题: 通用类
hbase.metric.controller.analysis.threads.max 10 -- [1,100] 10 热点分析任务线程池最大线程数。
图1 结果显示图 原因分析 由于创建表格的命令中携带了ON CLUSTER default_cluster,所以会在每一个节点上都创建一个本地表。 处理方法 删除其他节点上的表格以及存放的数据,可解决此问题。 创建数据库。
[INTERNAL_ERROR]tablet error: [E-235], host: 10.x.x.x, host: 10.x.x.x 分析原因 用户导入数据速度过快,频繁小批量数据导入会产生过多数据版本,超过max_tablet_version_num设置的值,则报错E-235
背景 在数据分析的实际场景中,冷热数据面临着不同的查询频次及响应速度要求。而随着历史数据的不断增多,如果我们将所有数据存储在本地,将造成大量的资源浪费。冷热分离特性可将冷热数据分开存储,将冷热数据分别存储在成本不同的存储介质上。
适用于有更新需求的分析业务。目前Unique key实现上和Aggregate key的 REPLACE聚合方法一样,二者本质上相同。但是无法利用ROLLUP等预聚合带来的查询优势(因为本质是REPLACE,没有SUM这种聚合方式)。
计费构成分析 用了一段时间后,用户发现云服务器当前规格无法满足业务需要,于2023/03/18 15:30:00对集群扩容,扩容规格如下: 表1 变更计费模式 计费模式 计算规则 付费周期 费用计算 按需计费(节点扩容前) CU费用:CU单价 x 节点数 平均每小时的费用 Master