检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
ENGINE = engine_name() 表引擎类型。 [POPULATE] POPULATE关键字。如果创建物化视图时指定了POPULATE关键字,则在创建时将SELECT子句所指定的源表数据插入到物化视图中。
ClickHouse产品优势 性能优势:ClickHouse采用列存储,相同列的数据属于同一类型,有利于获得更高的数据压缩比。通常可以达到10:1的压缩比,大幅降低存储成本和读取开销,提高查询性能。
图3 选择增加的library类型 在“Add Library”页面中,通过“Alternate JRE”或“Workspace default JRE”选项选择JDK版本。如图4所示,选中“Alternate JRE”后,选择JDK版本。
无论是异步还是同步的导入类型,都不应该在Doris返回导入失败或导入创建失败后,无休止的重试。外部系统在有限次数重试并失败后,保留失败信息,大部分多次重试均失败问题都是使用方法问题或数据本身问题。 父主题: 数据导入
FE节点参数说明 表3 FE节点参数说明 参数名 参数值 静态参数 参数类型 状态 单位 参数范围 参数默认值 参数描述 max_routine_load_job_num 100 否 int 未更改 - (0,300) 100 该参数限制的例行导入作业的总数,包括NEED_SCHEDULED
安装客户端的操作系统类型、版本是否正确。 HBase客户端:1.x版本使用hbase1.x客户端,2.x版本使用hbase2.x客户端。 Doris客户端:普通集群使用开源MySQL客户端,如果是是安全集群使用MySQL8及以上客户端。
同时因为固定了Value列上的聚合方式,在进行其他类型的聚合查询时,需要考虑语意正确性。 Aggregate Key相同时,新旧记录进行聚合,目前支持的聚合函数有SUM,MIN,MAX,REPLACE。
表1 云审计服务支持的CloudTable操作事件列表 操作名称 事件名称 资源类型 创建集群 createCloudTableClusterV3 cluster 节点扩容 growCloudTableCluster cluster 重启集群 rebootCloudTableCluster
进入只读模式阈值 当集群存储达到某一阈值后,如果继续向存储写入数据,存储会写满,可能会导致性能以及其他功能问题。因此需要给集群设置阈值,当达到设置的阈值后,集群进入只读模式,并发出告警提示用户及时处理集群状态。阀值默认值是85%,取值范围70到90之间。
表1 自定义安全规则组 方向 策略 协议端口/范围 类型 目的/源地址 用途 出方向 允许 全部 IPv4/IPv6 0.0.0.0/0 出方向放行。 入方向 允许 8123 CloudTable ClickHouse集群所在的安全组。 ClickHouse的Http协议端口。
引擎类型 ClickHouse 集群版本 集群的版本信息。 企业项目 企业项目管理帮助您将相关的资源(如具有相同使用用途的资源)集中在一起,按企业项目的方式来管理云资源。 说明: 当企业业务发生变化,原用户不再拥有企业项目的使用权限时,可将这些用户与该企业项目的关联关系删除。
引擎类型 Doris 集群版本 集群的版本信息。 企业项目 企业项目管理帮助您将相关的资源(如具有相同使用用途的资源)集中在一起,按企业项目的方式来管理云资源。 说明: 当企业业务发生变化,原用户不再拥有企业项目的使用权限时,可将这些用户与该企业项目的关联关系删除。
引擎类型 Doris\HBase\ClickHouse。 集群版本 集群内核版本。 企业项目 企业项目管理帮助您将相关的资源(如具有相同使用用途的资源)集中在一起,按企业项目的方式来管理云资源。
索引列数据定义为String类型时,要避免写入\x00和\x01两个特殊字符(特殊不可见字符)。 避免指定时间戳的方式写入索引列。 索引查询约束 索引查询时索引的状态必须为ACTIVE。 索引查询不支持指定时间戳范围查询。
请确认安全组的“出方向规则”中是否存在如下规则: 协议端口:全部 类型:IPv4 目的地址:0.0.0.0/0 如上述规则不存在,则按图1所示添加如下出方向规则。
数据引擎 选择需要创建的数据组件类型。 图1 Master/Core节点 表3 Master节点配置 参数 参数说明 计算规格 请根据业务需求合理选择计算规格。在计算规格列表中展示了每一种计算规格单个节点的CPU、内存和建议使用场景。 说明: 支持的计算规格: 4U16G。
执行“put”命令往指定表插入一条记录,需要指定表的名称,主键,自定义列,以及插入的具体值。
表3 自定义安全规则组 方向 策略 协议端口/范围 类型 目的/源地址 用途 出方向 允许 全部 IPv4/IPv6 0.0.0.0/0 出方向放行。 入方向 允许 8123 CloudTable ClickHouse集群所在的安全组。 ClickHouse的Http协议端口。
数据引擎 选择需要创建的数据组件类型。 Clickhouse内核版本 默认即可。 集群高可用 开启集群高可用:在单个节点(分片)提供2个副本,默认3个Zookeeper节点。
load最终导入的行数 包括stream load和routine load任务 ≥0 60s SYS.CloudTable doris_be_stream_load_receive_bytes stream load接收的字节数 包括stream load从http接收的数据,以及