检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
写数据客户端调优 写数据时,在场景允许的情况下,更适合使用Put List的方式,可以极大的提升写性能。每一次Put的List的长度,需要结合单条Put的大小,以及实际环境的一些参数进行设定。建议在选定之前先做一些基础的测试。 写数据表设计调优 在hbase shell中设置以下表相关参数,以提升HBase写数据性能。
事件只包含主键信息, 在这时写入到Hudi的delete数据会出现只有主键字段有值, 其他业务字段都是null的情况。 场景二: 在数据库单条数据大小超过8k(包括8k)场景下,update事件只包含变更字段,此时Hudi数据中会出现部分字段的值为__debezium_unavailable_value的情况。
Event的特定Header来进行Channel的选择,需要根据业务场景选择合理的Header来进行数据分流。 SinkGroup 当后端单Sink性能不足、需要高可靠性保证或者异构输出时可以使用Sink Group来将指定的Channel和多个Sink对接,从而满足相应的使用场景。目前Flume提供了两种Sink
取值范围: 0-10080。10080为一周的分钟数。 默认取值: 不涉及 scaling_adjustment Integer 参数解释: 单次调整集群节点的个数。 约束限制: 不涉及 取值范围: 1-100 默认取值: 不涉及 trigger Trigger object 参数解释:
集群连续5n(n默认值为1)分钟持续满足配置的指标阈值后才能触发扩容或者缩容。 每次扩容或者缩容后,存在一个冷却时间,冷却时间默认为10分钟,最小值为0。 单次扩容或者缩容的节点数,最小1个节点,最大100个节点。 集群Task节点数量会被限定在用户配置的默认节点数量范围内或者当前时间段生效的资源
true:创建MRS集群默认安全组。 false:不创建MRS集群默认安全组。 默认取值: false safe_mode 是 String 参数解释: MRS集群运行模式。 约束限制: 不涉及 取值范围: SIMPLE:普通集群,表示Kerberos认证关闭,用户可使用集群提供的所有功能。 KERBEROS
该API可用于列出给定表中的所有索引。 无 基于HBase本地二级索引查询数据 在具有索引的用户表中,可以使用Filter来查询数据。对于创建单索引和组合索引的用户表,使用过滤器查询的结果与没有使用索引的表相同,但数据查询性能高于没有使用索引的表。 索引的使用规则如下: 对于为一个或多个列创建单个索引的情况:
该API可用于列出给定表中的所有索引。 无 基于HBase本地二级索引查询数据 在具有索引的用户表中,可以使用Filter来查询数据。对于创建单索引和组合索引的用户表,使用过滤器查询的结果与没有使用索引的表相同,但数据查询性能高于没有使用索引的表。 索引的使用规则如下: 对于为一个或多个列创建单个索引的情况:
额。 约束限制: 不涉及 取值范围: 1-500 默认取值: 不涉及 billing_type 是 Integer 参数解释: 集群的计费模式。 约束限制: 不涉及 取值范围: 12:表示按需计费。接口调用仅支持创建按需计费集群。 默认取值: 不涉及 data_center 是 String
取值范围: 0-10080。10080为一周的分钟数。 默认取值: 不涉及 scaling_adjustment 是 Integer 参数解释: 单次调整集群节点的个数。 约束限制: 不涉及 取值范围: 1-100 默认取值: 不涉及 trigger 是 Trigger object 参数解释:
取值范围: 0-10080。10080为一周的分钟数。 默认取值: 不涉及 scaling_adjustment 是 Integer 参数解释: 单次调整集群节点的个数。 约束限制: 不涉及 取值范围: 1-100 默认取值: 不涉及 trigger 是 Trigger object 参数解释:
取值范围: 0-10080。10080为一周的分钟数。 默认取值: 不涉及 scaling_adjustment 是 Integer 参数解释: 单次调整集群节点的个数。 约束限制: 不涉及 取值范围: 1-100 默认取值: 不涉及 trigger 是 Trigger object 参数解释: