检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
是,存在表且需要同步数据,以HBase表用户登录安装主集群HBase客户端的节点,并执行kinit用户名认证身份。该用户需要拥有表的读写权限,以及“hbase:meta”表的执行权限。然后执行19。 否,不需要同步数据,任务结束。
MRS中Kafka服务端默认可以接收的消息最大为1000012 bytes =977 KB。 解决办法 与用户确认,当前Flume发送数据确实存在超过1M的消息。因此,为了确保当前这些消息能够写入Kafka,需要调整Kafka服务端相关参数。
启用默认标签会为集群和每个节点添加默认标签,并自动占用2个标签配额(即系统默认可以添加20个标签,此时还可以添加18个标签)。 如您的组织已经设定MapReduce服务的相关标签策略,则需按照标签策略规则为集群/节点添加标签。
采用Kerberos认证,保证合法用户具有操作权限,并确保主题名称正确。 删除Kafka数据目录 该操作将会导致业务信息丢失。 请勿手动删除数据目录。 修改数据目录下内容(创建文件、文件夹) 该操作将会导致该节点上的Broker实例故障。
source bigdata_env 执行下列命令进行用户认证,这里以hdfs为例,用户可根据实际用户名修改(普通集群请跳过此步操作)。 kinit hdfs kinit一次的时效24小时。24小时后再次运行样例,需要重新执行kinit。
约束限制: 不涉及 取值范围: SIMPLE:普通集群,表示Kerberos认证关闭,用户可使用集群提供的所有功能。
hoodie.datasource.write.keygenerator.class 默认可以配置为org.apache.hudi.keygen.SimpleKeyGenerator 和org.apache.hudi.keygen.ComplexKeyGenerator,也可以不配置
hoodie.datasource.write.keygenerator.class 默认可以配置为org.apache.hudi.keygen.SimpleKeyGenerator和org.apache.hudi.keygen.ComplexKeyGenerator,也可以不配置
default_az_code String 参数解释: 默认可用区编码。 取值范围: 不涉及。 support_physical_az_group Boolean 参数解释: 支持的物理可用区分组。 取值范围: True:支持物理可用区分组。
约束限制: 不涉及 取值范围: 0:普通集群,表示Kerberos认证关闭,用户可使用集群提供的所有功能。
约束限制: 不涉及 取值范围: SIMPLE:普通集群,表示Kerberos认证关闭,用户可使用集群提供的所有功能。