检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
Flink作业实时同步MRS Kafka数据至CloudTable HBase集群 此章节为您介绍数据实时同步的最佳实践，通过数据湖探索服务DLI Flink作业将MRS kafka数据实时同步给HBase，实现Kafka实时入库到HBase的过程。 了解DLI请参见数据湖探索产品介绍。 了解Kafka请参见MRS产品介绍。
使用HBase Shell访问集群 修改集群HBase参数 数据批量导入 HBase冷热分离 使用全局二级索引 扩容集群 重启集群 删除集群 HBase监控集群 HBase审计日志 使用Doris 使用MySQL客户端访问集群 重启集群 删除集群 集群扩容 Doris参数配置 Doris用户管理
集群监控功能整体分为计算节点指标监控和ZooKeeper指标监控两个模块。在每个模块中用户都可调整监控数据的时间范围：方便查看不同时间的历史数据。也可调整监控数据的时间粒度：方便在不同维度层次查看数据。如果想实时查看监控数据，可以开启自动刷新。平台可按1小时、3小时、12小时、24小时、7天的间隔自动刷新监控图表。
ACTIVE：索引正常，可以正常读写。 UNUSABLE：索引被禁用，索引数据会正常写入，查询时无法使用这个索引。 INACTIVE：索引异常，索引数据与数据表不一致，跳过生成这个索引的索引数据，查询数据时无法使用这个索引。 BUILDING：索引数据正常批量生成，索引数据生成工具执行结束会自动转换到ACTIVE状态，此状态下可以正常读写。
管理集群 创建Doris集群 Doris集群管理列表简介 查看Doris集群基本信息 重启集群 删除集群 扩容集群 Doris集群节点管理 Doris参数配置 Doris包周期计费操作 父主题： Doris集群管理
进入集群客户端。 查看数据库。 show databases; 使用数据库。 use databases; 查看数据表。 show tables; 查看同步数据。 select * from order limit 10; 图2 查看同步数据 父主题： 数据导入
HBase支持冷热数据分离特性。通过该特性，您可以将冷热数据分别存储在不同类型的存储介质中，以降低存储成本。 在海量大数据场景下，表中的部分业务数据随着时间的推移仅作为归档数据或者访问频率很低，同时这部分历史数据体量非常大，比如订单数据或者监控数据，如果降低这部分数据的存储成本将会极大的节省企业的成本。
let数据量过小，则数据的聚合效果不佳，且元数据管理压力大。如果数据量过大，则不利于副本的迁移、补齐，且会增加Schema Change或者Rollup操作失败重试的代价（这些操作失败重试的粒度是Tablet）。 当Tablet的数据量原则和数量原则冲突时，建议优先考虑数据量原则。
统一数仓构建 ：一个平台满足统一的数据仓库建设需求，简化繁琐的大数据软件栈。Doris构建的统一数仓，替换了原来由Spark、Hive、Kudu、HBase、Phoenix组成的旧架构，架构大大简化。 数据湖联邦查询：通过外表的方式联邦分析位于Hive中的数据，在避免数据拷贝的前提下，查询性能大幅提升。
而新的Multi-Catalog功能在原有的元数据层级上，新增一层Catalog，构成Catalog->Database->Table的三层元数据层级。其中，Catalog可以直接对应到外部数据目录。目前支持的外部数据目录包括： Hive JDBC: 对接数据库访问的标准接口（JDBC）来访问各式数据库的数据。 该功
Metastore的元数据服务，Doris可以自动获取Hive的库表信息，并进行数据查询。 除了Hive外，很多其他系统也会使用Hive Metastore存储元数据。所以通过Hive Catalog，我们不仅能访问Hive，也能访问使用Hive Metastore作为元数据存储的系统。 创建。
HBase表格存储的每日新增数据使用量怎么查看? HBase集群无法查看单个表的增量值，需要通过后台帮您查询，或者可以通过控制台查看每日新增数据，查看详情页已经使用的存储容量，通过记录存储容量值计算增量。 父主题： 数据读写类
查看Doris集群基本信息 集群创建完成后，可对集群进行监控和管理。在CloudTable管理控制台单击集群管理，在集群列表中找到所要查看的集群并单击集群名称，进入集群基本信息页面，用户可查看集群信息和集群的网络配置。 表1 集群信息 参数 说明 集群名称 集群的名称，创建集群时设置。
CloudTable集群支持跨VPC/公网访问的使用场景 使用场景 连通同区域CloudTable集群与跨VPC对端集群。 连通跨区域CloudTable集群与对端集群。 公网访问CloudTable集群。 连通CloudTable集群和线下数据中心。 表1 使用方案 场景 支持组件
如何调整数据均衡的灵敏度，调整后有哪些影响？ Doris的数据磁盘空间如果不加以控制，会因磁盘写满而导致进程不可写。因此我们监测磁盘的使用率和剩余空间，通过设置不同的警戒水位，来控制Doris系统中的各项操作，尽量避免发生磁盘被写满的情况。 如何调整数据均衡的灵敏度？ BE定期（
Doris监控集群 Doris集群支持的监控指标 设置告警规则 查看集群的监控信息 Doris监控页面 父主题： Doris用户指南
系统的性能，数据均衡会自动进行，集群会在几个小时到一天不等的时间内恢复到负载均衡的状态。Doris集群目前不支持纵向扩容，而Doris本身有多种方式可以实现纵向扩容，因此需要对Doris集群增加纵向扩容服务。 新增节点按照当前集群的计费模式进行计费。 注意事项 当集群状态处于“服
最佳实践 因为数据模型在建表时就已经确定，且无法修改。所以，选择一个合适的数据模型非常重要。 数据模型选择 Doris数据模型上目前分为三类：AGGREGATE KEY，UNIQUE KEY，DUPLICATE KEY。三种模型中数据都是按KEY进行排序。 Aggregate模型。
创建库 功能介绍 如下示例中通过on cluster语句在集群的所有Server节点创建数据库。 其中数据库名定义在clickhouse-example.properties文件的databaseName字段。 样例代码 private void createDatabase(String
HBase集群节点扩容 为了提升系统的计算能力、存储能力，用户可以通过节点扩容来扩容集群。节点扩容将会产生相应的费用。用户可根据实际需要或业务情况，动态的增加节点的个数，集群将自适应的实现负载均衡，保证业务不中断，平滑扩容。 注意事项 扩容过程中，不会自动重启集群，保证业务不中断，平滑扩容。
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
