检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
be_host:节点地址。 be_webserver_port:节点端口。 设置回收站时间 回收站原理:删除的数据不会直接从磁盘上删除,而是先放入回收站,等待超时时间满足后,再从磁盘上直接删除。 设置回收站时间需要考虑的因素。 回收站时间过长,会累积垃圾文件,占用磁盘空间。 回收站时间过长,调用admin
数据无法恢复。 图1 按需计费CloudTable集群生命周期 华为云根据客户等级定义了不同客户的宽限期和保留期时长。宽限期和保留期的详细说明请参见宽限期保留期。 避免和处理欠费 及时清理不再使用资源、设置费用预警可以有效避免欠费。 欠费后需要及时充值,详细操作请参见账户充值。
将冷热数据分别存储在不同类型的存储介质中,以降低存储成本。 Hot(热数据):访问、更新频率较高,未来被调用的概率较高的数据,对访问的响应时间要求很高的数据。 Cold(冷数据):不允许更新或更新频率比较低,访问频率比较低,对访问的响应时间要求不高的数据。 父主题: 开发ClickHouse冷热分离应用
Hive连接步骤 登录表格存储服务管理控制台。 用户在CloudTable集群管理界面,选择需要操作的集群进入集群详情页面。 单击tab页中的“连接设置”,弹出连接页面。 单击左上角“新建连接”创建MRS Hive连接。 新建连接类型:非安全认证hive on OBS,认证类型选择SIMPLE,OBS按钮开启状态。
JRE”选项选择JDK版本。如图4所示,选中“Alternate JRE”后,选择JDK版本。 图4 选择JRE 单击“Finish”关闭窗口完成设置。 设置Eclipse的文本文件编码格式,解决乱码显示问题。 在Eclipse的菜单栏中,选择“Window > Preferences”。 弹出“Preferences”窗口。
族、检查表是否存在、修改表结构和列族结构以及删除表等功能。 (5)调用Admin的建表方法。 注意事项 注[1] 可以设置列族的压缩方式,代码片段如下: //设置编码算法,HBase提供了DIFF,FAST_DIFF,PREFIX和PREFIX_TREE四种编码算法 hcd.
集群管理列表默认按时间顺序排列,时间最近的集群显示在最前端。集群管理列表参数说明如表1和表2所示。 表1 集群管理列表参数 参数 参数说明 集群名称 集群的名称,创建集群时设置。 集群状态 集群的运行状态信息。集群状态包括创建中、服务中、亚健康、创建失败和冻结。 任务状态 集群任务的状态信息。请参见表4。 引擎类型
Hive连接步骤 登录表格存储服务管理控制台。 用户在CloudTable集群管理界面,选择需要操作的集群进入集群详情页面。 单击tab页中的“连接设置”,弹出连接页面。 单击左上角“新建连接”创建MRS Hive连接。 新建连接类型:安全认证hive on OBS,认证类型选择KERBEROS,OBS按钮开启状态。
e.hmaster.config.expandor”中新增参数“hbase.gsi.max.index.count.per.table”,设置值大于5,并重启HMaster使配置生效。 索引名长度不能超过18个字符。 不建议使用过长的索引名。如果需创建较长的索引名,请在HMaster的自定义配置“hbase
系统的性能,数据均衡会自动进行,集群会在几个小时到一天不等的时间内恢复到负载均衡的状态。Doris集群目前不支持纵向扩容,而Doris本身有多种方式可以实现纵向扩容,因此需要对Doris集群增加纵向扩容服务。 新增节点按照当前集群的计费模式进行计费。 注意事项 当集群状态处于“服
Hive连接步骤 登录表格存储服务管理控制台。 用户在CloudTable集群管理界面,选择需要操作的集群进入集群详情页面。 单击tab页中的“连接设置”,弹出连接页面。 单击左上角“新建连接”创建MRS Hive连接。 新建连接类型:非安全认证hive on hdfs,认证类型选择SIMPLE,OBS按钮关闭状态。
3.1版本。 400 CloudTable.0113 openTSDB开关设置不满足要求 enable_openTSDB为openTSDB的开关,开关设置的不满足要求。 enable_openTSDB设置为false或者true。 备注:此字段只适用HBase1.3.1版本。 400
hive_catalog.DB.test_table; 元数据缓存设置 创建Catalog时可以采用参数file.meta.cache.ttl-second来设置Hive分区文件缓存自动失效时间,也可以将该值设置为0来禁用分区文件缓存,时间单位为:秒。示例如下: CREATE CATALOG
JDK默认TLS只支持1.0,如果使用IBM JDK,请配置启动参数“com.ibm.jsse2.overrideDefaultTLS”为“true”,设置后可以同时支持TLS1.0/1.1/1.2。详情请参见IBM官方网站的相关说明。 安装和配置Eclipse 用于开发CloudTable应用程序的工具。
单击页面左上角的“新建用户”,弹出新建用户窗口。 图1 新建用户 表1 参数说明 参数 说明 用户名 新建用户的名字。 密码 新建用户的密码。 说明: 设置密码规则: 8~16个字符。 至少包含以下字符中的4种:大写字母、小写字母、数字、特殊字符($@!%*?&)。 确认密码 确认密码。 检查后参数,确认无误,单击确定。
hdfs 登录表格存储服务管理控制台。 用户在CloudTable集群管理界面,选择需要操作的集群进入集群详情页面。 单击tab页中的“连接设置”,弹出连接页面。 单击左上角“新建连接”创建MRS Hive连接。 新建连接类型:安全认证hive on hdfs,认证类型选择KERBEROS,OBS按钮关闭状态。
步骤二:MRS集群中创建Flink作业制造数据 步骤三:创建DLI Flink作业进行数据同步 步骤四:结果验证 准备工作 已注册华为账号并开通华为云,具体请参见注册华为账号并开通华为云,且在使用CloudTable前检查账号状态,账号不能处于欠费或冻结状态。 已创建虚拟私有云和子网,参见创建虚拟私有云和子网。
选择变配规格,单击,选择规格。 确定费用以及资源配额后,单击确定。 单击确定后,集群状态变更为“亚健康”,任务状态为“规格变更中”,当集群变更完毕后,集群状态更新为“服务中”,任务状态清空。 规格变更状态 表1 规格变更任务状态说明 状态 说明 规格变更中 表示集群正在变更中。 服务中 当集群变更成
apache.hadoop.hbase.client.Admin对象的createTable方法来创建表,并指定表名、列族名、冷热时间线。 创建表有两种方式(强烈建议采用预分Region建表方式): 快速建表,即创建表后整张表只有一个Region,随着数据量的增加会自动分裂成多个Region。
租户最大占用内存资源的百分比。 并发数 1~2147483647 租户最大可运行查询任务的并发数。该值是对单个FE的限定。例如设置并发数为1,Doris有三个FE节点,则从集群角度看,最大可运行的SQL数为3。 队列长度 1~2147483647 租户最大等待执行的查询任务数。超