检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
获取帐号ID 在调用接口的时候,部分URL中需要填入帐号ID(domain-id),所以需要先在管理控制台上获取到帐号ID。帐号ID获取步骤如下: 登录CloudTable控制台。 单击用户名,在下拉列表中单击“我的凭证”。 在“API凭证”页面中查看帐号ID。 图1 账号ID 父主题:
获取项目ID 从控制台获取项目ID 在调用接口的时候,部分URL中需要填入项目编号(project_id),所以需要获取到项目编号。项目编号获取步骤如下: 登录管理控制台。 单击用户名,在下拉列表中单击“我的凭证”。 在“API凭证”页面的项目列表中查看项目ID。 多项目时,展开
获取集群ID 在调用接口的时候部分URL中需要填入集群ID(cluster_id),所以需要获取到集群ID。获取集群ID步骤如下: 登录CloudTable管理控制台。 在左侧导航栏,单击“集群管理”。 在集群列表中找到所需要的集群,然后单击集群名称,进入集群“详情”页面。 在详情页面查看集群ID。
sec) 如果需修改超时时间,可以通过以下命令来修改。例如超时时间修改为1分钟: mysql> SET query_timeout = 60; Query OK, 0 rows affected (0.00 sec) 当前超时检查间隔为5秒,因此小于5秒的超时不是很准确。 上述修
设置属性 功能介绍 设置连接属性,如下样例代码设置socket超时时间为60s。 代码样例 Properties clickHouseProperties = new Properties(); clickHouseProperties.setProperty(ClickHouseClientOption
使用Import工具,可以导入HBase的SequenceFile数据文件到CloudTable的HBase中。Import工具是客户端工具安装包中自带的一个工具。 SequenceFile文件是指使用Export工具从HBase导出的数据文件。 准备一台安装了CloudTable客户端的服务器。客户端安装方法请参考使用HBase
创建Configuration 功能介绍 HBase通过加载配置文件来获取配置项。 加载配置文件是一个比较耗时的操作,如非必要,请尽量使用同一个Configuration对象。 样例代码未考虑多线程同步的问题,如有需要,请自行增加。其它样例代码也一样,不再一一进行说明。 代码样例
除等操作。 前提条件 集群已启用ThriftServer并从集群详情页面获取到ThriftServer IP。 已下载Thrift安装包,安装包下载地址:链接。 已下载HBase Thrift定义文件,文件下载地址:地址。 操作步骤 登录表格存储服务控制台。 在页面左上角选择区域。
HColumnDescriptor cdn = new HColumnDescriptor(FAM_N); cdn.setDataBlockEncoding(DataBlockEncoding.FAST_DIFF); tableDesc.addFamily(cdn); // Add
创建Configuration 功能介绍 HBase通过加载配置文件来获取配置项。 加载配置文件是一个比较耗时的操作,如非必要,请尽量使用同一个Configuration对象。 样例代码未考虑多线程同步的问题,如有需要,请自行增加。其它样例代码也一样,不再一一进行说明。 代码样例
创建Configuration 功能介绍 HBase通过加载配置文件来获取配置项。 加载配置文件是一个比较耗时的操作,如非必要,请尽量使用同一个Configuration对象。 样例代码未考虑多线程同步的问题,如有需要,请自行增加。其它样例代码也一样,不再进行说明。 代码样例 下面代码片段在com
生垃圾文件。 Delete/drop/truncate等操作只是在逻辑上删除了数据,并没有进行物理删除,也会产生垃圾文件。 数据文件合并完成后,并没有物理删除旧的数据,产生垃圾文件。 垃圾文件影响 过多垃圾文件,会占用磁盘,影响可用磁盘大小,可能造成有效数据丢失。 垃圾文件本身有
解决办法 尽量一次性写入数据,避免磁盘负载频繁变化。 手动删除垃圾文件,并调低垃圾文件超时时间,待数据均衡,且垃圾文件较少时,在调回垃圾超时时间,回收站时间设置请参考设置回收站时间。 父主题: 通用类
头和消息体。 状态码是一组从1xx到5xx的数字代码,状态码表示了请求响应的状态。 对于获取用户Token接口,如果调用后返回状态码为“201”,则表示请求成功。 响应消息头 对应请求消息头,响应同样也有消息头,如“Content-Type”。 对于获取用户Token接口,返回如
问题现象 查询CloudTable表内的数据,出现count值和list数据条数不一致的情况,频繁出现数据丢失的问题,项目运行中,还有许多链接超时的情况。 分析原因 删除数据后,导致索引表和数据表不对应,导致异常。 处理方法 短期:通过离线流进行批处理,在第二天补数据。 长期。 le
预分配内存失败。可能是表中一行的字节长度超过了 100KB。 Too many open files。打开的文件句柄数超过了Linux系统限制。需修改Linux系统的句柄数限制。 如果创建数据分片时超时,也可以通过在fe.conf中设置tablet_create_timeout_second=x
客户端的hbase-site.xml文件 如果您部署了HBase Shell客户端,您就可以配置客户端目录下的“hbase/conf/hbase-site.xml”文件。 服务器端的hbase-site.xml文件 您不能直接编辑服务端的hbase-site.xml文件,但是可以在表格存储服务管理控制台中修改hbase-site
修改hbase-env.sh文件内容。进入安装客户端的目录,输入ll命令,查看是否有HBase客户端。 进入hbase-client文件夹,查看conf文件夹。 cd hbase-client 进入conf文件夹编辑hbase-env.sh文件。 进入conf文件夹。 cd conf/
load是一个同步的导入方式,用户通过发送HTTP协议发送请求将本地文件或数据流导入到Doris中。Stream load同步执行导入并返回导入结果。用户可直接通过请求的返回体判断本次导入是否成功。 Stream load主要适用于导入本地文件,或通过程序导入数据流中的数据。 基本原理 下图展示了Stream
主动拒绝和停止某些操作,达到自我保护的目的。请参见磁盘空间管理。 影响 太迟钝,会造成磁盘间数据量差异较大,影响并发性能。 太频繁,会产生大量垃圾文件,占用磁盘,需同步调整垃圾文件超时时间。 父主题: 通用类