表格存储服务 CLOUDTABLE-华为云

表格存储服务 CLOUDTABLE-创建ClickHouse集群:步骤

步骤登录表格存储服务管理控制台。单击管理控制台左上角的，选择区域。单击右上角的购买集群按钮，进入“购买集群”页面。参考下面表格配置集群的基本信息。图1 区域图表1 区域参数参数说明区域集群的工作区域。选择集群节点实际工作区域。有关区域的详细信息，请参见地区和终端节点。可用区域选择集群工作区域下关联的可用区。目前ClickHouse支持的可用区请参见区域和可用区。计费模式计费模式有按需付费和包年/包月。订购周期当计费模式选择包年/包月时，才会出现此选项。客户根据需求选择订购时间。自动续费在购买页面勾选此选项，集群到期后会自动续费，不勾选集群到期需要手动续费。图2 集群网络配置表2 集群和网络配置参数参数说明名称集群的名称。必须以字母开头，由字母、数字、中划线组成，不能包含其他的特殊字符，并且长度为4～32个字符。虚拟私有云 VPC即虚拟私有云，是通过逻辑方式进行网络隔离，提供安全、隔离的网络环境。默认即可。如果没有虚拟私有云，请单击“查看虚拟私有云”进入虚拟私有云，创建一个新的虚拟私有云。说明：创建集群不支持子网IP与VPC IP相同，如果相同，请重新选择子网。子网指定虚拟私有云的一个子网。集群使用子网实现与其他网络的隔离，并独享所有网络资源，以提高网络安全。安全组安全组用来实现安全组内和安全组间弹性云服务器的访问控制，加强弹性云服务器的安全保护。用户可以在安全组中定义各种访问规则，这些规则可以限定弹性云服务器的哪些端口或者协议可以访问，这些访问规则可以作用在进出虚拟机的网络访问上。当弹性云服务器加入该安全组后，即受到这些访问规则的保护。不属于该安全组的弹性云服务器，是无法同安全组内的弹性云服务器通信的。您可以选择使用已有的安全组，或者单击“查看安全组”创建新的安全组。关于安全组的更多信息，请参见《虚拟私有云用户指南》中的安全组。数据引擎选择需要创建的数据组件类型。 Clickhouse内核版本默认即可。集群高可用开启集群高可用：在单个节点（分片）提供2个副本，默认3个Zookeeper节点。关闭集群高可用：提供单节点clickhouse，仅用于测试，单节点clickhouse提供一个副本、一个分片，不支持水平扩容，该模式不可用于生产环境。说明：单节点不支持扩容，不支持数据迁移。单节点用户非生产环境。单节点用户需要建立非Replicate表。建表示例： CREATE TABLE test_p (`EventDate` DateTime,`CounterID` UInt32,`UserID` UInt32,`ver` UInt16)ENGINE = ReplacingMergeTree()PARTITION BY sipHash64(CounterID) ORDER BY (CounterID, EventDate, intHash32(UserID))SAMPLE BY intHash32(UserID)SETTINGS index_granularity = 8192; 图3 计算节点配置表3 计算节点参数说明参数参数说明云存储计算规格请根据业务需求合理选择计算规格。在计算规格列表中展示了每一种计算规格单个节点的CPU、内存和建议使用场景。说明：支持的计算规格： 4U16G。 4U32G。 8U32G。 8U64G。 16U64G。 16U128G。 32U128G。 32U256G。 64U256G。 64U512G。 128U512G。存储规格选Clickhouse计算节点的磁盘规格、容量。支持的存储规格：高IO。通用型SSD。超高IO。极速型SSD。容量范围为500~10000GB/节点之间。节点数量多节点：选择集群中的节点个数，支持的节点范围为2~20之间。单节点个数默认为1。本地SSD（不支持扩容）计算规格 8U32G（本地盘容量：1.6T）。 8U64G（本地盘容量：1.6T）。 16U64G（本地盘容量：3.2T）。 16U128G（本地盘容量：3.2T）。 32U128G（本地盘容量：6.4T）。 64U256G（本地盘容量：6.4T）。存储规格默认支持本地SSD盘。节点数量多节点：选择集群中的节点个数，支持的节点范围为2~20之间。单节点个数默认为1。图4 ZooKeeper节点表4 ZooKeeper节点参数说明参数参数说明计算规格请根据业务需求合理选择计算规格。在计算规格列表中展示了每一种计算规格单个节点的CPU、内存和建议使用场景。说明：支持的计算规格： 4U8G（此规格不能用于生产环境）。 4U16G。 8U32G。 16U64G。 32U128G。存储规格默认超高IO数据盘，容量100GB/节点。节点数量集群中的节点数量，默认为3。表5 用户名密码参数参数参数说明用户名管理用户，用于连接集群，默认为admin，不可修改。密码设置admin用户密码。密码复杂度要求如下： 8~12个字符。至少包含以下字符中的4种：大写字母，小写字母、数字、特殊字符（￥@￥！%*？&）。不能与用户名或倒序用户名相同。强弱密码检查。说明：请妥善保管并定期更新密码，避免安全风险。确认密码设置admin用户密码。是否开启通道加密是否开访问通道加密，https协议端口为8050。创建集群开启通道加密选项，后续无法关闭。创建集群未开启通道加密选项，后续无法开启。是否开启冷热分离打开开关，集群支持冷热分离特性，将数据分类存储在不同介质上，有效降低存储成本。关闭开关，集群不支持冷热分离特性。企业项目企业项目管理帮助您将相关的资源（如具有相同使用用途的资源）集中在一起，按企业项目的方式来管理云资源。说明：当企业业务发生变化，原用户不再拥有企业项目的使用权限时，可将这些用户与该企业项目的关联关系删除。可进行单个删除和批量删除。当用户与企业项目的关联关系被删除后，该用户将无法管理该企业项目，如需再次使用，需要重新给该用户关联企业项目。详细步骤请参见企业管理用户指南。配置好参数，单击“立即购买”。进“规格详情”页面，确认集群规格订单信息，单击“提交”，成功提交集群创建任务。单击“返回集群管理列表”，可以查看到集群创建的状态。集群创建需要时间，请您耐心等待。所创集群的初始状态为“创建中”，创建成功后状态更新为“服务中”。如果创建的集群计费模式为包年/包月，单击提交，成功提交集群创建任务。单击“去支付”，跳转到购买页面，确认信息后，选择合适的支付方式，确认付款。返回控制台，查看集群状态，集群创建需要时间，请您耐心等待。所创集群的初始状态为“创建中”，创建成功后状态更新为“服务中”。

表格存储服务 CLOUDTABLE

表格存储服务 CLOUDTABLE-查看HBase集群基本信息

查看HBase集群基本信息集群创建完成后，可对集群进行监控和管理。在CloudTable管理控制台单击集群管理，在集群列表中找到所要查看的集群并单击集群名称，进入集群基本信息页面，用户可查看集群信息和集群的网络配置。集群基本信息参数说明如表1和表2所示。表1 集群信息参数参数说明集群名称集群的名称，创建集群时设置。集群ID 集群的ID。集群状态集群状态信息。已使用存储容量（GB）显示已经使用的存储容量。 RS单元数量显示RegionServer单元的个数。存储配额（GB）显示集群的存储容量大小。计费模式显示集群的计费模式。集群版本集群内核版本。创建时间显示集群创建的时间。企业项目企业项目管理帮助您将相关的资源（如具有相同使用用途的资源）集中在一起，按企业项目的方式来管理云资源。说明：当企业业务发生变化，原用户不再拥有企业项目的使用权限时，可将这些用户与该企业项目的关联关系删除。可进行单个删除和批量删除。当用户与企业项目的关联关系被删除后，该用户将无法管理该企业项目，如需再次使用，需要重新给该用户关联企业项目。 ZK链接地址（内网） Zookeeper地址。用户可以单击，将ZK链接地址复制到剪切板。热存储已使用容量集群开启冷热分离高级特性，热数据的存储容量。冷存储已使用容量集群开启冷热分离高级特性，冷数据的存储容量。是否开启安全通道如果界面显示“否”，表示未开启安全通道；如果界面显示“是”，表示开启安全通道。是否开启Thrift Server 如果界面显示“否”，表示未开启Thrift Server；如果界面显示“是”，表示开启Thrift Server，并且显示Thrift Server的IP地址。是否开启用户认证如果界面显示“否”，表示未开启用户认证；如果界面显示“是”，表示开启用户认证。数据库引擎 HBase。表2 网络配置参数参数说明区域集群的工作区域，在创建集群时设置。可用区显示创建集群时所选择的可用区信息。虚拟私有云 VPC信息，创建集群时所选。 VPC即虚拟私有云，是通过逻辑方式进行网络隔离，提供安全、隔离的网络环境。子网子网信息，创建集群时所选。通过子网提供与其他网络隔离的、可以独享的网络资源，以提高网络安全。安全组显示创建集群时所选择的安全组信息。表3 Master节点配置参数参数说明计算规格请根据业务需求合理选择计算规格。在计算规格列表中展示了每一种计算规格单个节点的CPU、内存和建议使用场景。说明：支持的计算规格： 4U16G。 8U16G。 8U32G。 16U32G。 16U64G。 32U64G。存储规格默认超高IO。节点数量默认2个master节点。表4 Core节点配置参数参数说明计算节点请根据业务需求合理选择计算规格。在计算规格列表中展示了每一种计算规格单个节点的CPU、内存和建议使用场景。说明：支持的计算规格： 4U16G。 8U16G。 8U32G。 16U32G。 16U64G。 32U64G。存储规格选择HBase计算节点的磁盘规格、容量。说明：支持的存储规格：普通IO。高IO。通用型SSD。超高IO。极速型SSD。容量范围为400~30000GB/节点。节点数量选择集群中的节点个数，节点范围2~20。父主题：管理集群

表格存储服务 CLOUDTABLE

表格存储服务 CLOUDTABLE-查看集群的监控信息:查看监控信息

查看监控信息登录表格存储服务管理控制台。单击管理控制台左上角的，选择区域。在左侧导航树，单击集群管理。在集群列表中找到需要查看的集群，在对应的操作列中，单击查看监控信息，系统会跳到该集群的“云服务监控”页面。待查看集群，其状态必须为“服务中”。图1 查看监控信息在集群的“云服务监控”页面中，单击集群ID前的按钮展开计算单元列表，选择对应节点查看监控信息。图2 监控页面 ID：所监控的实例ID，即CloudTable集群ID。查看监控指标：如图监控页面所示的计算单元列表中，找到所需查看的计算单元，单击“查看监控指标”进入该计算单元的监控指标页面。如果您查看监控页面的指标太多，可以对指标进行设置，设置自己需要查看的指标。如果指标太多，可以通过设置监控指标页面对指标进行删除。如果页面显示的指标没有您想看的指标，可以在设置监控指标页面进行添加。选择您在页面中要展示的指标名称，拖动选中指标可以对指标进行排序。图3 设置指标图

表格存储服务 CLOUDTABLE HBase监控集群

表格存储服务 CLOUDTABLE-新建用户:查看权限

查看权限登录表格存储服务管理控制台。单击管理控制台左上角的，选择区域。单击左侧集群管理，显示当前集群列表，选择需要操作的集群，进入用户管理页面。单击操作列“查看权限”，弹出用户权限页面。表2 查看权限参数说明用户名新建的用户名。全局权限查询、插入、更改、创建、删除。各级权限数据库和表：创建的数据库和表。高危权限：创建表、删除表。普通权限：查询、插入、更改。支持查看账户对数据库的操作权限。

表格存储服务 CLOUDTABLE Doris用户管理

表格存储服务 CLOUDTABLE-使用HBase Shell访问集群:一键部署客户端

一键部署客户端准备Linux弹性云服务器。使用一键部署客户端工具，建议Linux弹性云服务器的操作系统类型为EulerOS，CentOS，Ubuntu和SUSE。具体操作请参见准备弹性云服务器。下载客户端一键部署工具。使用SSH登录工具（如PuTTY）通过“弹性IP”远程登录到Linux弹性云服务器，然后执行如下命令，获取客户端一键部署工具： curl -O -k "https://cloudtable-publish.obs.myhuaweicloud.com/cloudtable-client/quick_start_hbase_shell.sh" 此命令适用于HBase 2.x版本。一键部署包内置校验文件。准备集群访问地址。登录表格存储服务管理控制台，在左侧导航树单击集群管理，然后在集群列表中找到所需要的集群，并获取相应的“ZK链接地址（内网）”。该参数值就是集群访问地址，如图1所示。图1 ZK链接地址使用工具部署客户端。请将以下命令中的"$zookeeper_address"参数替换为3获取的ZK链接地址，然后在弹性云服务器命令行窗口，执行该命令一键部署客户端。普通集群一键部署命令。 source quick_start_hbase_shell.sh $zookeeper_address 启动Shell访问集群。在上一步执行source命令自动部署客户端后，就已自动启动了HBase Shell。在后续使用过程中，您也可以执行“bin/hbase shell”命令启动Shell访问集群。

表格存储服务 CLOUDTABLE 使用HBase

表格存储服务 CLOUDTABLE-ClickHouse集群管理列表简介:集群状态

集群状态表3 集群状态说明状态说明创建中表示集群正在创建中。服务中当集群创建成功并正常提供服务时，其集群状态为服务中。亚健康当超过指定时间监控不到集群状态时，集群状态将显示为“亚健康”。“亚健康”状态的集群需要人工干预让集群恢复正常，比如，可以通过重启集群尝试恢复正常状态。创建失败表示集群创建失败。冻结续费时所支付的余额已不足，则其状态为“冻结”。当集群状态为“冻结”时，您需要通过续费保证账户余额不为0才能解冻，详细操作请参见如何续费？。说明：冻结期间集群不可用且关闭集群中所有云主机，解冻后集群自动恢复为“服务中”状态。如果用户没有续费，冻结期限到期后集群会被删除。

表格存储服务 CLOUDTABLE

表格存储服务 CLOUDTABLE-新建用户:查看权限

查看权限登录表格存储服务管理控制台。单击管理控制台左上角的，选择区域。单击左侧集群管理，显示当前集群列表，选择需要操作的集群，进入用户管理页面。单击操作列“查看权限”，弹出用户权限页面。表2 查看权限参数说明用户名新建的用户名。全局权限查询、插入、更改、创建、删除。各级权限数据库和表：创建的数据库和表。高危权限：创建表、删除表。普通权限：查询、插入、更改。支持查看账户对数据库的操作权限。

表格存储服务 CLOUDTABLE ClickHouse用户管理

表格存储服务 CLOUDTABLE-创建用户并授权使用CloudTable:前提条件

前提条件 CloudTable服务暂不支持细粒度策略，仅支持系统角色“cloudtable Administrator”。当前CloudTable默认的系统角色“cloudtable Administrator” 仅适用于未开通企业项目的账号，如已开通，请使用 IAM 自定义策略并直接给用户授权。给用户组授权之前，请您了解用户组可以添加的CloudTable权限，并结合实际需求进行选择，CloudTable支持的系统权限，请参见：CloudTable系统权限。如果您需要对除CloudTable之外的其它服务授权，IAM支持服务的所有权限请参见权限策略。

表格存储服务 CLOUDTABLE 权限管理

表格存储服务 CLOUDTABLE-创建用户并授权使用CloudTable:示例流程

示例流程图1 给用户授权CloudTable权限流程创建用户组并授权使用云登录IAM控制台，创建用户组，并授予表格存储服务的管理员权限“cloudtable Administrator”。创建用户并加入用户组在IAM控制台创建用户，并将其加入步骤1中创建的用户组。用户登录并验证权限。使用新创建的用户登录控制台，切换至授权区域，验证权限：在“服务列表”中选择表格存储服务，进入CloudTable主界面，单击右上角“购买集群”，尝试创建表格存储服务集群，如果可以创建（假设当前权限仅包含cloudtable Administrator），表示“cloudtable Administrator”已生效。在“服务列表”中选择除表格存储服务之外（假设当前策略仅包含cloudtable Administrator）的任一服务，如果提示权限不足，表示“cloudtable Administrator”已生效。

表格存储服务 CLOUDTABLE 权限管理

表格存储服务 CLOUDTABLE-查看ClickHouse集群的基本信息

查看ClickHouse集群的基本信息集群创建完成后，可对集群进行监控和管理。在CloudTable管理控制台单击集群管理，在集群列表中找到所要查看的集群并单击集群名称，进入集群基本信息页面，用户可查看集群信息和集群的网络配置。表1 集群信息参数说明集群名称集群的名称，创建集群时设置。集群ID 集群的ID。集群状态集群状态信息。集群版本集群的内核版本。集群访问地址集群访问的地址，用户可以单击，将访问的链接地址复制到剪切板。集群访问地址端口集群访问的地址端口： Http端口：8123。 TCP端口：9000。 Https端口：8443。安全TCP端口：9440。计费模式显示集群的计费模式。按需计费。包年包月。创建时间显示集群创建的时间。企业项目企业项目管理帮助您将相关的资源（如具有相同使用用途的资源）集中在一起，按企业项目的方式来管理云资源。说明：当企业业务发生变化，原用户不再拥有企业项目的使用权限时，可将这些用户与该企业项目的关联关系删除。可进行单个删除和批量删除。当用户与企业项目的关联关系被删除后，该用户将无法管理该企业项目，如需再次使用，需要重新给该用户关联企业项目。数据库引擎用于存储、处理和保护数据的核心服务。通道状态表示安全通道是否打开。同时开启安全通道和非安全通道如果安全通道开启，此按钮不显示，如果安全通道未开启，显示此按钮。是否开启冷热分离 “否”代表未开启冷热，“是”代表开启冷热分离。存储资源名称存储冷热分离数据资源名称“hot_to_cold”。冷热分存策略如果节点总存储量超过设置的值，则优先迁移早起数据至冷存储。冷热存储已使用容量冷存储数据的存储容量。客户端使用 ClickHouse组件目前有新旧两种客户端。如果客户使用新的客户端，客户端使用显示“新”；如果客户端使用旧客户端，客户端使用显示“旧”。表2 网络配置参数说明区域集群的工作区域，在创建集群时设置。可用区显示创建集群时所选择的可用区信息。虚拟私有云 VPC信息，创建集群时所选。 VPC即虚拟私有云，是通过逻辑方式进行网络隔离，提供安全、隔离的网络环境。子网子网信息，创建集群时所选。通过子网提供与其他网络隔离的、可以独享的网络资源，以提高网络安全。安全组显示创建集群时所选择的安全组信息。表3 计算节点参数说明参数参数说明云存储计算规格请根据业务需求合理选择计算规格。在计算规格列表中展示了每一种计算规格单个节点的CPU、内存和建议使用场景。说明：支持的计算规格： 4U16G。 4U32G。 8U32G。 8U64G。 16U64G。 16U128G。 32U128G。 32U256G。 64U256G。 64U512G。 128U512G。存储规格选Clickhouse计算节点的磁盘规格、容量。支持的存储规格：高IO。通用型SSD。超高IO。极速型SSD。容量范围为500~10000GB/节点之间。节点数量多节点：选择集群中的节点个数，支持的节点范围为2~20之间。单节点个数默认为1。本地SSD（不支持扩容）计算规格 8U32G（本地盘容量：1.6T）。 8U64G（本地盘容量：1.6T）。 16U64G（本地盘容量：3.2T）。 16U128G（本地盘容量：3.2T）。 32U128G（本地盘容量：6.4T）。 64U256G（本地盘容量：6.4T）。存储规格默认支持本地SSD盘。节点数量多节点：选择集群中的节点个数，支持的节点范围为2~20之间。单节点个数默认为1。表4 ZooKeeper节点参数说明参数参数说明计算规格请根据业务需求合理选择计算规格。在计算规格列表中展示了每一种计算规格单个节点的CPU、内存和建议使用场景。说明：支持的计算规格： 4U16G。 8U32G。 16U64G。 32U128G。存储规格选Clickhouse计算节点的磁盘规格、容量。支持的存储规格：通用型SSD。超高IO。极速SSD。容量范围为100~1000之间。节点数量集群中的节点个数，默认为3。父主题：集群管理

表格存储服务 CLOUDTABLE 集群管理

表格存储服务 CLOUDTABLE-使用CDM迁移数据到CloudTable:在CloudTable中查看导入的数据

在CloudTable中查看导入的数据准备Linux弹性云服务器。假设该弹性云服务器名称为“ecs_20170916”，准备的具体操作请参见准备弹性云服务器章节。安装客户端并启动Shell访问CloudTable集群。使用HBase Shell访问集群的具体操作请参见使用HBase Shell访问集群章节。在CloudTable客户端中执行查询命令，查看使用 CDM 迁移到CloudTable的数据。命令示例如下，其中table_name请替换为在CDM集群中新建作业时指定的表名。 scan 'table_name'

表格存储服务 CLOUDTABLE HBase数据批量导入

表格存储服务 CLOUDTABLE-ClickHouse安全通道加密:JDBC连接

JDBC连接 public void run() throws InterruptedException { final ClickHouseProperties clickHouseProperties = new ClickHouseProperties(); // 认证用的密码直接写到代码中有很大的安全风险，建议在配置文件或者环境变量中密文存放，使用时解密，确保安全； // 本示例以密码保存在环境变量中为例，运行本示例前请先在本地环境中设置环境变量CK_PASSWORD String password = System.getenv("CK_PASSWORD"); clickHouseProperties.setSslRootCertificate("/etc/ssl/certificate.crt"); clickHouseProperties.setSsl(true); clickHouseProperties.setSslMode("strict"); clickHouseProperties.setUser("test"); clickHouseProperties.setPassword(password); clickHouseProperties.setSocketTimeout(2 * 3600 * 1000); final BalancedClickhouseDataSource dataSource = new BalancedClickhouseDataSource("xxxx.mycloudtable.com:8443/default?ssl=true", clickHouseProperties); try { final ClickHouseConnection conn = dataSource.getConnection(); conn.createStatement().executeQuery("select now()"); } catch (Throwable e) { e.printStackTrace(); } } clickHouseProperties.setSslRootCertificate("/etc/ssl/certificate.crt");中的/etc/ssl/certificate.crt指存放证书路径。

表格存储服务 CLOUDTABLE ClickHouse集群管理

表格存储服务 CLOUDTABLE-ClickHouse安全通道加密:打开安全和非安全通道步骤

打开安全和非安全通道步骤登录表格存储服务管理控制台。单击管理控制台左上角的，选择区域。单击右上角的购买集群按钮，进入“购买集群”页面。配置好参数，单击“立即购买”。进入“规格详情”页面，确认集群规格订单信息，单击“提交”，成功提交集群创建任务。集群创建成功后，进入详情页面打开“同时开启安全通道和非安全通道”按钮，弹出确认框，确认无误后，单击“确定”。在详情页面开启安全通道后，集群会重启。安全通道和非安全通道同时开启后无法关闭。

表格存储服务 CLOUDTABLE ClickHouse集群管理

表格存储服务 CLOUDTABLE-ClickHouse安全通道加密:HTTPS连接步骤

HTTPS连接步骤安全集群创建后，打开详情页面，下载证书。下载证书后，自定义存放路径。通过https协议执行样例sql。 echo 'select 1' | curl -H 'X-ClickHouse-User: user' -H 'X-ClickHouse-Key: password' --cacert /clickhouse/client/client/bin/certificate.crt 'https://host:port/?' --data-binary @- select 1：执行的sql语句。 user：用户名。 password：创集群时创建的密码。 /clickhouse/client/client/bin/certificate.crt：指证书存放路径。 host、port：host指的是内网地址，port指的是https协议端口。

表格存储服务 CLOUDTABLE ClickHouse集群管理

表格存储服务 CLOUDTABLE-ClickHouse安全通道加密:打开安全通道操作步骤

打开安全通道操作步骤登录表格存储服务管理控制台。单击管理控制台左上角的，选择区域。单击右上角的购买集群按钮，进入“购买集群”页面。完成其他配置后，查看安全通道加密按钮是否开启，默认开启。图1 安全通道关闭https会给企业服务带来风险。创建集群开启https选项，后续无法关闭。创建集群未开启https选项，后续无法开启。配置好参数，单击“立即购买”。进入“规格详情”页面，确认集群规格订单信息，单击“提交”，成功提交集群创建任务，集群创建成功后，进入详情页面查看通道开启状态。

表格存储服务 CLOUDTABLE ClickHouse集群管理

云服务器内容精选

表格存储服务 CLOUDTABLE

7*24

备案

专业服务

退订

建议反馈

售前咨询热线