检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
网络配置 对接ELB访问CloudTable Doris集群 对接ELB访问CloudTable ClickHouse集群
base,以‘,’分隔。db名称是大小写敏感的。 exclude_database_list 否 "" 当only_specified_database=true时,指定不需要同步的多个database,以‘,’分隔。db名称是大小写敏感的。 driver_url可以通过以下三种方式指定:
网络配置 CloudTable集群支持跨VPC/公网访问的使用场景
HBase集群管理列表简介 登录表格存储服务,在左侧导航树,单击集群管理,在集群管理列表中会显示CloudTable所有的集群,集群数量较多时,可采用翻页显示,您可以查看任何状态下的集群。 集群管理列表默认按时间顺序排列,时间最近的集群显示在最前端。集群管理列表参数说明如表1和表2所示。
Doris集群管理列表简介 登录表格存储服务,在左侧导航树,单击集群管理,集群管理列表中会显示CloudTable所有的集群,集群数量较多时,可采用翻页显示,您可以查看任何状态下的集群。 图1 集群列表 集群管理列表按照集群状态顺序排列,服务中的集群显示在最前端。 表1 集群管理列表参数 参数
原因分析 出现该问题的可能原因为: 网络访问不通。 由于CloudTable的链接地址是内网地址,不是公网地址,不能在公网环境直接连接CloudTable。您可以在客户端主机上ping一下CloudTable的ZK链接地址,如果无法ping通,说明网络不通。 处理方法 您需要申请一台
道,通过DC可以构建大规模混合云组网。更多信息请参见什么是云专线章节。 虚拟专用网络(VPN):VPN用于在线下数据中心和云上VPC之间建立一条安全加密的公网通信隧道。更多信息请参见什么是虚拟专用网络章节。 CloudTable集群访问对端集群,需要为集群添加路由。 说明: 路由添加请联系技术人员。
已创建CloudTable Doris集群。 步骤一:创建ELB 创建独享型ELB。 网络型(TCP/UDP)。 开启IP类型后端。 连接后端集群必须开启IP类型后端。 步骤二:打通网络(可选) 前提:如果ELB和Doris集群不在同一个VPC,则需要创建对等连接。 创建对等连接,请参见“对等连接”章节。
查询CloudTable集群列表 功能介绍 查看用户创建的集群列表信息。 调试 您可以在API Explorer中调试该接口。 URI GET /v2/{project_id}/clusters 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String
已创建CloudTable ClickHouse集群。 步骤一:创建ELB 创建独享型ELB。 网络型(TCP/UDP)。 开启IP类型后端。 连接后端集群必须开启IP类型后端。 步骤二:打通网络(可选) 前提:如果ELB和ClickHouse集群不在同一个VPC,则需要创建对等连接。
子网信息,创建集群时所选。 通过子网提供与其他网络隔离的、可以独享的网络资源,以提高网络安全。 安全组 显示创建集群时所选择的安全组信息。 表3 FE节点配置 参数 参数说明 计算规格 请根据业务需求合理选择计算规格。在计算规格列表中展示了每一种计算规格单个节点的CPU、内存和建议使用场景。 说明:
子网信息,创建集群时所选。 通过子网提供与其他网络隔离的、可以独享的网络资源,以提高网络安全。 安全组 显示创建集群时所选择的安全组信息。 表3 Master节点配置 参数 参数说明 计算规格 请根据业务需求合理选择计算规格。在计算规格列表中展示了每一种计算规格单个节点的CPU、内存和建议使用场景。
能直接通过ssh访问CloudTable的计算节点吗? 不能。CloudTable的底层计算单元运行在一个VPC网络中,VPC即虚拟私有云,是通过逻辑方式进行网络隔离,提供安全、隔离的网络环境,为您的数据提供了一层保护。您只能使用客户端工具或者应用程序连接到CloudTable的ZK链接地
ClickHouse集群管理列表简介 登录表格存储服务,在左侧导航树单击集群管理,集群列表中会显示所有的集群,集群数量比较多时,可以采用翻页显示,您可以查看任何状态下的集群。 表1 集群管理列表参数 参数 参数说明 集群名称 集群的名称,创建集群时设置。 高可用 创建ClickH
子网信息,创建集群时所选。 通过子网提供与其他网络隔离的、可以独享的网络资源,以提高网络安全。 安全组 显示创建集群时所选择的安全组信息。 表3 计算节点参数说明 参数 参数说明 云存储 计算规格 请根据业务需求合理选择计算规格。在计算规格列表中展示了每一种计算规格单个节点的CPU、内存和建议使用场景。
network_throughput_inbound_rate 网络吞吐流入速率 每个节点每秒的网络流入数据量。 Byte/s 60 network_throughput_outgoing_rate 网络吞吐流出速率 每个节点每秒的网络流出数据量。 Byte/s 60 clickhouse_process_survival
【规则】通过limit限制查询返回的数据量,节省计算资源、减少网络开销。 如果返回的数据量过大,客户端有可能出现内存溢出等服务异常。在前端使用ClickHouse的场景下,如果要查询的数据量比较大,建议每次可适当的进行分页查询返回数据,以减少查询数据量对网络带宽和计算资源的占用。 【规则】关联查询必须大表join小表。
序代码完成开发后,您可以上传Jar包至准备好的Linux运行环境中运行。该环境需要和clickhouse集群处于同一vpc和安全组,以保证网络连通。 前提条件 Linux环境已安装JDK,版本号需要和IntelliJ IDEA导出Jar包使用的JDK版本一致,并设置好Java环境变量。
MRS集群未开启Kerberos认证。 为了确保网络连通,MRS集群必须与CloudTable集群的安全组、区域、VPC、子网保持一致。 MRS与CloudTable安全组入方向添加DLI队列弹性资源网段,建立跨源连接,请参见创建增强型跨源连接。 必须打通DLI上下游的网络连通性,请参考测试地址连通性。
MRS集群未开启Kerberos认证。 为了确保网络连通,MRS集群必须与CloudTable集群的安全组、区域、VPC、子网保持一致。 MRS与CloudTable安全组入方向添加DLI队列弹性资源网段,建立跨源连接,请参见创建增强型跨源连接。 必须打通DLI上下游的网络连通性,请参考测试地址连通性。