表管理-华为云

键值存储服务 KVS-创建表:约束与限制

约束与限制单个存储仓下可以创建的表数量不超过100个。一个表一定归属于某个存储仓。一个主表仅支持创建1个分区键和1个排序键。表的名称长度范围为3-52个字符，由数字0-9、字符a-z、A-Z，及特殊符“-”、“_”组成，且表的名称在存储仓内唯一。为表命名时字母大小写敏感。例如，某存储仓内已存在表exampletable，如果您再创建表ExampleTable，系统会认定为不同的表名，可以成功创建表。

键值存储服务 KVS 表管理

MAPREDUCE服务 MRS-Hudi数据表Compaction规范:规则

规则有数据持续写入的表，24小时内至少执行一次compaction。对于MOR表，不管是流式写入还是批量写入，需要保证每天至少完成1次Compaction操作。如果长时间不做compaction，Hudi表的log将会越来越大，这必将会出现以下问题： Hudi表读取很慢，且需要很大的资源。这是由于读MOR表涉及到log合并，大log合并需要消耗大量的资源并且速度很慢。长时间进行一次Compaction需要耗费很多资源才能完成，且容易出现OOM。阻塞Clean，如果没有Compaction操作来产生新版本的Parquet文件，那旧版本的文件就不能被Clean清理，增加存储压力。 CPU与内存比例为1:4~1:8。 Compaction作业是将存量的parquet文件内的数据与新增的log中的数据进行合并，需要消耗较高的内存资源，按照之前的表设计规范以及实际流量的波动结合考虑，建议Compaction作业CPU与内存的比例按照1:4~1:8配置，保证Compaction作业稳定运行。当Compaction出现OOM问题，可以通过调大内存占比解决。

MAPREDUCE服务 MRS Hudi数据表管理操作规范

ISDP-报表根据规则id查询列（API名称：findNestedDefaultColumnListByRuleIdForOpenApi）:响应示例

响应示例 { "status": "success", "msg": null, "data": [ { "id": 4869894, "ruleId": 242831, "fieldName": "address", "fieldType": "STRING", "mappingField": "STRING", "fieldAlias": "地址", "refEntity": null, "searchableFlag": 0, "seqNo": 0, "fieldId": 663, "parentId": null, "children": null }, { "id": 4869895, "ruleId": 242831, "fieldName": "addressCode", "fieldType": "STRING", "mappingField": "STRING", "fieldAlias": "地址编码", "refEntity": null, "searchableFlag": 0, "seqNo": 1, "fieldId": 665, "parentId": null, "children": null }, { "id": 4869901, "ruleId": 242831, "fieldName": "coordinateType", "fieldType": "STRING", "mappingField": "STRING", "fieldAlias": "坐标类型", "refEntity": null, "searchableFlag": 0, "seqNo": 7, "fieldId": 20220412111253, "parentId": null, "children": null }, ], "success": true, "failed": false}

ISDP 报表管理

ISDP-报表根据规则id查询列（API名称：findNestedDefaultColumnListByRuleIdForOpenApi）:响应参数

响应参数参数类型描述 status String 响应状态 success or failed msg String 响应描述 data Object 响应结果json对象数组 success Boolean true or false failed Boolean true or false data出参: 参数类型描述 Id Long Id ruleId Long 规则id fieldname String 列名 FieldType String 列数据类型 MappingField String 映射 FieldAlias String 列别名 RefEntity String 参考实体 searchableFlag String 搜索标记 0或1 seqNo Integer 序列号 FiledId Integer 域Id ParentId Integer 父Id Children String 子域

ISDP 报表管理

键值存储服务 KVS-表简介

表简介表是用来存储键值数据（Key-Value，简称KV）的集合，归属于某个仓。用户可以在一个仓中创建至少1个或多个表，用来储存键值数据。例如，用某个仓记录公司内所有员工的信息，那么可以用这个仓中的每一个表记录每一个部门内所有员工的信息。图1 表简介 KVS云服务支持创建表，查询所有表及详细信息。表1 KVS云服务支持的表相关功能功能描述创建表在指定存储仓创建表，同时指定索引。查询表在指定存储仓查询所有表。查询表详细信息在指定存储仓查看某个表的详情父主题：表管理

键值存储服务 KVS 表管理

数据湖探索 DLI-Hudi数据表Archive规范:规则

规则 Hudi表必须执行Archive。对于Hudi的MOR类型和COW类型的表，都需要开启Archive。 Hudi表在写入数据时会自动判断是否需要执行Archive，因为Archive的开关默认打开(hoodie.archive.automatic默认为true)。 Archive操作并不是每次写数据时都会触发，至少需要满足以下两个条件： Hudi表满足hoodie.keep.max.commits设置的阈值。如果是Flink写hudi至少提交的checkpoint要超过这个阈值；如果是Spark写hudi，写Hudi的次数要超过这个阈值。 Hudi表做过Clean，如果没有做过Clean就不会执行Archive。

数据湖探索 DLI Hudi数据表管理操作规范

测试计划 CodeArts TestPlan-页面报表展示:URI

URI GET /testreport/v4/{project_id}/versions/{version_id}/custom-reports 表1 路径参数参数是否必选参数类型描述 project_id 是 String 参数解释: 项目id，对应"需求管理 CodeArts Req"项目唯一标识，测试计划管理页面地址栏url https://{host}/cloudtestportal/project/{project_id}/testplan中project_id变量的值约束限制: 不涉及取值范围: 项目uuid应符合如下规则：长度等于32位，包含大小写字母、数字默认取值: 不涉及 version_id 是 String 版本id 表2 Query参数参数是否必选参数类型描述 page_size 是 Long 每页显示的条目数量,最大支持200条 offset 是 Long 页数，page_no大于等于1 type 是 Integer 报表类型 1：首页用例库， 2：质量报告

测试计划 CodeArts TestPlan 测试报表管理

测试计划 CodeArts TestPlan-页面报表展示:响应参数

响应参数状态码： 200 表4 响应Body参数参数参数类型描述 status String success|error result ResultValueListCustomReportListVo object 请求的返回的数据对象表5 ResultValueListCustomReportListVo 参数参数类型描述 total Integer 起始记录数大于实际总条数时，值为0，分页请求才有此值 value Array of CustomReportListVo objects 实际的数据类型：单个对象，集合或 NULL reason String 业务失败的提示内容 page_size Integer 每页展示条数 page_no Integer 页码 has_more Boolean 是否有更多表6 CustomReportListVo 参数参数类型描述 id String 报表id name String 报表名称 filter ReportFilter object 过滤条件 workpiece_type String 工件类型(用例：case,测试套：task) analysis_dimension String 分析维度 compare_dimension String 对比维度 chart_data Array of ReportChartDataVo objects 报表数据表7 ReportFilter 参数参数类型描述 creatorIds String 创建人 ownerIds String 所属人 ranks String 级别 releaseIds String releaseId status String 状态 moduleIds String 级别 results String 结果 labelIds String 标签 startTime String 开始时间 endTime String 结束时间 isAssociateIssue String 是否关联需求表8 ReportChartDataVo 参数参数类型描述 id String 报表id name String 报表名称 analyze_dim ReportDimVo object 对比维度数据 compare_dim Array of ReportDimVo objects 对比维度数据表9 ReportDimVo 参数参数类型描述 id String id name String 名称 value Integer 值状态码： 400 表10 响应Body参数参数参数类型描述 code String 业务失败的错误码 reason String 业务失败的提示内容状态码： 401 表11 响应Body参数参数参数类型描述 code String 业务失败的错误码 reason String 业务失败的提示内容状态码： 404 表12 响应Body参数参数参数类型描述 code String 业务失败的错误码 reason String 业务失败的提示内容状态码： 500 表13 响应Body参数参数参数类型描述 code String 业务失败的错误码 reason String 业务失败的提示内容

测试计划 CodeArts TestPlan 测试报表管理

湖仓构建 LakeFormation-分页获取表的描述信息:URI

URI GET /v1/{project_id}/instances/{instance_id}/catalogs/{catalog_name}/databases/tables 表1 路径参数参数是否必选参数类型描述 project_id 是 String 项目编号。获取方法，请参见获取项目ID。 instance_id 是 String LakeFormation实例ID。创建实例时自动生成。例如：2180518f-42b8-4947-b20b-adfc53981a25。 catalog_name 是 String catalog名称。只能包含字母、数字和下划线，且长度为1~256个字符。表2 Query参数参数是否必选参数类型描述 database_name_pattern 否 String 数据库名称通配符。只能包含中文、字母、数字和_|*.-特殊字符，且长度为1~128个字符。 table_name_pattern 否 String 表名称通配符。只能包含中文、字母、数字和_|*.-特殊字符，且最大长度为1~256个字符。 table_types 否 Array 查询的表类型：MANAGED_TABLE-内表、EXTERNAL_TABLE-外表、VIRTUAL_VIEW-视图、MATERIALIZED_VIEW-物化视图、DICTIONARY_TABLE字典表。枚举值： MANAGED_TABLE EXTERNAL_TABLE VIRTUAL_VIEW MATERIALIZED_VIEW DICTIONARY_TABLE limit 否 Integer 查询返回条数。默认值为1000。最小值为1，最大值为2000。 marker 否 String 查询的起始记录ID。最小长度为0，最大长度为256。 reverse_page 否 Boolean 是否倒序查询。 external_table_id 否 String 用户端表id，创建时指定，不可修改。

湖仓构建 LakeFormation 数据表管理

湖仓构建 LakeFormation-分页获取表的描述信息:响应示例

响应示例状态码： 200 OK { "table_metas" : [ { "catalog_name" : "hive", "database_name" : "default", "table_name" : "tbla", "table_type" : "MANAGED_TABLE", "comments" : "" }, { "catalog_name" : "hive", "database_name" : "default", "table_name" : "tblb", "table_type" : "MANAGED_TABLE", "comments" : "" } ], "page_info" : { "current_count" : 2, "next_marker" : null, "previous_marker" : null }} 状态码： 400 Bad Request { "error_code" : "common.01000001", "error_msg" : "failed to read http request, please check your input, code: 400, reason: Type mismatch., cause: TypeMismatchException"} 状态码： 401 Unauthorized { "error_code": 'APIG.1002', "error_msg": 'Incorrect token or token resolution failed'} 状态码： 403 Forbidden { "error" : { "code" : "403", "message" : "X-Auth-Token is invalid in the request", "error_code" : null, "error_msg" : null, "title" : "Forbidden" }, "error_code" : "403", "error_msg" : "X-Auth-Token is invalid in the request", "title" : "Forbidden"} 状态码： 404 Not Found { "error_code" : "common.01000001", "error_msg" : "response status exception, code: 404"} 状态码： 408 Request Timeout { "error_code" : "common.00000408", "error_msg" : "timeout exception occurred"} 状态码： 500 Internal Server Error { "error_code" : "common.00000500", "error_msg" : "internal error"}

湖仓构建 LakeFormation 数据表管理

湖仓构建 LakeFormation-分页获取表的描述信息:响应参数

响应参数状态码： 200 表4 响应Body参数参数参数类型描述 table_metas Array of TableMeta objects 表元数据列表。 page_info PagedInfo object 分页返回信息。表5 TableMeta 参数参数类型描述 catalog_name String catalog名称。 database_name String 数据库名称。 table_name String 表名称。 external_table_id String 用户端表id，创建时指定，不可修改。 table_type String 表类型：MANAGED_TABLE-内表、EXTERNAL_TABLE-外表、VIRTUAL_VIEW-视图、MATERIALIZED_VIEW-物化视图、DICTIONARY_TABLE字典表。枚举值： MANAGED_TABLE EXTERNAL_TABLE VIRTUAL_VIEW MATERIALIZED_VIEW DICTIONARY_TABLE comments String 表描述信息。 columns Array of Column objects 分区列以外的所有字段。 partition_keys Array of Column objects 分区列的信息。表6 Column 参数参数类型描述 column_type String 列类型，包括array bigint binary boolean char date decimal double float int interval map set smallint string struct timestamp tinyint union varchar column_name String 列名称。只能包含中文、字母、数字和_-+*(), 特殊字符，且长度为1~767个字符。 comment String 列描述信息。最大长度为4000个字符。表7 PagedInfo 参数参数类型描述 current_count Integer 本次返回的对象个数。最小值为0，最大值为2000。 next_marker String 下一页查询地址。当不存在下一页，则值为null，当值为null时，响应Body无该参数。 previous_marker String 上一页查询地址。当不存在上一页，则值为null，当值为null时，响应Body无该参数。状态码： 400 表8 响应Body参数参数参数类型描述 error_code String 错误码。 error_msg String 错误描述。 solution_msg String 解决方案描述。状态码： 404 表9 响应Body参数参数参数类型描述 error_code String 错误码。 error_msg String 错误描述。 solution_msg String 解决方案描述。状态码： 500 表10 响应Body参数参数参数类型描述 error_code String 错误码。 error_msg String 错误描述。 solution_msg String 解决方案描述。

湖仓构建 LakeFormation 数据表管理

云服务器内容精选

表管理

7*24

备案

专业服务

退订

建议反馈

售前咨询热线