-
更新管理 - 湖仓构建 LakeFormation
更新管理 LakeFormation实例定期自动更新SSL证书,确保提供持续稳定的HTTPS服务。 父主题: 安全
-
创建元数据存储路径 - 湖仓构建 LakeFormation
参考该步骤,依次创建用于存放元数据的路径,例如: Catalog存储路径:lakeformation-test/catalog1 数据库存储路径:lakeformation-test/catalog1/database1 数据表存储路径:lakeformation-test/
-
简介 - 湖仓构建 LakeFormation
Formation实例。 创建客户端 在LakeFormation控制台接入管理界面创建客户端。 修改DNS信息 在云解析服务中,修改linux环境所在子网的内网域名信息。 父主题: 环境准备
-
约束与限制 - 湖仓构建 LakeFormation
IAM用户组被删除后,LakeFormation云服务数据权限中的相关权限策略,需要用户手动清理删除。 建库时路径不能为所在Catalog父路径或相同路径,不能为同一Catalog下其他数据库(除default外)路径的父路径、子路径或相同路径。 创建数据库的存储位置必须在所属Catalog的存储位置之下。 用户自定
-
批量删除分区信息 - 湖仓构建 LakeFormation
批量删除分区信息 功能介绍 非事务表:如果设置删除数据,立刻删除分区数据路径下的数据。 事务表:如果设置删除数据,保留数据在原路径下但对外不可见,待数据超期后统一删除。 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。API Explorer可以自动生成SD
-
列举库下所有表名 - 湖仓构建 LakeFormation
列举库下所有表名 功能介绍 查询数据库下的所有表名称列表。 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。API Explorer可以自动生成SDK代码示例,并提供SDK代码示例调试功能。 URI GET /v1/{project_id}/instance
-
列举Catalog下所有的函数 - 湖仓构建 LakeFormation
列举Catalog下所有的函数 功能介绍 获取Catalog下所有的函数。 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。API Explorer可以自动生成SDK代码示例,并提供SDK代码示例调试功能。 URI GET /v1/{project_id}/
-
列举库下所有函数名称 - 湖仓构建 LakeFormation
列举库下所有函数名称 功能介绍 查询数据库下的所有函数名称列表。 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。API Explorer可以自动生成SDK代码示例,并提供SDK代码示例调试功能。 URI GET /v1/{project_id}/insta
-
查询角色下的用户/用户组 - 湖仓构建 LakeFormation
查询角色下的用户/用户组 功能介绍 查询角色下的用户/用户组。 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。API Explorer可以自动生成SDK代码示例,并提供SDK代码示例调试功能。 URI GET /v1/{project_id}/instan
-
管理数据库 - 湖仓构建 LakeFormation
“数据表存储位置”为可选参数。 “数据表存储位置”可选择为所属Catalog路径及其子路径、或“数据库存储位置”路径及其子路径。 如果配置了该参数,则该数据库下的数据表位置必须是该数据库“数据表存储位置”的子路径、或数据库“选择位置”的子路径。 (可选)单击“函数存储位置”区域中的“添加函数存储位置
-
管理Catalog - 湖仓构建 LakeFormation
需删除请单击“”。 “数据库存储位置”为可选参数。如果配置了该参数,则该Catalog下的数据库位置必须选择为该Catalog“数据库存储位置”的子路径、或该Catalog“选择位置”的子路径。 单击“提交”。 创建完成后,即可在“Catalog”页面查看Catalog相关信息。
-
管理函数 - 湖仓构建 LakeFormation
“函数位置”为可选参数。 如果函数所属数据库配置了“函数存储位置”参数,则此处存储位置必须选择为所属数据库“选择位置”的路径及其子路径、或“函数存储位置”的路径及其子路径。 单击“提交”。 创建完成后,即可在“函数”页面查看函数名称/ID、所属Catalog、所属数据库、类型、函数类名等信息。
-
管理数据表 - 湖仓构建 LakeFormation
“前往OBS创建”进行创建。 必须与所属的Catalog、数据库的存储路径不同。 如果所属数据库配置了“数据表存储位置”参数,则此处存储位置必须选择为所属数据库“选择位置”的子路径、或“数据表存储位置”的子路径。 是否压缩 数据表是否压缩。 压缩表能够使表中的数据以压缩格式存储,表压缩能提升性能,减少存储空间。
-
错误码 - 湖仓构建 LakeFormation
00000069 路径不能重复。 请检查输入位置路径。 400 00000070 路径应为Catalog存储位置或者数据库存储位置列表的子路径。 请检查输入位置路径。 400 00000071 路径应为数据库存储位置或者数据表存储位置列表的子路径。 请检查输入位置路径。 400 00000072
-
删除数据库 - 湖仓构建 LakeFormation
Query参数 参数 是否必选 参数类型 描述 delete_data 否 Boolean 是否删除数据库路径下的数据。默认为false。 cascade 否 Boolean 是否级联删除数据库下的表、分区以及函数。默认为false。 请求参数 表3 请求Header参数 参数 是否必选 参数类型
-
数据权限概述 - 湖仓构建 LakeFormation
查看Catalog下资源列表。 数据库 ALL 数据库的所有操作权限。 ALTER 修改数据库。 DROP 删除数据库。 DESCRIBE 查看数据库的元数据信息或切换数据库。 LIST_TABLE 查看数据库下资源列表。 LIST_FUNC 查看某一数据库下的函数。 CREATE_TABLE
-
创建Catalog - 湖仓构建 LakeFormation
描述信息。最大长度为4000个字符。 location 否 String 路径地址。例如obs://location/uri/。 database_location_list 否 Array of strings 数据库路径列表。最小条目数为0,最大条目数为1000。 branch_name
-
元数据发现 - 湖仓构建 LakeFormation
符”、“是否把第一行当做列名”等参数) Avro 说明: 如果数据存储位置下的文件后缀为同一类型,建议选择对应发现类型。 如果数据存储位置下的文件后缀为多种类型,建议选择“自动发现”。 如果数据存储位置下的文件不带后缀,建议选择对应类型。如果选择“自动发现”,则系统默认以Parq
-
删除Catalog对象 - 湖仓构建 LakeFormation
删除Catalog对象 功能介绍 删除空的catalog对象。 删除前需要保证catalog下只有默认的数据库,且默认数据库下没有表对象,否则删除失败。 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。API Explorer可以自动生成SDK代码示例,并提供SDK代码示例调试功能。
-
元数据迁移 - 湖仓构建 LakeFormation
所在网段冲突。此时可以选择EIP方式进行迁移。 无日志内容 请确认日志路径是否存在。 日志路径已存在,请联系LakeFormation运维人员协助处理。 日志路径不存在,请修改任务配置中的日志路径,确保日志路径在OBS中存在。 父主题: 管理数据迁移