已找到以下 179 条记录
产品选择
湖仓构建 LakeFormation
没有找到结果,请重新输入
产品选择
湖仓构建 LakeFormation
产品选择
没有找到结果,请重新输入
  • LakeFormation适用哪些场景 - 湖仓构建 LakeFormation

    数据湖建设和持续运营:数据湖建设和持续运营,是指数据湖初始化建设及后续日常海量元数据及权限管理,因此客户需要便捷高效建设和管理方式。 多计算引擎共享元数据:多计算引擎共享元数据,是指客户多种计算引擎(Hive、Spark等)均使用统一元数据,最大化实现数据共享,避免不必要重复数据,更大程度释放业务数据价值。

  • 数据权限 - 湖仓构建 LakeFormation

    函数(FUNC):LakeFormation管理函数。 权限 使用户具备针对某数据资源具体访问/操作权限,如“ALTER”、“DROP”、“ALL”等。每种资源允许被授予权限请参考表1。 授权权限 在用户已具备针对某数据资源某些访问/操作权限前提下,“授权权限”使该用户能够将已具备权限再次授予给其他用户。

  • 元数据发现 - 湖仓构建 LakeFormation

    全量发现:再次执行发现操作时,发现数据存储位置下所有文件。 增量发现:再次执行发现操作时,发现上次任务(运行成功)开始运行后,数据存储位置下新增文件。 执行策略 选择当前迁移任务执行策略。 手动执行:手动触发执行迁移任务。 选择该方式后,需要在任务创建完成后,单击“操作”列“运行”运行当前迁移任务。

  • 数据权限概述 - 湖仓构建 LakeFormation

    DELETE 删除表数据。 列 SELECT 查询表内列数据。 函数 ALL 函数所有操作权限。 ALTER 修改函数。 DROP 删除函数。 DESCRIBE 查看函数元数据信息。 EXEC 执行函数。 路径 READ 路径下文件读权限。 WRITE 路径下文件写权限。 权

  • 规划数据湖 - 湖仓构建 LakeFormation

    MRS对接LakeFormation仅支持对接LakeFormation实例数据目录名称为“hive”Catalog,名称为“default”数据库。 LakeFormation实例创建成功后,用户可按照业务规划创建相关Catalog及内部数据库、表等元数据。 例如参考以下步骤,创建Catal

  • SDK概述 - 湖仓构建 LakeFormation

    本文介绍了LakeFormation服务提供SDK语言版本,列举了最新版本SDK获取地址。 在线生成SDK代码 API Explorer能根据需要动态生成SDK代码功能,降低您使用SDK难度,推荐使用。 您可以在API Explorer中具体API页面的“代码示例”页签查看对应编程语言类型SDK代码,如图1所示。

  • 删除数据库 - 湖仓构建 LakeFormation

    删除指定数据库,catalog默认数据库不允许删除。 cascade: 指定为true时,删除数据库下表;指定为false时,只能删除空数据库。 delete_data: 指定为true时,级联删除会将表数据放入回收站;指定为false时,不删除表数据。 删除数据库后不支持恢复数据库下事务表。

  • 约束与限制 - 湖仓构建 LakeFormation

    据权限中相关权限策略,需要用户手动清理删除。 建库时路径不能为所在Catalog父路径或相同路径,不能为同一Catalog下其他数据库(除default外)路径父路径、子路径或相同路径。 创建数据库存储位置必须在所属Catalog存储位置之下。 用户自定义创建Catal

  • 删除LakeFormation实例 - 湖仓构建 LakeFormation

    在左侧下拉框中选择待操作LakeFormation实例。 单击页面右上角“删除当前实例”。 在弹出的确认窗口中确认删除影响并勾选确认操作,单击“确定”后等待实例删除成功。 删除后,实例会放在回收站,并继续计费直到从回收站删除。 如果需要恢复已删除实例,可在左侧导航栏单击“回

  • 权限迁移 - 湖仓构建 LakeFormation

    待迁移的权限策略文件在OBS并行文件系统中存储位置。 权限策略文件名 待迁移权限策略文件名称。 Catalog ID 填写权限来源Catalog名称。 “权限策略类型”选择“DLF”时配置该参数。 授权主体转换关系 手动指定对应权限策略授权主体转换关系,前、后缀值会为最终授权主体名称添加对应前缀、后缀。

  • 概述 - 湖仓构建 LakeFormation

    以通过控制台、API实现对数据湖元数据进行统一生命周期管理,无需再通过大数据集群SQL引擎来管理。 您可以使用本文档提供API对LakeFormation进行相关操作,如创建删除LakeFormation实例、元数据库、元数据表等。 支持主要操作请参见API概览。 父主题:

  • 批量修改分区信息 - 湖仓构建 LakeFormation

    批量修改分区信息 功能介绍 将输入分区值组合列表所对应分区信息批量修改为新分区信息。 输入每组分区值组合都需要对应一个已存在分区,否则修改操作失败。 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。API Explorer可以自动生成SDK代码示例,并提供SDK代码示例调试功能。

  • 创建LakeFormation实例 - 湖仓构建 LakeFormation

    LakeFormation将统计用户当前元数据对象使用量,按量收费。 10000 企业项目 选择集群所属企业项目。如果当前无可用企业项目,可以单击“新建企业项目”进行创建。 企业项目是一种云资源管理方式,企业项目管理服务提供统一云资源按项目管理,以及项目内资源管理、成员管理。 xxx

  • 简介 - 湖仓构建 LakeFormation

    简介 在进行湖仓构建应用开发时,要准备环境如表1所示。 同时需要准备运行调测环境,用于验证应用程序运行正常。 表1 准备项 准备项 说明 准备LakeFormation实例 在LakeFormation控制台创建实例,或者使用已有LakeFormation实例。 创建客户端

  • LakeFormation权限介绍 - 湖仓构建 LakeFormation

    可以向任何用户、用户组、角色授予或撤销任何元数据访问权限。 数据库创建者:拥有其创建数据库所有数据库权限,拥有其在数据库中创建表权限,并且可以向同一IAM账号中其他用户授予在数据库中创建表权限。数据库创建者对其他人在数据库中创建表不具有隐式权限。 表创建者: 具有其创建所有权限。 可以向同

  • 变更实例规格 - 湖仓构建 LakeFormation

    is_auto_pay 否 Boolean 购买包周期产品时,也就是charge_mode为prePaid时生效,且为必选值,表示是否自动从客户账户中支付,此字段不影响自动续订支付方式。true:为自动支付。false:为手动支付,默认该方式。 响应参数 状态码: 200 表6 响应Header参数

  • 返回结果 - 湖仓构建 LakeFormation

    返回结果 状态码 请求发送以后,您会收到响应,包含状态码、响应消息头和消息体。 状态码是一组从1xx到5xx数字代码,状态码表示了请求响应状态,完整状态码列表请参见状态码。 对于获取用户Token接口,如果调用后返回状态码为“201”,则表示请求成功。 响应消息头 对应请求

  • 新增授权 - 湖仓构建 LakeFormation

    函数”,在右上角“Catalog”和“数据库”后下拉框中分别选择待授权函数所属Catalog、数据库名称,单击待操作函数“操作”列“授权”。 参考表1配置相关信息后,单击“确定”。 在“数据权限 > 数据授权”界面即可查看已授权相关信息。 授权完成后,所选用户组中用户、或拥有所选角色用户或者用户组即可对当前数据库进行相关操作。

  • 配置LakeFormation实例 - 湖仓构建 LakeFormation

    on控制台。 在左侧下拉框中选择待操作LakeFormation实例。 单击页面右上角“规格变更”,进入“规格变更”页面。如果当前实例为共享型,则不支持该操作。 选择需要变更QPS规格,单击“下一步”。 确认当前实例信息,及变更前后实例规格后,单击“提交”。 设置默认实例

  • 什么是配额 - 湖仓构建 LakeFormation

    为防止资源滥用,平台限定了各服务资源配额,对用户资源数量和容量做了限制。如您最多可以创建多少台弹性云服务器、多少块云硬盘。 如果当前资源配额限制无法满足使用需要,您可以申请扩大配额。 怎样查看我配额? 登录管理控制台。 单击管理控制台左上角,选择区域和项目。 在页面右上角,选择“资源 > 我配额”。