已找到以下 179 条记录
AI智能搜索
产品选择
湖仓构建 LakeFormation
没有找到结果,请重新输入
产品选择
湖仓构建 LakeFormation
在搜索结果页开启AI智能搜索
开启
产品选择
没有找到结果,请重新输入
  • 数据湖建设和持续运营 - 湖仓构建 LakeFormation

    数据湖建设和持续运营,是指数据湖初始化建设及后续日常海量元数据及权限管理,因此用户需要便捷高效建设和管理方式。 传统方式弊端 仅支持通过计算引擎(Hive、Spark等)执行SQL实现元数据定义、修改、查询,对用户有一定技能要求,缺少提升易用性可视化界面。 一个完整授权活动,需要针

  • 管理数据库 - 湖仓构建 LakeFormation

    行创建。 必须所属Catalog存储路径(即创建Catalog时配置“选择位置”参数)不同。 如果所属Catalog配置了“数据库存储位置”参数,则此处该参数必须选择为所属Catalog“选择位置”子路径、或“数据库存储位置”子路径。 描述 所创建数据库描述信息。 长

  • 查看审计日志 - 湖仓构建 LakeFormation

    查看审计日志 云审计服务是安全解决方案中专业日志审计服务,记录了LakeFormation相关操作事件,方便您日后查询、审计和回溯。 支持审计日志操作 表1 云审计服务支持LakeFormation服务操作 操作名称 资源类型 事件名称 创建Catalog Catalog

  • LakeFormation适用哪些场景 - 湖仓构建 LakeFormation

    数据湖建设和持续运营:数据湖建设和持续运营,是指数据湖初始化建设及后续日常海量元数据及权限管理,因此客户需要便捷高效建设和管理方式。 多计算引擎共享元数据:多计算引擎共享元数据,是指客户多种计算引擎(Hive、Spark等)均使用统一元数据,最大化实现数据共享,避免不必要重复数据,更大程度释放业务数据价值。

  • 数据权限 - 湖仓构建 LakeFormation

    函数(FUNC):LakeFormation管理函数。 权限 使用户具备针对某数据资源具体访问/操作权限,如“ALTER”、“DROP”、“ALL”等。每种资源允许被授予权限请参考表1。 授权权限 在用户已具备针对某数据资源某些访问/操作权限前提下,“授权权限”使该用户能够将已具备权限再次授予给其他用户。

  • 多服务/多集群共享元数据 - 湖仓构建 LakeFormation

    多服务/多集群共享元数据 场景描述 多服务/多集群均使用统一元数据,最大化实现数据共享,避免不必要重复数据,更大程度释放业务数据价值。 本服务优势 兼容Hive元数据模型:提供兼容Hive元数据模型SDK客户端,使计算引擎对接LakeFormation更轻松和高效。 兼

  • 终端节点 - 湖仓构建 LakeFormation

    终端节点 终端节点(Endpoint)即调用API请求地址,不同服务不同区域终端节点不同。 您可以从地区和终端节点中查询服务终端节点。 请您根据业务需要选择对应区域终端节点。 父主题: 使用前必读

  • 规划数据湖 - 湖仓构建 LakeFormation

    MRS对接LakeFormation仅支持对接LakeFormation实例数据目录名称为“hive”Catalog,名称为“default”数据库。 LakeFormation实例创建成功后,用户可按照业务规划创建相关Catalog及内部数据库、表等元数据。 例如参考以下步骤,创建Catal

  • SDK概述 - 湖仓构建 LakeFormation

    本文介绍了LakeFormation服务提供SDK语言版本,列举了最新版本SDK获取地址。 在线生成SDK代码 API Explorer能根据需要动态生成SDK代码功能,降低您使用SDK难度,推荐使用。 您可以在API Explorer中具体API页面的“代码示例”页签查看对应编程语言类型SDK代码,如图1所示。

  • 删除数据库 - 湖仓构建 LakeFormation

    删除指定数据库,catalog默认数据库不允许删除。 cascade: 指定为true时,删除数据库下表;指定为false时,只能删除空数据库。 delete_data: 指定为true时,级联删除会将表数据放入回收站;指定为false时,不删除表数据。 删除数据库后不支持恢复数据库下事务表。

  • 删除LakeFormation实例 - 湖仓构建 LakeFormation

    在左侧下拉框中选择待操作LakeFormation实例。 单击页面右上角“删除当前实例”。 在弹出的确认窗口中确认删除影响并勾选确认操作,单击“确定”后等待实例删除成功。 删除后,实例会放在回收站,并继续计费直到从回收站删除。 如果需要恢复已删除实例,可在左侧导航栏单击“回

  • 权限迁移 - 湖仓构建 LakeFormation

    待迁移的权限策略文件在OBS并行文件系统中存储位置。 权限策略文件名 待迁移权限策略文件名称。 Catalog ID 填写权限来源Catalog名称。 “权限策略类型”选择“DLF”时配置该参数。 授权主体转换关系 手动指定对应权限策略授权主体转换关系,前、后缀值会为最终授权主体名称添加对应前缀、后缀。

  • 数据保护技术 - 湖仓构建 LakeFormation

    传输加密(HTTPS) 为保证数据传输安全性,LakeFormationAPI接口为HTTPS协议。 Console或其他云服务需要采用HTTPS协议访问LakeFormation。 数据备份 LakeFormation支持基于其数据备份能力实现LakeFormation实例数据备份。 父主题:

  • 批量修改分区信息 - 湖仓构建 LakeFormation

    批量修改分区信息 功能介绍 将输入分区值组合列表所对应分区信息批量修改为新分区信息。 输入每组分区值组合都需要对应一个已存在分区,否则修改操作失败。 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。API Explorer可以自动生成SDK代码示例,并提供SDK代码示例调试功能。

  • 创建LakeFormation实例 - 湖仓构建 LakeFormation

    LakeFormation将统计用户当前元数据对象使用量,按量收费。 10000 企业项目 选择集群所属企业项目。如果当前无可用企业项目,可以单击“新建企业项目”进行创建。 企业项目是一种云资源管理方式,企业项目管理服务提供统一云资源按项目管理,以及项目内资源管理、成员管理。 xxx

  • 新增授权 - 湖仓构建 LakeFormation

    函数”,在右上角“Catalog”和“数据库”后下拉框中分别选择待授权函数所属Catalog、数据库名称,单击待操作函数“操作”列“授权”。 参考表1配置相关信息后,单击“确定”。 在“数据权限 > 数据授权”界面即可查看已授权相关信息。 授权完成后,所选用户组中用户、或拥有所选角色用户或者用户组即可对当前数据库进行相关操作。

  • LakeFormation权限介绍 - 湖仓构建 LakeFormation

    可以向任何用户、用户组、角色授予或撤销任何元数据访问权限。 数据库创建者:拥有其创建数据库所有数据库权限,拥有其在数据库中创建表权限,并且可以向同一IAM账号中其他用户授予在数据库中创建表权限。数据库创建者对其他人在数据库中创建表不具有隐式权限。 表创建者: 具有其创建所有权限。 可以向同

  • 概述 - 湖仓构建 LakeFormation

    以通过控制台、API实现对数据湖元数据进行统一生命周期管理,无需再通过大数据集群SQL引擎来管理。 您可以使用本文档提供API对LakeFormation进行相关操作,如创建删除LakeFormation实例、元数据库、元数据表等。 支持主要操作请参见API概览。 父主题:

  • 简介 - 湖仓构建 LakeFormation

    简介 在进行湖仓构建应用开发时,要准备环境如表1所示。 同时需要准备运行调测环境,用于验证应用程序运行正常。 表1 准备项 准备项 说明 准备LakeFormation实例 在LakeFormation控制台创建实例,或者使用已有LakeFormation实例。 创建客户端

  • 如何获取AK/SK - 湖仓构建 LakeFormation

    Access Key)即访问密钥,包含访问密钥ID(AK)和秘密访问密钥(SK)两部分,系统通过AK识别用户身份,通过SK对请求数据进行签名验证,用于确保请求机密性、完整性和请求者身份正确性。 登录华为云管理控制台。 将鼠标移动到右上角用户名,在下拉列表中单击“我的凭证”。 在“我的凭证”页面中选择“访问密钥”。