已找到以下 161 条记录
AI智能搜索
产品选择
湖仓构建 LakeFormation
没有找到结果,请重新输入
产品选择
湖仓构建 LakeFormation
在搜索结果页开启AI智能搜索
开启
产品选择
没有找到结果,请重新输入
  • 数据湖建设和持续运营 - 湖仓构建 LakeFormation

    户需要便捷高效的建设和管理方式。 传统方式的弊端 仅支持通过计算引擎(Hive、Spark等)执行SQL实现元数据的定义、修改、查询,对用户有一定的技能要求,缺少提升易用性的可视化界面。 一个完整的授权活动,需要针对计算引擎、对象存储执行两次授权操作,对用户操作带来不便,易用性差。

  • 区域可用区 - 湖仓构建 LakeFormation

    互通,既保障了可用区的独立性,又提供了低价、低时延的网络连接。 图1 区域和可用区 目前,华为已在全球多个地域开放云服务,您可以根据需求选择适合自己的区域和可用区。更多信息请参见华为全球站点。 父主题: 基本概念

  • LakeFormation适用哪些场景 - 湖仓构建 LakeFormation

    数据湖建设和持续运营:数据湖建设和持续运营,是指数据湖的初始化建设及后续日常的海量元数据及权限管理,因此客户需要便捷高效的建设和管理方式。 多计算引擎共享元数据:多计算引擎共享元数据,是指客户的多种计算引擎(Hive、Spark等)均使用统一的元数据,最大化实现数据的共享,避免不必要的重复数据,更大程度释放业务数据价值。

  • 计费说明 - 湖仓构建 LakeFormation

    计费说明 计费项 华为湖仓构建服务LakeFormation根据您选择的实例规格和使用时长计费。 详细的计费项及说明请参考表1。 您也可以通过LakeFormation提供的价格计算器,选择您需要的实例规格和使用时长等,来快速计算出购买LakeFormation实例的参考价格。

  • 什么是LakeFormation - 湖仓构建 LakeFormation

    DataArts Studio等多种计算引擎及大数据云服务,使用户可以便捷高效地构建数据湖和运营相关业务,加速释放业务数据价值。 LakeFormation产品通过底层资源实现跨AZ部署及高可靠、弹性伸缩、元数据统一管理、元数据文件目录联动授权、对接多计算引擎等功能,是一个Serverless服务。

  • 湖仓构建 LakeFormation - 湖仓构建 LakeFormation

    03 使用 通过使用LakeFormation可以实现跨AZ部署及高可靠、弹性伸缩、元数据统一管理、元数据文件目录联动授权、对接多计算引擎等功能。 准备操作 注册华为帐号 授权用户使用LakeFormation 创建自定义IAM策略 管理LakeFormation实例 创建LakeFormation实例

  • 什么是LakeFormation - 湖仓构建 LakeFormation

    DataArts Studio等多种计算引擎及大数据云服务,使用户可以便捷高效地构建数据湖和运营相关业务,加速释放业务数据价值。 LakeFormation产品通过底层资源实现跨AZ部署及高可靠、弹性伸缩、元数据统一管理、元数据文件目录联动授权、对接多计算引擎等功能,是一个Serverless服务。

  • 什么是项目 - 湖仓构建 LakeFormation

    什么是项目 的每个区域默认对应一个项目,这个项目由系统预置,用来隔离物理区域间的资源(计算资源、存储资源和网络资源),以区域默认单位为项目进行授权,IAM用户可以访问您账号中该区域的所有资源。 如果您希望进行更加精细的权限控制,可以在区域默认的项目中创建子项目,并在子项目中购买

  • 身份认证访问控制 - 湖仓构建 LakeFormation

    身份认证访问控制 身份认证 Console界面本租户IAM用户访问LakeFormation。 LakeFormation针对界面下发的HTTPS请求中IAM Token进行认证,识别出租户、IAM用户等身份。认证失败则拒绝请求。 Console界面其他租户IAM用户切换到本租

  • 应用开发简介 - 湖仓构建 LakeFormation

    构建服务。 在存算分离架构基础上提供数据湖元数据统一管理的可视化界面及API,兼容Hive元数据模型以及Ranger权限模型,支持对接多种计算引擎及大数据云服务 本文档提供LakeFormation服务应用开发流程、环境准备及程序编写介绍,供需要进行业务应用开发的开发人员使用。 父主题:

  • 资产识别管理 - 湖仓构建 LakeFormation

    资产识别管理 资产识别 资产信息:元数据信息、数据权限策略信息。 账号信息:不涉及,用户在LakeFormation不感知具体账号信息。 API映射表:请参见API参考。 LakeFormation云服务需要访问的租户资源包括:租户的用户组和用户信息的读取,对象存储文件目录的创

  • 约束限制 - 湖仓构建 LakeFormation

    约束限制 建议使用推荐的浏览器登录LakeFormation管理界面: Chrome:94.0及更高版本。 Edge:随Windows操作系统更新。 IAM用户组被删除后,LakeFormation云服务数据权限中的相关权限策略,需要用户手动清理删除。 建库时路径不能为所在Ca

  • 注册华为账号 - 湖仓构建 LakeFormation

    注册华为账号 在使用华为云服务之前您需要申请华为账号。通过此账号,您可以使用所有华为云服务,并且只需为您所使用的服务付费。 如果您已有一个华为账户,请跳到下一个任务。如果您还没有华为账户,请参考以下步骤创建。 操作步骤 打开华为网站。 单击“注册”,根据提示信息完成注册。详情请参考注册华为账号并开通华为云。

  • 基本概念 - 湖仓构建 LakeFormation

    一个AZ是一个或多个物理数据中心的集合,有独立的风火水电,AZ内逻辑上再将计算、网络、存储等资源划分成多个集群。一个Region中的多个AZ间通过高速光纤相连,以满足用户跨AZ构建高可用性系统的需求。 项目 区域默认对应一个项目,这个项目由系统预置,用来隔离物理区域间的资源(计算资源、存储资源和网络资源),以默认项目

  • 元数据发现 - 湖仓构建 LakeFormation

    元数据发现 操作场景 当数据存储在OBS并行文件系统中,而在LakeFormation还未对应的元数据关联时,可以通过元数据发现,来构造这些数据对应的元数据信息,从而支撑SQL引擎或者用户的应用程序的计算分析。 当前元数据发现特性属于公测阶段,公测期产品完全免费,商业化后会根据元数据发现消耗资源收取资源费用。

  • 功能总览 - 湖仓构建 LakeFormation

    模型,支持无缝对接多种计算引擎及大数据云服务,使客户便捷高效地构建湖仓和运营相关业务,加速释放业务数据价值。 LakeFormation产品通过底层资源实现跨AZ部署及高可靠、弹性伸缩、元数据统一管理、缓存加速元数据查询、元数据文件目录联动授权、对接多计算引擎等功能,是一个Serverless服务。

  • 多服务/多集群共享元数据 - 湖仓构建 LakeFormation

    共享,避免不必要的重复数据,更大程度释放业务数据价值。 本服务的优势 兼容Hive元数据模型:提供兼容Hive元数据模型的SDK客户端,使计算引擎对接LakeFormation更轻松和高效。 兼容Ranger权限模型:提供兼容Ranger权限模型的接口,具备良好的生态扩展性。 建议搭配服务

  • 认证鉴权 - 湖仓构建 LakeFormation

    从而通过身份认证。 AK(Access Key ID):访问密钥ID。私有访问密钥关联的唯一标识符;访问密钥ID和私有访问密钥一起使用,对请求进行加密签名。 SK(Secret Access Key):访问密钥ID结合使用的密钥,对请求进行加密签名,可标识发送方,并防止请求被修改。

  • 创建实例 - 湖仓构建 LakeFormation

    资源准备进度百分比,只有当实例处于资源准备中状态时才会计算并返回该值。 resource_expected_duration Integer 资源准备预计时长,单位分钟。 scale_progress Integer 规格变更进度百分比,只有当实例处于规格变更中状态时才会计算并返回该值。 scale_expected_duration

  • 查询实例详情 - 湖仓构建 LakeFormation

    资源准备进度百分比,只有当实例处于资源准备中状态时才会计算并返回该值。 resource_expected_duration Integer 资源准备预计时长,单位分钟。 scale_progress Integer 规格变更进度百分比,只有当实例处于规格变更中状态时才会计算并返回该值。 scale_expected_duration