检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
数据资源目录管理 数据资源目录是以树型结构管理和展现的包括数据库、大数据、Web服务和文件等资源在内的注册信息。数据资源目录管理包括节点管理、数据库资源管理、大数据管理、接口服务管理、业务分类管理等。 数据管理员登录数据服务共享平台,对资资源目录进行配置管理。
数据目录API 业务资产接口 指标资产接口 统计资产接口 资产管理接口 资产分类接口 资产分级接口 资产信息 血缘信息 元数据采集任务接口 数据地图接口 标签接口
在DataArts Studio控制台首页,选择对应工作空间的“数据开发”模块,进入数据开发页面。 在数据开发主界面的左侧导航栏,选择“配置管理 > 资源管理”。 在资源目录中,单击,弹出“新建目录”页面,配置如表1所示的参数。
在数据目录下浏览数据资源文件,无法下载 问题描述 用户登录连接器,在数据目录下浏览数据资源文件,无法进行下载,如图1。 图1 无法下载的数据资源文件 可能原因 用户收到的数据资源文件存在限制,无法进行下载。
数据目录支持采集哪些对象的资产?
在DataArts Studio控制台首页,选择对应工作空间的“数据目录”模块,进入数据目录页面。 选择“数据地图 > 数据目录”,并根据需要进入“业务资产”、“技术资产”或“指标资产”页签。
数据目录组件有什么用? 数据目录的核心是通过元数据采集任务,采集并展示企业在工作空间范围内的数据资产地图,包括元数据信息和数据血缘关系。 元数据管理 元数据管理模块是数据湖治理的基石,支持创建自定义策略的采集任务,可采集数据源中的技术元数据。
挂载资源目录 左侧导航栏依次选择单击资源管理、资源注册、按库表注册,在跳转页面选择想要挂载的数据,单击页面右侧的库表注册按键,再次跳转至图三后, 填写数据对应的基本信息,以及共享属性后提交审核,并完成挂载 资源注册: 图1 资源注册 库表注册: 图2 库表注册1 图3 库表注册2
数据目录 数据目录概述 新增资源 交换资源 管理收到的数据 查看发出的数据 管理删除的数据 查看收藏的资源文件 管理团队数据 管理我的数据 父主题: 连接器管理员指南
我的资源 介绍用户如何查看自己帐号下的资源及相关操作。 操作步骤 登录华为云首页。 单击页面右上角的“管理控制台”。 系统进入“管理控制台”页面。 选择“资源->我的资源”。 查看已购买资源:您可以勾选“只显示有资源的服务”,并选择区域,查看自己帐号下对应区域已购买的资源。
元数据简介 按照传统的定义,元数据(Metadata)是关于数据的数据。元数据打通了源数据、数据仓库、数据应用,记录了数据从产生到消费的全过程。元数据主要记录数据仓库中模型的定义、各层级间的映射关系、监控数据仓库的数据状态及ETL的任务运行状态。
只适用于多AZ桶产生的标准存储数据容量计费,且只能用于资源包所属区域。 归档存储包 用于抵扣归档存储类别的数据存储容量费用。 只能用于资源包所属区域。归档存储数据均以单AZ模式存储。
图1 DataArts Studio数据安全框架 资源主体:即华为云数据湖中的库表字段及计算引擎队列资源。库表字段支持大数据MRS Hive/Spark,云数据仓库DWS,数据湖探索DLI等数据湖,计算引擎队列包含大数据MRS YARN计算队列和数据湖探索计算队列。
目前支持对以下资源类型的管理: 云服务器ECS,数据库(关系型数据库RDS、数据复制服务DRS、云数据库GaussDB NoSQL、云数据库 GaussDB),网络(虚拟私有云VPC、弹性负载均衡器ELB、弹性公网IP EIP),应用中间件(分布式缓存DCS、分布式消息DMS(Kafka
单击右侧“使用量统计”,查看资源包使用量抵扣实例数据。如图1所示。 图1 资源包使用量抵扣实例数据 左侧环形图展示某个统计周期内资源的使用总量以及各实例使用量占比,右侧展示各实例使用量详细数据。 最多展示8条数据,并按百分比值从大到小依次排序。
实时数据服务 单表服务 通过平台数据资源目录,可以关联单个表资源发布为数据服务,通过界面化配置选择需要发布的表字段、配置查询条件、自动生成SQL(支持对SQL语句进行编辑)几个步骤完成服务发布,并支持服务的自动注册发布。
数据库还原 一体化数据管理平台与开放共享门户三个部署包使用同一个数据库。 在 MySQL 实例上面创建数据库,数据库名称为 edc; 从数据资源目录平台部署包中复制出数据库备份文件,还原到上一步创建的数据库中。
资源释放后,资源和数据将无法找回,请谨慎操作。 存在处理中订单的实例,不支持释放操作。 确认待释放实例的信息,单击“释放”。 父主题: 续费管理
数据资源目录管理 数据使用 数据服务开发 服务控制 调度管理 运行监控 统计分析 父主题: 操作流程
图4 交换体系架构 目录体系架构 目录体系构架主要包含:部门目录、基础目录、主题目录。 部门目录:各部门维护注册各部门的信息资源,并将信息资源数据存到部门前置库、汇总各部门的目录。 基础目录:根据基础库模型,将多个部门数据融合后形成基础目录。
图5 部署架构与资源建议 数据共享交换管理方案架构 应用架构 数据服务共享平台包括资源目录管理、数据使用、数据服务开发、服务控制、调度管理、运行监控、运行维护和数据分析与信息展现,应用架构如下图所示: 图6 应用架构 资源目录管理:是可交换数据元数据的结构化展现,需支持数据库、大数据