检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
表2 参数说明 参数 说明 桶名称 用户在OBS服务中创建桶的名称。如没有OBS桶,可在OBS中创建桶。 连接地址 OBS远程Endpoint地址,可通过查看桶信息来获取地址。 Access Key 访问密钥的一部分,访问密钥ID。华为云通过AK识别访问用户的身份。如没有AK/SK,可通过新增访问密钥来创建新的密钥。
下载数据到FTP服务器上的存放路径。 表4 OBS类型存储的参数说明 参数 说明 桶名称 用户在OBS服务中创建桶的名称。如没有OBS桶,可在OBS中创建桶。 连接地址 OBS远程Endpoint地址,可通过查看桶信息来获取地址。 Access Key ID 访问密钥的一部分,访问密钥ID。华为云通过AK识别
该路径下文件需符合以下规则,否则会导致传输失败: 文件数量包括文件夹不能超过1000个。 文件总大小不能超过6GB。 OBS上传 数据源 OBS数据源,用户从OBS桶中获取数据。如没有OBS数据源,可通过接入数据源接入。 访问路径 OBS桶中存放文件的路径。 说明: 该路径下文件需符合以下规则,否则会导致传输失败: 文件数量包括文件夹不能超过1000个。
接入数据源 上传Oracle需要上传表所在的schema的只读权限,同时需要赋予该用户DBA_CONSTRAINTS 、DBA_CONS_COLUMNS、DBA_TAB_COLUMNS、DBA_TABLES这四个表的查询权限。 上传mysql需要具有数据库的只读权限。 上传dws需要上传表所在的schema的只读权限。
选择界面左侧导航栏中的“任务管理”,在“任务管理”界面记录了上传任务、采集任务、交换任务、下载任务的任务清单。 单击需要查看任务详情的页签,系统展示页签下的任务列表,可以查看该页签下的任务号、数据名称、状态、子任务、操作等。 以“上传任务”为例说明。 单击“上传任务”页签,通过状态、任务号等进行精确搜索。
该路径下文件需符合以下规则,否则会导致传输失败: 文件数量包括文件夹不能超过1000个。 文件总大小不能超过6GB。 OBS上传 数据源 OBS数据源,用户从OBS桶中获取数据。如没有OBS数据源,可通过接入数据源接入。 访问路径 OBS桶中存放文件的路径。 说明: 该路径下文件需符合以下规则,否则会导致传输失败: 文件数量包括文件夹不能超过1000个。
该路径下文件需符合以下规则,否则会导致传输失败: 文件数量包括文件夹不能超过1000个。 文件总大小不能超过6GB。 OBS上传 数据源 OBS数据源,用户从OBS桶中获取数据。如没有OBS数据源,可通过接入数据源接入。 访问路径 OBS桶中存放文件的路径。 说明: 该路径下文件需符合以下规则,否则会导致传输失败: 文件数量包括文件夹不能超过1000个。
、我的任务、账号详情等内容,方便用户快速了解、上手和操作EDS,如图1所示。 快捷入口 包含上传资源、上架offer、创建合约、发送数据,方便用户快捷使用。 统计概览 统计我的资源(上传的)、我的Offer(上架的)、我的合约(发出的)数据,单击后展示数据详情。 我的任务 展示待
该路径下文件需符合以下规则,否则会导致传输失败: 文件数量包括文件夹不能超过1000个。 文件总大小不能超过6GB。 OBS上传 数据源 OBS数据源,用户从OBS桶中获取数据。如没有OBS数据源,可通过接入数据源接入。 访问路径 OBS桶中存放文件的路径。 说明: 该路径下文件需符合以下规则,否则会导致传输失败: 文件数量包括文件夹不能超过1000个。
入门实践 当您完成了数据上传、交换以及管理数据等基本操作后,可以根据自身的业务需求使用EDS提供的一系列常用实践。 表1 常用最佳实践 实践 描述 数据交换 用户建立EDS与第三方内网环境的数据库/FTP服务器的连接 很多企业会把关键数据源建设在内网,例如数据库、文件服务器等。由于EDS
加入连接器 用户也可选择加入他人连接器去进行数据的上传和交换。 前提条件 用户已购买/加入交换数据空间。 操作步骤 登录交换数据空间官网。 单击“管理控制台”,进入交换数据空间控制台界面。 单击“我的空间”,在交换数据空间实例中,选择已加入的实例,单击下方“连接器”。 选择想要加
表2 参数说明 参数 说明 连接地址 FTP服务器的IP地址。 端口 FTP服务器端口。 连接模式 主动:FTP服务器主动连接客户端的数据端口。 被动:FTP服务器被动等待客户端连接自己的数据端口。 用户名、密码 登录FTP服务器的用户名和密码。 连接参数配置完成后,单击“测
步帮助用户限定数据使用方式。 支持区域: 华北-北京四 注册应用 数据源管理 支持接入DWS、OBS、ORACLE、MRS_HIVE、FTP、MYSQL、API等多种数据源,用于数据上传和下载,接入数据源后可进行测试连接、编辑、删除等操作。 支持区域: 华北-北京四 接入数据源 使用控制策略管理
ORACLE:ORACLE是一款功能强大的关系型数据库,用户可以读取ORACLE的业务数据,将数据上传到EDS上,目前仅支持11.2.0.4的版本。 数据源名称 自定义数据源名称,建议按照一定的命名规则填写任务名称,方便快速识别和查找。要求长度范围为2位~50位。 数据源描述 用户可以根据需要在文本框中输入对该数据源的描述信息。
接入DWS数据源 概述 交换数据空间支持把DWS作为一种数据源类型,并用于数据上传和下载。在使用DWS数据源前,需要先接入数据源。 操作步骤 登录交换数据空间官网。 单击“管理控制台”,进入交换数据空间控制台界面。 单击“我的空间”,在交换数据空间实例中,选择实例,单击实例卡片上的“连接器”。
object OBS数据源连接信息。 表6 ObsConnection 参数 是否必选 参数类型 描述 endpoint 否 String OBS访问地址。 参数校验规则:最小长度1,最大长度1000,匹配域名正则表达式。 bucket_name 否 String OBS名称。 参数
DMAP数小二 在运营中心查看元模型实体详情时,元模型显示不清晰 为什么在新增数据连接时测试连接会失败? 在创建采集任务时,如何配置调度任务并启用执行? 在购买DMAP数小二时,系统提示“当前用户不在白名单内,请在用户指南中查看申请流程”
工作台 工作台概述 我的任务 父主题: 连接器管理员指南
数据管家管理 创建与企业数据库的连接 创建采集数据库中的数据任务 在数据容器中查看采集的数据 通过DMAP数小二创建数据标准 在数据资产中为逻辑数据实体关联数据集 在数据资产中为属性关联数据集字段
数据目录概述 数据目录提供了对数据和资源文件的一系列操作方式,方便用户快捷管理自己上传和接收的资源。数据目录界面对数据的来源划分为收到的数据、发出的数据、删除的数据、我的收藏、团队数据和我的数据,明确了数据来源,记录了团队交换或个人交换的数据。 此外提供了两种交换数据资源的方式: