检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
表2 参数说明 参数 说明 桶名称 用户在OBS服务中创建桶的名称。如没有OBS桶,可在OBS中创建桶。 连接地址 OBS远程Endpoint地址,可通过查看桶信息来获取地址。 Access Key 访问密钥的一部分,访问密钥ID。华为云通过AK识别访问用户的身份。如没有AK/SK,可通过新增访问密钥来创建新的密钥。
该路径下文件需符合以下规则,否则会导致传输失败: 文件数量包括文件夹不能超过1000个。 文件总大小不能超过6GB。 OBS上传 数据源 OBS数据源,用户从OBS桶中获取数据。如没有OBS数据源,可通过接入数据源接入。 访问路径 OBS桶中存放文件的路径。 说明: 该路径下文件需符合以下规则,否则会导致传输失败: 文件数量包括文件夹不能超过1000个。
该路径下文件需符合以下规则,否则会导致传输失败: 文件数量包括文件夹不能超过1000个。 文件总大小不能超过6GB。 OBS上传 数据源 OBS数据源,用户从OBS桶中获取数据。如没有OBS数据源,可通过接入数据源接入。 访问路径 OBS桶中存放文件的路径。 说明: 该路径下文件需符合以下规则,否则会导致传输失败: 文件数量包括文件夹不能超过1000个。
选择界面左侧导航栏中的“任务管理”,在“任务管理”界面记录了上传任务、采集任务、交换任务、下载任务的任务清单。 单击需要查看任务详情的页签,系统展示页签下的任务列表,可以查看该页签下的任务号、数据名称、状态、子任务、操作等。 以“上传任务”为例说明。 单击“上传任务”页签,通过状态、任务号等进行精确搜索。
接入FTP数据源 概述 交换数据空间支持把FTP作为一种数据源类型,并用于数据上传和下载。在使用FTP数据源前,需要先接入数据源。 使用FTP数据源存在一定的安全风险,如:FTP客户端与服务器所有的数据传送都是通过明文的方式,包括用户名和密码等敏感信息。 如需关闭FTP服务,可参考如下操作。
用户通过新增资源将本地数据资源上传到EDS平台,方便在EDS平台完成数据交换。 数据提供方 点对点交换 存在两种方式: 直接创建合约并发送数据。 在已有合约的情况下,可以重复多次发送数据,无需新建合约配置策略。 审批资源 数据提供方审批人在“工作台”的“我的任务 > 待办”中,审批该资源是否提供给数据消费方。
object OBS数据源连接信息。 表6 ObsConnection 参数 是否必选 参数类型 描述 endpoint 否 String OBS访问地址。 参数校验规则:最小长度1,最大长度1000,匹配域名正则表达式。 bucket_name 否 String OBS名称。 参数
加入连接器 用户也可选择加入他人连接器去进行数据的上传和交换。 前提条件 用户已购买/加入交换数据空间。 操作步骤 登录交换数据空间官网。 单击“管理控制台”,进入交换数据空间控制台界面。 单击“我的空间”,在交换数据空间实例中,选择已加入的实例,单击下方“连接器”。 选择想要加
入门实践 当您完成了数据上传、交换以及管理数据等基本操作后,可以根据自身的业务需求使用EDS提供的一系列常用实践。 表1 常用最佳实践 实践 描述 数据交换 用户建立EDS与第三方内网环境的数据库/FTP服务器的连接 很多企业会把关键数据源建设在内网,例如数据库、文件服务器等。由
接入数据源 上传Oracle需要上传表所在的schema的只读权限,同时需要赋予该用户DBA_CONSTRAINTS 、DBA_CONS_COLUMNS、DBA_TAB_COLUMNS、DBA_TABLES这四个表的查询权限。 上传mysql需要具有数据库的只读权限。 上传dws需要上传表所在的schema的只读权限。
连接地址 FTP服务器的IP地址。 端口 FTP服务器端口。 连接模式 主动:FTP服务器主动连接客户端的数据端口。 被动:FTP服务器被动等待客户端连接自己的数据端口。 用户名/密码 登录FTP服务器的用户名和密码。 文件路径 下载数据到FTP服务器上的存放路径。 表4 OBS类型存储的参数说明
接入DWS数据源 概述 交换数据空间支持把DWS作为一种数据源类型,并用于数据上传和下载。在使用DWS数据源前,需要先接入数据源。 操作步骤 登录交换数据空间官网。 单击“管理控制台”,进入交换数据空间控制台界面。 单击“我的空间”,在交换数据空间实例中,选择实例,单击实例卡片上的“连接器”。
该路径下文件需符合以下规则,否则会导致传输失败: 文件数量包括文件夹不能超过1000个。 文件总大小不能超过6GB。 OBS上传 数据源 OBS数据源,用户从OBS桶中获取数据。如没有OBS数据源,可通过接入数据源接入。 访问路径 OBS桶中存放文件的路径。 说明: 该路径下文件需符合以下规则,否则会导致传输失败: 文件数量包括文件夹不能超过1000个。
MYSQL:MYSQL是一款小型关联式数据库管理系统,用户可以读取存放在MYSQL的业务数据,将数据上传到EDS上。 数据源名称 自定义数据源名称,建议按照一定的命名规则填写任务名称,方便快速识别和查找。要求长度范围为2位~50位。 数据源描述 用户可以根据需要在文本框中输入对该数据源的描述信息。
支持区域: 华北-北京四 华南-广州-友好用户环境 注册应用 数据源管理 支持接入DWS、OBS、ORACLE、MRS_HIVE、FTP、MYSQL、API等多种数据源,用于数据上传和下载,接入数据源后可进行测试连接、编辑、删除等操作。 支持区域: 华北-北京四 华南-广州-友好用户环境
、我的任务、账号详情等内容,方便用户快速了解、上手和操作EDS,如图1所示。 快捷入口 包含上传资源、上架offer、创建合约、发送数据,方便用户快捷使用。 统计概览 统计我的资源(上传的)、我的Offer(上架的)、我的合约(发出的)数据,单击后展示数据详情。 我的任务 展示待
该路径下文件需符合以下规则,否则会导致传输失败: 文件数量包括文件夹不能超过1000个。 文件总大小不能超过6GB。 OBS上传 数据源 OBS数据源,用户从OBS桶中获取数据。如没有OBS数据源,可通过接入数据源接入。 访问路径 OBS桶中存放文件的路径。 说明: 该路径下文件需符合以下规则,否则会导致传输失败: 文件数量包括文件夹不能超过1000个。
SFTP OBS WPS API connection DataSourceConnection object 数据源连接信息。 表7 DataSourceConnection 参数 参数类型 描述 obs_connection ObsConnection object OBS数据源连接信息。
管理个人中心 管理我的导入任务 查看我的申请任务 管理我的导出任务 管理我的待办任务
来,就应作为组织层面的标准在组织内被共同遵守。 业务平台 应用架构 能独立满足业务某种需要,提供给用户使用的可运营的功能和服务的组合,有清晰的业务定位、服务对象和业务范围,有完整的产品团队并对本产品的全生命周期管理负责。 应用 应用架构 应用是支撑特定业务需求而提供的一组紧耦合的