检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
用户建立EDS与第三方内网环境的FTP服务器的连接 远程登录云服务器。 账号:root;密码:您在创建云服务器时设置的密码。具体操作请参见登录Linux弹性云服务器。 在该节点部署ftp.proxy,用于打通EDS和第三方内网环境FTP服务器之间的连接,执行如下命令: 下载ctags插件,并进行安装。
加入连接器 用户也可选择加入他人连接器去进行数据的上传和交换。 前提条件 用户已购买/加入交换数据空间。 操作步骤 登录交换数据空间官网。 单击“管理控制台”,进入交换数据空间控制台界面。 单击“我的空间”,在交换数据空间实例中,选择已加入的实例,单击下方“连接器”。 选择想要加
用户可以根据需要在文本框中输入对该数据源的描述信息。 设置完成后,配置数据源连接参数,具体参数如表2所示。 表2 参数说明 参数 说明 连接地址 FTP服务器的IP地址。 端口 FTP服务器端口。 连接模式 主动:FTP服务器主动连接客户端的数据端口。 被动:FTP服务器被动等待客户端连接自己的数据端口。
单击“新增文件”,添加待上传的数据文件后,界面将显示文件的文件名称、类型、大小、操作等基本信息。 FTP上传 数据源 FTP数据源,用户从FTP数据库服务器获取数据。如没有FTP数据源,可通过接入数据源接入。 访问路径 FTP服务器中要访问的文件夹的路径。 说明: 该路径下文件需符合以下规则,否则会导致传输失败:
购买连接器 用户需要通过连接器进行数据的上传和交换,空间实例创建完成之后需要先申请开通连接器,待空间管理员审批后再购买连接器。同时用户可以对已购买成功的连接器进行禁用、恢复、退订和删除操作。 前提条件 用户已购买/加入交换数据空间。 购买连接器 购买交换数据空间实例后,需再购买连
申请开通并购买连接器 用户需要通过连接器进行数据的上传和交换,空间实例创建完成之后需要先申请开通连接器,待空间管理员审批后再购买连接器。同时用户可以对已购买成功的连接器进行禁用、恢复、退订和删除操作。 前提条件 用户已购买/加入交换数据空间。 申请开通连接器 单个用户可申请多个连
选择界面左侧导航栏中的“任务管理”,在“任务管理”界面记录了上传任务、采集任务、交换任务、下载任务的任务清单。 单击需要查看任务详情的页签,系统展示页签下的任务列表,可以查看该页签下的任务号、数据名称、状态、子任务、操作等。 以“上传任务”为例说明。 单击“上传任务”页签,通过状态、任务号等进行精确搜索。
当您完成了数据上传、交换以及管理数据等基本操作后,可以根据自身的业务需求使用EDS提供的一系列常用实践。 表1 常用最佳实践 实践 描述 数据交换 用户建立EDS与第三方内网环境的数据库/FTP服务器的连接 很多企业会把关键数据源建设在内网,例如数据库、文件服务器等。由于EDS运
、我的任务、账号详情等内容,方便用户快速了解、上手和操作EDS,如图1所示。 快捷入口 包含上传资源、上架offer、创建合约、发送数据,方便用户快捷使用。 统计概览 统计我的资源(上传的)、我的Offer(上架的)、我的合约(发出的)数据,单击后展示数据详情。 我的任务 展示待
单击数据源列表上方“新增数据源”,进入“新增数据源”界面,设置ORACLE数据源的基本信息,具体参数如表1所示。 表1 参数说明 参数 说明 数据源类型 ORACLE:ORACLE是一款功能强大的关系型数据库,用户可以读取ORACLE的业务数据,将数据上传到EDS上,目前仅支持11.2.0.4的版本。
在“团队成员管理”页面单击“添加成员”,在弹出的窗口中选择用户,然后单击“确定”。 设置用户的数据范围和角色,用户可以根据需求选择数据范围和角色,或复制已有用户的数据范围和角色。 选择数据范围和角色:分为按团队维度设置和按文件夹维度设置。 按团队维度设置:负责团队成员管理、文件夹增删改、移动、授权;负责在团队目录独立完成数据交换作业。
单击“新增文件”,添加待上传的数据文件后,界面将显示文件的文件名称、类型、大小、操作等基本信息。 FTP上传 数据源 FTP数据源,用户从FTP数据库服务器获取数据。如没有FTP数据源,可通过接入数据源接入。 访问路径 FTP服务器中要访问的文件夹的路径。 说明: 该路径下文件需符合以下规则,否则会导致传输失败:
单击“新增文件”,添加待上传的数据文件后,界面将显示文件的文件名称、类型、大小、操作等基本信息。 FTP上传 数据源 FTP数据源,用户从FTP数据库服务器获取数据。如没有FTP数据源,可通过接入数据源接入。 访问路径 FTP服务器中要访问的文件夹的路径。 说明: 该路径下文件需符合以下规则,否则会导致传输失败:
Failed 未满足前提条件,服务器未满足请求者在请求中设置的其中一个前提条件。 413 Request Entity Too Large 由于请求的实体过大,服务器无法处理,因此拒绝请求。为防止客户端的连续请求,服务器可能会关闭连接。如果只是服务器暂时无法处理,则会包含一个Retry-After的响应信息。
接入OBS数据源 概述 交换数据空间支持把OBS作为一种数据源类型,并用于数据上传和下载。在使用OBS数据源前,需要先接入数据源。 操作步骤 登录交换数据空间官网。 单击“管理控制台”,进入交换数据空间控制台界面。 单击“我的空间”,在交换数据空间实例中,选择实例,单击实例卡片上的“连接器”。
单击数据源列表上方“新增数据源”,进入“新增数据源”界面,设置MYSQL数据源的基本信息,具体参数如表1所示。 表1 参数说明 参数 说明 数据源类型 MYSQL:MYSQL是一款小型关联式数据库管理系统,用户可以读取存放在MYSQL的业务数据,将数据上传到EDS上。 数据源名称 自定义数据源名称
若要读取最底层的json array,则请将该值设置为:a.b; 若response body中被读取对象是json object,可以不设置该值,不过meta的字段名必须是全路径,例如: { "a": {"b":{"c":"xx","d":"xx"} } } 若不设置该值,则meta的字段名就是a
新增数据源”界面,设置MRS_HIVE数据源的基本信息,具体参数如表1所示。 表1 参数说明 参数 说明 数据源类型 MRS_HIVE:MRS_HIVE是一个基于HDFS和MapReduce架构的数据仓库,用户可以读取存放在MRS_HIVE的业务数据,将数据上传到EDS上。 数据源名称
接入DWS数据源 概述 交换数据空间支持把DWS作为一种数据源类型,并用于数据上传和下载。在使用DWS数据源前,需要先接入数据源。 操作步骤 登录交换数据空间官网。 单击“管理控制台”,进入交换数据空间控制台界面。 单击“我的空间”,在交换数据空间实例中,选择实例,单击实例卡片上的“连接器”。
资源名称 文件上传后在数据目录展示的名称。要求长度范围为2位~50位。 本示例上传的资源命名为“风湿病患者医疗数据”。 资源描述 对资源的描述说明。 定义资源后,添加对应数据。 资源类型为文件时,具体的参数说明如表5所示。 表5 参数说明 参数 说明 文件上传 用户本地上传文件到EDS空间下的连接器。