检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
接入FTP数据源 概述 交换数据空间支持把FTP作为一种数据源类型,并用于数据上传和下载。在使用FTP数据源前,需要先接入数据源。 使用FTP数据源存在一定的安全风险,如:FTP客户端与服务器所有的数据传送都是通过明文的方式,包括用户名和密码等敏感信息。 如需关闭FTP服务,可参考如下操作。
用户建立EDS与第三方内网环境的数据库/FTP服务器的连接 操作场景 很多企业会把关键数据源建设在内网,例如数据库、文件服务器等。由于EDS运行在云上,所以需要创建EDS与第三方内网数据源的连接,以便更加安全、可靠的交换和管理数据资源。 准备工作 创建一台Centos操作系统的云服务器,并且为云服务
用户本地上传文件到EDS空间下的连接器。 单击“新增文件”,添加待上传的数据文件后,界面将显示文件的文件名称、类型、大小、操作等基本信息。 FTP上传 数据源 FTP数据源,用户从FTP数据库服务器获取数据。如没有FTP数据源,可通过接入数据源接入。 访问路径 FTP服务器中要访问的文件夹的路径。 说明: 该路径
下载数据到SFTP服务器上的存放路径。 表3 FTP类型存储的参数说明 参数 说明 连接地址 FTP服务器的IP地址。 端口 FTP服务器端口。 连接模式 主动:FTP服务器主动连接客户端的数据端口。 被动:FTP服务器被动等待客户端连接自己的数据端口。 用户名/密码 登录FTP服务器的用户名和密码。 文件路径
很多企业会把关键数据源建设在内网,例如数据库、文件服务器等。由于EDS运行在云上,所以需要创建EDS与第三方内网数据源的连接,以便更加安全、可靠的交换和管理数据资源。 健康医疗数据通过EDS共享和安全管控实践 本实践以xx医疗集团和某慢病院交换“风湿病患者医疗数据”为例,指导用户在医疗场景中如何安全的进行数据交换。
单击合约右上角“消息”,支持输入留言信息,并查看交换方与接收方之前的留言消息。 单击合约下的批次名称,查看该批次下的数据信息及批次信息。 按批次查询团队收发的合约 登录交换数据空间官网。 单击“管理控制台”,进入交换数据空间控制台界面。 单击“我的空间”,在交换数据空间实例中,选择实例,单击实例卡片上的“连接器”。
数据保护技术 EDS通过数据加密保护手段,保护数据空间中的数据安全,如表1所示。 表1 交换数据空间的数据保护手段 数据保护手段 简要说明 传输加密(HTTPS) EDS数据空间之间数据传输接口支持HTTPS传输协议,保障数据传输的安全性。 父主题: 安全
接入MYSQL数据源 概述 交换数据空间支持把MYSQL作为一种数据源类型,并用于数据上传和下载。在使用MYSQL数据源前,需要先接入数据源。 操作步骤 登录交换数据空间官网。 单击“管理控制台”,进入交换数据空间控制台界面。 单击“我的空间”,在交换数据空间实例中,选择实例,单击实例卡片上的“连接器”。
下载结构化数据到mysql需要数据库的建表(create)和写入(insert)权限,而下载到Oracle和dws需要下载至目标schema的写入(insert)和建表(create)权限。 接入DWS数据源 接入OBS数据源 接入ORACLE数据源 接入MRS_HIVE数据源 接入FTP数据源
点对点交换是数据提供方将资源发送给数据消费方的一种消费方式,本文以个人数据为例介绍点对点交换数据。 使用流程 图1 点对点交换流程 数据提供方添加数据资源到EDS数据目录下,请参见步骤1:新增资源。 数据提供方和数据消费方进行点对点交换数据资源,请参见步骤2:点对点交换。 数据提供方的
通过数据市场交换资源 数据市场交换是数据提供方将资源文件上架到数据市场,数据消费方通过数据市场查看和订阅资源,本文以个人数据为例介绍数据市场交换资源。 使用流程 图1 通过数据市场交换资源流程 数据提供方添加数据资源到EDS数据目录下,请参见步骤1:新增资源。 将数据资源上架到数据市场,请参见步骤2:上架offer。
数据市场交换 数据市场交换是数据提供方将资源文件上架到数据市场,数据消费方通过数据市场查看和订阅资源。 前提条件 已完成新增资源。 操作步骤 登录交换数据空间官网。 单击“管理控制台”,进入交换数据空间控制台界面。 单击“我的空间”,在交换数据空间实例中,选择实例,单击实例卡片上的“连接器”。
EDS的核心模块,对每次交换的数据进行使用策略制定,用来对交换后的数据使用进行安全合规的控制。 数据连接器 EDS的核心模块,提供数据集成、计算和消费能力,通过连接器实现数据提供方和数据消费方之间数据的流通和可控使用。 数据传输 数据连接器中的传输模块,用来将数据从数据提供方传输到数据消费方,并提供通道加密的能力。
用户名/密码 登录SFTP服务器的用户名和密码。 端口 SFTP服务器端口。 文件路径 下载数据到SFTP服务器的存放路径。 表3 存储ORACLE数据参数说明 参数 说明 端口 ORACLE数据库的端口号。 服务名称 ORACLE数据库服务的名称。 Schema 数据库对象的集合,一个
内置应用说明 名称 描述 操作类型 数据库下载 该类应用允许用户下载结构化数据如CSV和JDBC类型的数据。 下载:用户可使用该应用下载数据到数据库。 数据库预览 该类应用允许用户查看结构化数据如CSV和JDBC类型的数据。 查看:用户可使用该应用预览查看数据库数据。 PDF查看 该类应用允许用户预览查看PDF文件,仅供测试。
注册数据库下载应用 支持注册数据库下载应用,用于下载数据到数据库。 注册数据库下载应用 登录交换数据空间官网。 单击“管理控制台”,进入交换数据空间控制台界面。 单击“我的空间”,在交换数据空间实例中,选择实例,单击实例卡片上的“连接器”。 选择连接器,单击连接器卡片上的“前往”,进入连接器控制台界面。
入门实践 当您完成了数据上传、交换以及管理数据等基本操作后,可以根据自身的业务需求使用EDS提供的一系列常用实践。 表1 常用最佳实践 实践 描述 数据交换 用户建立EDS与第三方内网环境的数据库/FTP服务器的连接 很多企业会把关键数据源建设在内网,例如数据库、文件服务器等。由于EDS
FTP数据源,用户从FTP数据库服务器获取数据。如没有FTP数据源,可通过接入数据源接入。 访问路径 FTP服务器中要访问的文件夹的路径。 说明: 该路径下文件需符合以下规则,否则会导致传输失败: 文件数量包括文件夹不能超过1000个。 文件总大小不能超过6GB。 OBS上传 数据源 OBS数据源,
由进行数据交换。 上下游数据空间:适用于上下游组织之间的数据交换,更能保证组织对数据的共享和管控。 该类型的空间允许其他租户和其名下的子用户加入,创建者和他的子用户可以与任何用户进行数据交换,其他租户只允许与创建者和他的子用户进行数据交换,其他租户间无法进行交换。 开放数据空间:
选择界面左侧导航栏中的“连接器管理 > 数据源管理”,进入“数据源管理”界面。 单击数据源列表上方“新增数据源”,进入“新增数据源”界面,设置DWS数据源的基本信息,具体参数如表1所示。 表1 参数说明 参数 说明 数据源类型 DWS:DWS是一种基于华为云基础架构和平台的在线数据处理数据库。 数据源名称 自