正在生成
详细信息:
检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
用户建立EDS与第三方内网环境的数据库/FTP服务器的连接 操作场景 很多企业会把关键数据源建设在内网,例如数据库、文件服务器等。由于EDS运行在云上,所以需要创建EDS与第三方内网数据源的连接,以便更加安全、可靠的交换和管理数据资源。 准备工作 创建一台Centos操作系统的云服务器,并且为云服务器绑定弹性公网
下载文件 功能介绍 下载文件。 URI POST /v1/{project_id}/eds/instances/{instance_id}/connectors/{connector_id}/artifacts 表1 路径参数 参数 是否必选 参数类型 描述 project_id
接收的CSV文件打开乱码如何处理? 问题描述 用户登录交换数据空间,在“数据目录”下接收的CSV文件,打开出现中文乱码的情况。 可能原因 用户使用Excel工具打开CSV文件,交换数据空间服务的CSV文件使用了UTF-8编码格式,而Excel是以ANSI格式打开的,没有做编码识别。
在数据目录下浏览数据资源文件,无法下载 问题描述 用户登录连接器,在数据目录下浏览数据资源文件,无法进行下载,如图1。 图1 无法下载的数据资源文件 可能原因 用户选择了自己上传的数据资源文件。 用户收到的数据资源文件存在限制,无法进行下载。 处理方法 本地接入的数据资源文件是用户自己上传的,该类型的数据资源文件无法下载。
表2 参数说明 参数 说明 连接地址 FTP服务器的IP地址。 端口 FTP服务器端口。 连接模式 主动:FTP服务器主动连接客户端的数据端口。 被动:FTP服务器被动等待客户端连接自己的数据端口。 用户名、密码 登录FTP服务器的用户名和密码。 连接参数配置完成后,单击“测试
FTP数据源,用户从FTP数据库服务器获取数据。如没有FTP数据源,可通过接入数据源接入。 访问路径 FTP服务器中要访问的文件夹的路径。 说明: 该路径下文件需符合以下规则,否则会导致传输失败: 文件数量包括文件夹不能超过1000个。 文件总大小不能超过6GB。 文件名称 上传文件的名称,如不输入,默认上传该路径下所有文件。
查看:用户可以查看资源文件详细信息。 加工:用户可以在预览的时候处理数据资源文件。 下载:用户可以通过限制下载次数和限制可用应用将数据资源文件下载到应用所描述的地方。 默认勾选“查看”,可勾选“加工”和“下载”,给数据消费方指定使用规则。 说明: PDF格式文件、图片格式文件和结构化数据不
说明 IP SFTP服务器的IP地址。 用户名/密码 登录SFTP服务器的用户名和密码。 端口 SFTP服务器的端口。 文件路径 下载数据到SFTP服务器上的存放路径。 表3 FTP类型存储的参数说明 参数 说明 连接地址 FTP服务器的IP地址。 端口 FTP服务器端口。 连接模式
MRS_HIVE配置文件。配置文件获取请参考下方获取MRS Hive配置文件。 krb5 MRS_HIVE配置文件。配置文件获取请参考下方获取MRS Hive配置文件。 获取MRS Hive配置文件: 获取“krb5.conf”和“user.keytab”文件。 参考下载用户认证文件,在MRS
一步限制。 查看:用户可以查看资源文件详细信息。 加工:用户可以在预览的时候处理数据资源文件。 下载:用户可以下载数据资源文件到本地。 默认勾选“查看”,可勾选“加工”和“下载”,给数据消费方指定使用规则。 说明: PDF格式文件、图片格式文件和结构化数据不支持勾选加工,其余限制
DWS类型存储的具体参数如表5所示。 表2 存储SFTP数据参数说明 参数 说明 用户名/密码 登录SFTP服务器的用户名和密码。 端口 SFTP服务器端口。 文件路径 下载数据到SFTP服务器的存放路径。 表3 存储ORACLE数据参数说明 参数 说明 端口 ORACLE数据库的端口号。 服务名称
上架offer 功能介绍 上架offer。 URI POST /v1/{project_id}/eds/instances/{instance_id}/connectors/{connector_id}/offers 表1 路径参数 参数 是否必选 参数类型 描述 instance_id
FTP数据源,用户从FTP数据库服务器获取数据。如没有FTP数据源,可通过接入数据源接入。 访问路径 FTP服务器中要访问的文件夹的路径。 说明: 该路径下文件需符合以下规则,否则会导致传输失败: 文件数量包括文件夹不能超过1000个。 文件总大小不能超过6GB。 文件名称 上传文件的名称,如不输入,默认上传该路径下所有文件。
连接器之间传输的单个非结构文件大小不超过20MB。 DMAP数小二的使用限制如下: 通过Excel导入架构资产时单个文件大小不超过10MB。 通过Excel导入架构资产时单个工作表的最大行数不超过20000,单个工作表的最大列数不超过1000,单个文件最大页签为400。 对浏览器的限制如下:
例卡片上的“连接器”。 然后选择连接器,单击连接器卡片上的“前往”,进入连接器控制台界面。 选择界面左侧导航栏中的“数据目录”,在“数据目录”界面,选择“我的数据 > 本地接入”。 单击待修改的资源文件或文件夹右侧“操作”列的“重命名”。 在弹出的窗口中,输入资源文件或文件夹名称后,单击“确定”,完成重命名。
表1 常用最佳实践 实践 描述 数据交换 用户建立EDS与第三方内网环境的数据库/FTP服务器的连接 很多企业会把关键数据源建设在内网,例如数据库、文件服务器等。由于EDS运行在云上,所以需要创建EDS与第三方内网数据源的连接,以便更加安全、可靠的交换和管理数据资源。 数据交换
Failed 未满足前提条件,服务器未满足请求者在请求中设置的其中一个前提条件。 413 Request Entity Too Large 由于请求的实体过大,服务器无法处理,因此拒绝请求。为防止客户端的连续请求,服务器可能会关闭连接。如果只是服务器暂时无法处理,则会包含一个Retry-After的响应信息。
登录交换数据空间官网。 单击“管理控制台”,进入交换数据空间控制台界面。 单击“我的空间”,在交换数据空间实例中,选择实例,单击实例卡片上的“连接器”。 然后选择连接器,单击连接器卡片上的“前往”,进入连接器控制台界面。 选择界面左侧导航栏中的“数据源管理”,单击数据源列表上方“接入数据源”,进入“接
据加工产物。 可能原因 下载到可信环境的应用数据再加工后,未放到正确的采集路径下,导致采集失败。 处理方法 用户将数据加工产物保存到正确的文件路径下,才可以被采集到。 父主题: 数据合约
在数据目录下浏览数据资源文件,无法下载 接收的CSV文件打开乱码如何处理? 更多 交换数据空间实例 无法前往交换数据空间实例的控制台 用户购买交换数据空间实例,无连接器可用 更多 数据合约 无法提前终止合约 更多 数据目录 在数据目录下浏览数据资源文件,无法下载 接收的CSV文件乱码,如何处理