检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
DeltaLake(有元数据)迁移至MRS DeltaLake数据校验 本文主要介绍将自建DeltaLake环境上的数据迁移至华为云MRS DeltaLake之后,使用迁移中心 MgC进行数据一致性校验的步骤和方法。 DeltaLake存在元数据,可通过数据湖元数据同步方式进行数据采集
不使用EIP场景下进行大数据数据迁移 本节介绍不具备公网场景下Edge通过SNAT/VPN等方式完成大数据迁移和对数的操作方法。本文以阿里云作为源端,Edge安装在阿里云ECS进行举例。 步骤一:配置华为云VPN 参考站点入云VPN企业版的华为云控制台操作步骤,分别配置VPN网关、
使用DES把数据上传到OBS后,数据目录结构会变化吗? 不会。虽然挂载上传数据时,生成“xxx/deshare/DES服务单/数据源目录”的挂载前缀做传输密钥,但DES把用户数据成功上传到OBS中后,OBS会保留用户存储在Teleport或磁盘设备中数据的目录结构。 因OBS不支持文件目录系统的
为什么GaussDB数据表会丢失或数据被删除 GaussDB不会删除和操作用户的任何数据。出现这种情况,请检查是否为误操作,必要时可利用已有备份恢复文件。 已有备份恢复文件: 使用GaussDB实例的恢复功能。 将备份数据从弹性云服务器导入云数据库GaussDB。 父主题: 备份与恢复
授予数据库用户数据库权限 功能介绍 授予云数据库 TaurusDB实例数据库用户数据库权限。 调用方法 请参见如何调用API。 URI POST /v3/{project_id}/instances/{instance_id}/db-users/privilege 表1 路径参数
SQLServer全数据类型导入HDFS数据跳过 问题 SQLServer全数据类型导入HDFS,数据全部跳过。 答案 数据中包含SQLServer中特有的Timestamp类型,该数据类型与时间和日期无关,需要替换为Datetime类型。 父主题: Loader常见问题
HBase占用网络端口,连接数过大会导致其他服务不稳定 问题 HBase占用网络端口,连接数过大会导致其他服务不稳定。 回答 使用操作系统命令lsof或者netstat发现大量TCP连接处于CLOSE_WAIT状态,且连接持有者为HBase RegionServer,可能导致网络端口耗尽或
取消挂载并行文件系统 如果不再需要通过挂载方式访问OBS并行文件系统,或者需要对已挂载并行文件系统进行参数新增、修改或删除时,可以取消挂载并行文件系统。 取消挂载并行文件系统不会影响已保存至并行文件系统中的数据。 前提条件 待取消挂载的并行文件系统目前处于挂载状态。 操作步骤 打开命令行终端
数据资产模型 数据资产模型是解决方案信息架构共享,包含方案的主题设计、逻辑模型设计、物理模型设计、ETL映射、业务指标设计等。如何发布数据资产模型参考归档发布资产。 查找数据资产模型 图1 查找数据资产模型 图2 数据资产模型详情 引用数据资产模型 支持将发布的数据资产模型引用到指定方案下
RDS for PostgreSQL实例inodes过多导致数据库重启缓慢 实例inodes指标值过大,常见的原因是临时文件堆积、表对象过多。这两种情况下发生异常重启时,均会拖慢启动进程。 场景一 场景描述 使用RDS for PostgreSQL数据库时,业务执行大量复杂SQL,
磁盘扩容 操作场景 随着业务数据的增加,原来申请的数据库磁盘容量可能会不足,需要为云数据库RDS实例进行扩容。实例扩容的同时备份空间也会随之扩大。 当实例处于“磁盘空间满”状态时,需扩容至磁盘空间使用率小于87%才可使实例处于可用状态,使数据库恢复正常的写入操作。 建议您设置“磁盘使用率
数据集订购接口 订购数据集 取消订购数据集 更新订单的状态信息 父主题: 数据集
取消订阅数据集 当用户需要退订某个数据集时,可以取消订阅该数据集,本章节介绍如何取消已订阅的数据集。 操作步骤 在数据集服务界面,选择“个人中心>已订阅数据集”。 在已订阅数据集列表中,在需要取消订阅的数据集对应的“操作”列下,单击“取消订阅”。 如果一个数据集被订阅时是“租户订阅
使用TIE批量解析数据 功能介绍 调用TIE接口进行数据解析,并保存到指定路径。 URI URI格式 POST https://IP:9000/tools/extract/batchexport 参数说明 无。 请求 请求样例 POST https://IP:9000/tools/
下发数据恢复任务 功能介绍 SRE下发数据恢复任务。 URI URI格式 POST /softcomai/datalake/dataplan/v1.0/backup/restore/order 参数说明 无。 请求 请求样例 POST https://ipaddr:port/softcomai
修改数据集 功能介绍 管理员对已发布的数据集提交修改申请。 URI URI格式 PUT /softcomai/datalake/v1.0/datasets 参数说明 无。 请求 请求样例 PUT https://aissowulanalpha.inhuawei.com/dataset
数据集服务备份 功能介绍 为防止数据服务异常后用户数据丢失,数据资产管理服务通过该接口定期向数据集服务下发数据备份的命令,数据集服务受到备份的命令后以租户粒度将各租户下的数据备份。 URI URI格式 GET /softcomai/datalake/v1.0/datacatalog
取消订购数据集 功能介绍 外部用户在NAIE平台上取消订购数据集。 URI URI格式 DELETE /softcomai/datalake/v1.0/external/datacatalog/order 参数说明 无。 请求 请求样例 DELETE https://ipaddr:
访问数据集服务 在用户终端PC上打开浏览器,在地址栏中输入“https://www.hwtelcloud.com/”。 单击界面右上角的“登录”,进入华为云登录界面。 选择“IAM用户登录”方式,输入账号名、用户名和密码,单击“登录”。 首次登录后请及时修改密码,并定期修改密码。