检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
管理数据集版本 数据标注完成后,您可以发布成多个版本对数据集进行管理。针对已发布生产的数据集版本,您可以通过查看数据集演进过程、设置当前版本、删除版本等操作,对数据集进行管理。数据集版本的相关说明,请参见关于数据集版本。 发布为新版本的说明,请参见发布数据集。 进入数据集版本管理页面
查看数据集修改申请 前提条件 登录用户为具有“Data Operation Engineer”角色的用户。 操作步骤 在数据服务左侧导航,选择“个人中心>数据集管理>我的申请”界面,可以查看当前用户所有申请信息。 查看数据集修改申请信息,例如,当前审批人和审批结果等。 单击“操作
下载数据集 下载数据集到OBS 父主题: 消费数据集
各个主题域中管理的对象,选择业务对象,筛选与对应业务对象相关的数据集。 容器 容器在应用元模型中与数据集相关联,选择容器,筛选与对应容器相关的数据集。 数据平台实例 数据平台实例在应用元模型中与数据集相关联,选择数据平台实例,筛选与对应数据平台实例相关的数据集。 在“②选择数据集”中,可通过关键字检索、选择标注
其他类数据集格式要求 除文本、图片、视频、气象、预测类数据集外,用户训练模型时如果使用较特殊的数据集,ModelArts Studio大模型开发平台支持导入用户自定义的数据集。 例如,在训练CV类算法(如图片分类、图片分割、图片检测等任务)时,用户需使用“其他”类型的数据集。 其
支持数据评估的数据集类型 ModelArts Studio大模型开发平台支持评估操作的数据集类型如下: 文本类数据集,详见创建文本类数据集评估任务。 视频类数据集,详见创建视频类数据集评估任务。 图片类数据集,详见创建图片类数据集评估任务。 父主题: 评估数据集
据集评估任务。 创建视频类数据集评估标准步骤如下: 登录ModelArts Studio大模型开发平台,进入所需操作空间。 图1 进入操作空间 在左侧导航栏中选择“数据工程 > 数据评估 > 评估标准”,平台预置的文本类数据集评估标准“视频数据质量标准 V1.0”,单击评估标准名称,可以查看具体的评估项。
根据数据集ID查询数据集的详细内容 功能介绍 根据数据集ID查询数据集相关的详细内容。 URI URI格式 GET /softcomai/datalake/v1.0/catalogs/api/dataset/{datasetId} 参数说明 参数名 是否必选 参数类型 备注 datasetId
据。 图2 创建图片类数据集发布任务 设置发布方式。图片类数据集可选两种发布方式:“单个数据集”、“混合数据集”。选择数据集时,默认选择当前空间数据集,如果用户具备其他空间的访问权限,可以选择来自其他空间的数据集。 若选择发布方式为“单个数据集”,选择数据集后,单击“下一步”。 图3
是 String 数据集名称 最小长度:1 最大长度:64 data_type 是 String 数据集数据类型 枚举值: IMAGE(图片) POINT_CLOUD(点云) TEXT(文本) VIDEO(视频) dataset_form 是 String 数据集形式 枚举值: DATASET(数据集)
管理数据集授权 配置资源授权(旧) 父主题: 管理数据集
JSON 返回体。 page JSON 分页信息。 dataList JSON 数据集列表。 id String 数据集ID。 name String 数据集名称。 businessName String 数据集名称。 scheme String 模式,暂无用。 url String
数据连接操作步骤如下。 单击数据目录区域框中的,弹出“数据连接”对话框,如图1所示。 图1 数据连接界面 配置“数据连接”对话框参数: 主数据集:主数据集、主数据实例、键值。 扩展数据集:扩展数据集、扩展数据实例、键值。 目标数据集:目标数据集、目标数据实例。其中目标数据名称只能以字母(A~Z
评估数据集 数据集评估场景介绍 评估文本类数据集 评估视频类数据集 评估图片类数据集 父主题: 使用数据工程准备与处理数据集
标注数据集 数据集标注场景介绍 标注文本类数据集 标注视频类数据集 标注图片类数据集 父主题: 使用数据工程准备与处理数据集
加工数据集 数据集加工场景介绍 数据集加工算子介绍 加工文本类数据集 加工视频类数据集 加工图片类数据集 加工气象类数据集 父主题: 使用数据工程准备与处理数据集
发布数据集 数据集发布场景介绍 发布文本类数据集 发布视频类数据集 发布图片类数据集 发布气象类数据集 发布预测类数据集 发布其他类数据集 父主题: 使用数据工程准备与处理数据集
1:物体检测 3:图像分割 100:文本分类 101:命名实体 102:文本三元组 200:声音分类 201:语音内容 202:语音分割 400:表格数据集 600:视频标注 900:自由格式 label_task_id 否 String 基于标注任务创建数据集版本,标注任务ID。 description
ModelArts Studio大模型开发平台支持标注操作的数据集类型如下: 文本类数据集,详见创建文本类数据集标注任务。 视频类数据集,详见创建视频类数据集标注任务。 图片类数据集,详见创建图片类数据集标注任务。 父主题: 标注数据集
下架数据集 申请下架数据集 查看数据集下架申请 审批数据集下架申请 父主题: 管理数据集