检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
操作步骤 在数据服务首页左侧导航,选择“首页>我的数据集”。 单击“新建数据集”。 在弹出界面,输入数据集的名称,设置数据集的过期时间。如图1所示。 图1 新建数据集 在这里以本地上传数据为例: :通过上传本地数据快速发布数据集。 数据集名称:由汉字,字母(a~z A~Z)、数字(0~9)和符号(_-
根据数据集ID查询数据集描述信息 功能介绍 根据数据集ID查询数据集描述信息。 URI URI格式 GET /softcomai/datalake/v1.0/datasets/{id} 参数说明 参数名 是否必选 参数类型 备注 id 是 String 数据集的ID。 请求 请求样例
根据数据集ID获取数据集分类信息 功能介绍 根据数据集ID查询数据集分类信息。 URI URI格式 GET /softcomai/datalake/v1.0/datasets/dataType/{datasetId}} 参数说明 参数名 是否必选 参数类型 备注 datasetId
下载数据集 下载数据集到OBS 父主题: 消费数据集
根据数据集的entitiesId获取数据集的特征信息 功能介绍 管理侧根据数据集entitiesId获取数据集的特征信息。 URI URI格式 POST /softcomai/datalake/v1.0/originDataModels/{entitiesId}/entitysattr
各个主题域中管理的对象,选择业务对象,筛选与对应业务对象相关的数据集。 容器 容器在应用元模型中与数据集相关联,选择容器,筛选与对应容器相关的数据集。 数据平台实例 数据平台实例在应用元模型中与数据集相关联,选择数据平台实例,筛选与对应数据平台实例相关的数据集。 在“②选择数据集”中,可通过关键字检索、选择标注
订阅数据集 立即订阅数据集 申请订阅数据集 查看数据集订阅申请 审批数据集订阅申请 父主题: 消费数据集
发布数据集 申请发布数据集 查看数据集发布申请 审批数据集发布申请 父主题: 管理数据集
在左侧导航栏中,选择“已订阅数据集”。 在“已订阅数据集”界面上待下载的数据集对应的“操作”列,单击“我要下载”。 数据集服务支持下载单个数据集,也支持选中待下载的多个数据集左侧的复选框,然后单击“批量下载”对多个数据集同时进行下载。 数据集服务支持在数据集订阅到期时间之前多次下载该数据集到OBS桶。
在“创建流通任务”页面,选择数据集模态,如“文本 > 预训练文本”类型的数据集。 图1 选择数据集模态 选择数据集,单击“下一步”。 在“格式配置”选择发布格式。由于数据工程需要支持对接盘古大模型或三方大模型,为了使这些数据集能够被这些大模型正常训练,平台支持发布不同格式的数据集。 当前支持默认格式、盘古格式:
对话体验 单击页面下方“对话体验”,右侧展开“对话体验”页签。 在输入框中输入“查天气”、“查北京天气”,对话结果如下图所示。 图1 对话体验 父主题: 基于对话流程创建“查天气”技能
查看数据集本地下载申请 在数据服务左侧导航,选择“个人中心>数据集管理>我的申请”界面,可以查看当前用户所有申请信息。 查看数据集本地下载申请信息,例如,当前审批人和审批结果等。 单击“数据集名称”列下的数据集的名称,可以查看数据集详情,详细介绍请参见数据集详情介绍。 单击“操作
查看数据集修改申请 前提条件 登录用户为具有“Data Operation Engineer”角色的用户。 操作步骤 在数据服务左侧导航,选择“个人中心>数据集管理>我的申请”界面,可以查看当前用户所有申请信息。 查看数据集修改申请信息,例如,当前审批人和审批结果等。 单击“操作
下载数据集到本地 父主题: 下载数据集
在完成数据清洗后,如果无需使用数据合成与数据标注功能,可直接在“数据清洗”页面单击操作列“生成”,生成加工数据集。 加工后的数据集可在“数据工程 > 数据加工 > 加工数据集”中查看。 父主题: 加工文本类数据集
JSON 返回体。 page JSON 分页信息。 dataList JSON 数据集列表。 id String 数据集ID。 name String 数据集名称。 businessName String 数据集名称。 scheme String 模式,暂无用。 url String
修改数据集 功能介绍 管理员对已发布的数据集提交修改申请。 URI URI格式 PUT /softcomai/datalake/v1.0/datasets 参数说明 无。 请求 请求样例 PUT https://aissowulanalpha.inhuawei.com/datas
评估标准创建完成后可以在“人工评估标准”页面查看创建的评估标准,并支持编辑与删除操作。 创建文本类数据集评估任务 平台仅支持对“加工数据集”执行评估操作。 创建文本类数据集评估任务前,请参考加工文本类数据集,生成一个“加工数据集”。 创建文本类数据集评估任务步骤如下: 登录ModelArts Studio大模型开
评估标准创建完成后可以在“人工评估标准”页面查看创建的评估标准,并支持编辑与删除操作。 创建视频类数据集评估任务 平台仅支持对“加工数据集”执行评估操作。 创建视频类数据集评估任务前,请参考加工视频类数据集,生成一个“加工数据集”。 创建视频类数据集评估任务步骤如下: 登录ModelArts Studio大模型开
下架数据集 申请下架数据集 查看数据集下架申请 审批数据集下架申请 父主题: 管理数据集