检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
支持对数据集进行溯源。 修改数据集 在“微调数据集”页面选择“我创建的”页签。 在数据集列表勾选数据集并单击“操作”列的“修改”。 在“修改数据集”页面,仅支持修改数据集描述、修改标签名称。 删除数据集 单个删除数据集: 在“我的数据集”页面选择“我创建的”页签。 在数据集列表勾
在资产中心页面,选择“数据集”页签。 选择“微调数据集”子页签,将鼠标光标移至数据集卡片上,单击卡片右上角。 单击工具卡片右上角的,可以取消收藏。 收藏成功后,您可以在“知识中心 > 微调数据集”页面“数据集列表”页签的“我收藏的”子页签下,查看收藏结果。 单击数据集列表操作列的“取消收藏”,可以取消收藏。
创建知识数据集 功能介绍 创建知识数据集 URI POST /v1/knowledge-datasets 表1 Query参数 参数 是否必选 参数类型 描述 data_set 是 String 创建知识数据集请求体,参数结构请参见“附录 > 知识数据集请求参数说明” file 否
检索返回字段:检索返回相应的切片片段。 单击“创建数据集和索引配置”,创建的数据集和索引配置显示在“知识数据集”页面的数据集列表中。 更多操作 创建数据集完成后,可根据需要执行如表3所示的操作。 表3 更多操作 操作 步骤 查看数据集详情 在数据集列表中单击数据集名称,在知识数据集详情页面查看数据概况、索引配置、调度历史以及溯源。
DeleteResult object 知识数据集删除结果 表4 DeleteResult 参数 参数类型 描述 id String 知识数据集id name String 知识数据集名称 result Boolean 知识数据集删除成功或失败 reason String 知识数据集删除失败原因 状态码:
执行知识数据集 功能介绍 执行知识数据集 URI POST /v1/knowledge-datasets/{data_set_id}/execute 表1 路径参数 参数 是否必选 参数类型 描述 data_set_id 是 String 知识数据集id 请求参数 表2 请求Header参数
查询知识数据集详情 功能介绍 查询知识数据集详情 URI GET /v1/knowledge-datasets/{data_set_id} 表1 路径参数 参数 是否必选 参数类型 描述 data_set_id 是 String 知识数据集id 请求参数 表2 请求Header参数
只有格式为“对话文本”的微调数据集才可进行标注。 调度类型为“一次性调度”的微调数据集才可进行标注。 创建数据标注 在AI原生应用引擎的左侧导航栏选择“知识中心 > 微调数据集”。 在“微调数据集”页面,单击右上角“创建数据标注”。 在“创建数据标注”对话框,选择微调数据集、数据集版本,填写标注名称。
基于微调数据集进行模型微调 创建微调数据集 收藏预置微调数据集 对微调数据集进行数据标注 创建模型微调任务 父主题: 管理模型
description 否 String 数据集描述。 tags 否 Array of strings 数据集标签,传入标签值取值: 登录AI原生应用引擎,在左侧导航栏选择“资产中心”,选择“数据集”页签,在筛选栏下查看标签值。 data_type 是 String 数据集类型,枚举值:TEXT(
优化算法在完整训练数据集上的工作轮数。 learning_rate 学习率 学习率是每一次迭代中梯度向损失函数最优解移动的步长。 weight_decay 权重衰减因子 对模型参数进行正则化的一种因子,可以缓解模型过拟合现象。 warmup_ratio 学习率热启动比例 学习率热启动参数
查询知识数据集最新执行记录 功能介绍 查询知识数据集最新执行记录 URI GET /v1/knowledge-datasets/{data_set_id}/latest-execution-record 表1 路径参数 参数 是否必选 参数类型 描述 data_set_id 是 String
AI原生应用引擎支持所有数据集进行数据标注吗? 进行标注的数据集必须同时满足用途为“模型训练”、任务领域为“自然语言处理”、任务子领域为“文本生成”、数据集格式为“对话文本”四个条件。 父主题: AI原生应用引擎
购买AppStage 打开AppStage官网页,单击“控制台”,并登录。 在应用平台控制台首页,单击“立即购买”。 根据需求购买。 购买AI原生应用引擎 选择“AI原生应用管理”页签。 在“订购方式”区域下,选择“自由订购”或“定制套餐”。 自由订购:执行3.c。 定制套餐:选
购买AppStage 打开AppStage官网页,单击“控制台”,并登录。 在应用平台控制台首页,单击“立即购买”。 根据需求购买。 购买AI原生应用引擎 选择“AI原生应用管理”页签。 在“订购方式”区域下,选择“自由订购”或“定制套餐”。 自由订购:执行3.c。 定制套餐:选
我创建的微调数据集会被其他用户调用去训练他们的大模型吗? 用户个人创建的数据集是属于个人账号下的专属数据,未经本人许可不会被其他人员查看到,且不会被其他用户在大模型训练时调用。 父主题: AI原生应用引擎
请参见购买AI原生应用引擎按需计费资源。 步骤一:创建微调数据集 数据集是模型微调的基础,AI原生应用引擎统一纳管训练模型的数据集,将分散的数据进行集中式管理,从而节省了数据收集和管理的成本。 在AI原生应用引擎的左侧导航栏选择“知识中心 > 微调数据集”。 在“微调数据集”页面,单击右上角“创建微调数据集”。
大模型微调需要的数据有要求吗? AI原生应用引擎用于大模型微调的数据集任务领域为“自然语言处理”、数据集格式为“对话文本”。 文件内容要求为标准json数组,例如: [{"instruction": "aaa", "input": "aaa", "output": "aaa"},{"instruction":
购买AppStage并关联组织 购买AppStage 为AppStage关联组织
购买AppStage并关联组织 购买AppStage 为AppStage关联组织