检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
AI原生应用引擎支持所有数据集进行数据标注吗? 进行标注的数据集必须同时满足用途为“模型训练”、任务领域为“自然语言处理”、任务子领域为“文本生成”、数据集格式为“对话文本”四个条件。 父主题: AI原生应用引擎
汇聚任务汇聚 应用平台支持多种数据类型的汇聚,具体操作请参见将数据汇聚至MPPDB表。 父主题: 基于运维数仓的数据开发与应用
创建微调数据集 对于需要个性化定制模型或者在特定任务上追求更高性能表现的场景,往往需要对大语言模型进行模型微调以适应特定任务。微调数据集是模型微调的基础,通过在微调数据集上进行训练从而获得改进后的新模型。
创建知识数据集 功能介绍 该接口用于创建知识数据集,可将原始文档按照一定规则进行处理,用于后续生成知识库。 调用方法 请参见如何调用API。
对微调数据集进行数据标注 数据标注是将微调数据集中的某些元素进行标记或分类,以便模型可以更好地理解和使用这些数据。例如,在自动驾驶的应用中,云数据可以被标注为包含建筑物、其他小物体、交通工具等信息,以便模型可以识别和理解这些对象。
数据表 - 单击“新增”,选择逻辑主体使用的数据表。 选择数据表时需要设置“将所有字段添加至逻辑主体”,如果设置为是,会同步将数据表字段添加到字段列表中;设置为否,列表显示已添加的字段,需要在“数据表字段”列选择数据表字段,将逻辑主体字段与数据表字段关联起来。
数据接入 虚拟机日志接入 容器日志接入 父主题: 基于运维数仓的数据开发与应用
单击数据集列表操作列的“取消收藏”,可以取消收藏。 单击数据集列表中的数据集名称,可以便捷地查看数据集详情,包括基本信息、调度信息及版本记录。 父主题: 基于微调数据集进行模型微调
数据接入 数据来源 选择数据集的数据来源。支持以下两种来源: 本地上传:数据文件在本地,从本地选择文件进行上传。 OBS接入:数据文件存放在华为云OBS桶,从OBS桶接入数据。 说明: 仅支持使用区域位置为北京四的OBS桶接入数据。
数据应用 使用报表对业务进行实时监控 通过日志检索进行问题定位 通过异常检测上报告警 配置虚拟机异常告警 父主题: 基于运维数仓的数据开发与应用
获取方式: 1.创建知识数据集接口返回值即为知识数据集id。
删除知识数据集 功能介绍 该接口用于根据数据集id删除知识数据集。 调用方法 请参见如何调用API。
选择左侧导航栏的“运维数据开发 > 数据开发”,进入“数据开发”页面。 单击“数据治理 > 数据血缘”,在数据血缘页面查看具有数据血缘、关系及数量等信息。 父主题: 开发并管理数据
数据导流 接入的日志数据存在于对应的Topic中,需要创建导流任务,将数据存储在对应的数据库中进行管理和后续开发。 创建导流任务 以ClickHouse数据库为例,介绍如何创建导流任务将数据存储在ClickHouse数据库,创建前需要先新建ClickHouse表。
接入运营数据 在运营中心新建数据源 新建数据接入将源端数据迁移到运营中心
导流数据至数据表 监控服务已接入的数据,会保存在已创建或者系统自动创建的Kafka的Topic中,需要创建导流任务,将数据导流至ClickHouse或Influxdb数据表中。 将数据导流至ClickHouse/Influxdb表 进入AppStage运维中心。
执行知识数据集 功能介绍 该接口用于根据知识数据集id,触发知识数据集的调度执行,调度执行完毕,数据集的内容将被更新。该接口仅在数据来源为OBS接入有效。 调用方法 请参见如何调用API。
在WiseDBA中采集数据库元数据 数据采集功能用于定期采集数据库元数据,如数据库名、表名、数据量、占用空间等,采集到的元数据保存到WiseDBA中,便于用户在实时诊断功能中查看数据库空间使用情况。 使用须知 RDS for PostgreSQL数据库不支持数据采集。
在WiseDBA中采集数据库元数据 数据采集功能用于定期采集数据库元数据,如数据库名、表名、数据量、占用空间等,采集到的元数据保存到WiseDBA中,便于用户在实时诊断功能中查看数据库空间使用情况。 使用须知 RDS for PostgreSQL数据库不支持数据采集。
新建数据接入将源端数据迁移到运营中心 运营中心提供OBS数据接入、MySql数据接入能力,通过与数据源连接,可以建立数据源中数据表的迁移任务,将源端数据迁移到运营中心,为后续业务做数据准备。