-
预训练 - AI开发平台ModelArts
预训练 预训练数据处理 预训练任务 断点续训练 查看日志和性能 父主题: GLM3-6B基于DevServer适配PyTorch NPU训练指导(6.3.904)
-
主流开源大模型基于DevServer适配PyTorch NPU推理指导(6.3.905) - AI开发平台ModelArts
主流开源大模型基于DevServer适配PyTorch NPU推理指导(6.3.905) 推理场景介绍 部署推理服务 推理性能测试 推理精度测试 附录:大模型推理常见问题 父主题: LLM大语言模型
-
主流开源大模型基于DevServer适配PyTorch NPU推理指导(6.3.904) - AI开发平台ModelArts
主流开源大模型基于DevServer适配PyTorch NPU推理指导(6.3.904) 推理场景介绍 部署推理服务 推理性能测试 推理精度测试 父主题: LLM大语言模型
-
PyTorch迁移性能调优 - AI开发平台ModelArts
PyTorch迁移性能调优 性能调优总体原则和思路 自动诊断工具MA-Advisor使用指导 性能调优五板斧 训练profiling工具使用 优化算子下发 优化算子执行 父主题: 训练业务昇腾迁移通用指导
-
主流开源大模型基于DevServer适配PyTorch NPU训练指导(6.3.905) - AI开发平台ModelArts
主流开源大模型基于DevServer适配PyTorch NPU训练指导(6.3.905) 场景介绍 准备工作 预训练任务 SFT全参微调训练任务 LoRA微调训练 查看日志和性能 训练脚本说明 父主题: LLM大语言模型
-
专属资源池训练 - AI开发平台ModelArts
专属资源池训练 资源选择推荐 步骤总览 资源购买 基本配置 调试与训练 FAQ
-
基本配置 - AI开发平台ModelArts
基本配置 权限配置 创建网络 专属资源池VPC打通 ECS服务器挂载SFS Turbo存储 在ECS中创建ma-user和ma-group obsutil安装和配置 (可选)工作空间配置 父主题: 专属资源池训练
-
FAQ - AI开发平台ModelArts
FAQ CUDA和CUDNN CloudShell调试方法 run.sh脚本测试ModelArts训练整体流程 ModelArts环境挂载目录说明 如何查看训练环境变量 infiniband驱动的安装 Tensorboard的使用 如何保证训练和调试时文件路径保持一致 父主题: 专属资源池训练
-
常见问题 - AI开发平台ModelArts
常见问题 模型转换失败怎么办? 图片大Shape性能劣化严重怎么办? 同样功能的PyTorch Pipeline,因为指导要求适配onnx pipeline,两个pipeline本身功能就有差别,如何适配? AOE的自动性能调优使用上完全没有效果怎么办? 迁移后应用出图效果相比GPU无法对齐怎么办
-
ML Studio快速入门 - AI开发平台ModelArts
ML Studio快速入门 背景信息 使用MLS预置算链进行机器学习建模 从0到1利用ML Studio进行机器学习建模 父主题: ML Studio
-
输入 - AI开发平台ModelArts
输入 读取DLI表 读取数据 读取模型 从OBS读取CSV数据 从OBS读取模型 读取parquet数据 读取文本数据 读CSV文件 父主题: 输入输出
-
特征工程 - AI开发平台ModelArts
特征工程 二值化 卡方选择 派生 特征转换 FP-growth 最小最大规范化 正则化 独热编码 主成分分析 离散化 标准化 字符串标签化 奇异值分解 过滤式特征选择 线性特征重要性 特征尺度变换 特征异常检测 特征异常平滑 gbdt编码模型训练 gbdt编码模型应用 父主题: 数据特征
-
模型工程 - AI开发平台ModelArts
模型工程 分类 聚类 评估 推荐 回归 文本 时间序列 父主题: 预置算子说明
-
分类 - AI开发平台ModelArts
分类 决策树分类 梯度提升树分类 LightGBM分类 线性支持向量机分类 逻辑回归分类 多层感知机分类 朴素贝叶斯分类 随机森林分类 FM算法 GBDT PMML模型预测 多层感知机分类(pytorch) 多层感知机预测(PyTorch) 父主题: 模型工程
-
Notebook中的数据上传下载 - AI开发平台ModelArts
Notebook中的数据上传下载 上传文件至JupyterLab 从JupyterLab下载文件至本地 父主题: JupyterLab
-
时间序列 - AI开发平台ModelArts
时间序列 ARIMA Auto ARIMA 父主题: 模型工程
-
PyCharm Toolkit提交训练作业 - AI开发平台ModelArts
PyCharm Toolkit提交训练作业 提交训练作业 停止训练作业 查看训练日志 父主题: 本地IDE(PyCharm)
-
上传本地文件至JupyterLab - AI开发平台ModelArts
上传本地文件至JupyterLab 上传场景和入口介绍 上传本地小文件(100MB以内)至JupyterLab 上传本地大文件(100MB~5GB)至JupyterLab 上传本地超大文件(5GB以上)至JupyterLab 父主题: 上传文件至JupyterLab
-
GPU A系列裸金属服务器无法获取显卡问题解决方法 - AI开发平台ModelArts
GPU A系列裸金属服务器无法获取显卡问题解决方法 问题现象 在A系列裸金属服务器上使用PyTorch一段时间后,出现获取显卡失败的现象,报错如下: > torch.cuda.is_available() /usr/local/lib/python3.8/dist-package
-
Step3 创建开发环境并使用 - AI开发平台ModelArts
Step3 创建开发环境并使用 创建开发环境 镜像注册成功后,即可在ModelArts控制台的“开发环境 > Notebook”页面,创建开发环境时选择该自定义镜像。 打开开发环境。 图1 打开开发环境 单击图中的MindSpore,即可创建一个ipynb文件,导入mindspore,可以看到安装的mindspore