检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
或冻结状态。 Step1 创建OBS桶和文件夹 在OBS服务中创建桶和文件夹,用于存放样例数据集以及训练代码。需要创建的文件夹列表如表1所示,示例中的桶名称“test-modelarts” 和文件夹名称均为举例,请替换为用户自定义的名称。 创建OBS桶和文件夹的操作指导请参见创建桶和新建文件夹。
或冻结状态。 Step1 创建OBS桶和文件夹 在OBS服务中创建桶和文件夹,用于存放样例数据集以及训练代码。需要创建的文件夹列表如表1所示,示例中的桶名称“test-modelarts” 和文件夹名称均为举例,请替换为用户自定义的名称。 创建OBS桶和文件夹的操作指导请参见创建桶和新建文件夹。
资源管理模块 获取模型路径 获得技能工作区目录 获得技能配置 从OBS下载文件 计算文件的md5值 示例-资源管理
准备工作 注册华为帐号并开通华为云 获取访问密钥并添加RES全局配置 创建OBS桶 开通相关资源 父主题: 用户指南(旧版)
事件目标 路由到函数工作流 路由到分布式消息服务Kafka版 路由到对象存储服务OBS 父主题: 事件流
String 脏数据要写入的连接,目前只支持写入到OBS连接或HDFS连接。例如:“obslink”。 throttlingConfig.obsBucket 否 String 写入脏数据的OBS桶的名称,只有当脏数据要写入OBS连接的时候,此参数才生效。例如:“dirtyData”。
计费项分为包含服务和关联服务两类。 包含服务: 专属主机服务,用户需要为专属主机DeH对应物理服务器上的所有资源付费,包括CPU、内存以及本地盘。 专属主机服务费用详情请参见产品价格详情。 专属弹性云服务器,您可以在专属主机中创建指定规格的专属弹性云服务器,专属弹性云服务器免费,但关联的IP、带宽等需要单独收费。
converting-video-resolution video_input_bucket string 必填 对象存储服务 OBS桶名称前缀,命名格式为{video_input_bucket}-obs,用于上传视频文件,全局唯一。取值范围:1~59个字符,以小写字母或数字开头,仅支持小写字母、数字、中划线(-)、英文句号(
Hive企业级能力增强 配置Hive表不同分区分别存储至OBS和HDFS 配置Hive目录旧数据自动移除至回收站 配置Hive插入数据到不存在的目录中 配置创建Hive内部表时不能指定Location 配置用户在具有读和执行权限的目录中创建外表 配置基于HTTPS/HTTP协议的REST接口
我的云商店 > 退订管理页面退订人工服务类、License类、涉及服务监管的SaaS类商品,操作指导请参见退订人工服务类、License类、涉及服务监管的SaaS类和应用编排类商品;在费用中心 > 订单管理 > 退订与退换货页面退订不涉及服务监管的SaaS类和镜像类商品,操作指导请参见退订资源实例。
json文件中配置。当业务可提供正常服务时,健康检查接口返回健康状态,否则返回异常状态。 如果要实现无损滚动升级,必须配置健康检查接口。 自定义镜像如果需要在“在线服务”模块使用OBS外部存储挂载功能,需要新建一个OBS挂载专属目录如“/obs-mount/”,避免选择存量目录覆盖已有文件。OBS挂载仅开放
接入CDN后,客户端访问时浏览器提示跨域异常 跨域配置不当。 源站是OBS桶,配置CDN加速后,加速域名访问是下载,不是在线展示 OBS的默认规则导致,您需要前往CDN控制台的“域名管理”-高级配置-添加“Content-Disposition”响应头,取值为“inline”。 OBS桶接入CDN后,访问域名会列出所有文件列表
导入模型后部署服务,提示磁盘不足 问题现象 用户在导入模型后,部署服务时,提示磁盘空间不足:“No space left on device”。 原因分析 ModelArts部署使用的是容器化部署,容器运行时有空间大小限制,当用户的模型文件或者其他自定义文件,系统文件超过Docker
将操作系统迁移至HCE 1.1 约束限制 迁移操作 父主题: 系统迁移
Console 实例管理 任务管理 服务授权管理 OBS管理 接入管理 规格管理 配额管理服务 标签管理服务 委托管理 元数据事件管理 Location 父主题: API
参数 参数类型 描述 store_type String 存储方式: OBS - OBS桶存储。 LINK - 外部存储,使用的可访问下载链接。 bucket_store BucketStore object OBS桶存储。 file_link String 文件下载完整路径。 表7
华为云FunctionGraph 华为云FunctionGraph插件是Serverless产品的IDE插件,提供函数本地调试、运行、云端部署等功能。当前插件已经上架VS Code IDE、华为云自研 CodeArts IDE (线上版本)的插件市场。与此同时,还提供有其他平台的离线包供您使用。
ZIP格式:解压后原始代码大小为1500M。 OBS桶:最大可上传300M压缩后的代码包。 前端页面展示代码大小 20MB 私有依赖包 直接上传ZIP文件:上传的文件大小限制为10M,如超过10M,请通过OBS上传。 从OBS上传文件:格式为OBS URL链接,文件必须为ZIP格式。 函数流
环境准备 准备Jenkins环境 上传代码到Gitlab代码仓库 安装obsutil工具 安装KooCLI工具 安装插件并配置Jenkins工具 父主题: Gitlab对接Jenkins自动构建并部署到CAE
SQL作业开发指南 使用Spark SQL作业分析OBS数据 在DataArts Studio开发DLI SQL作业 在Spark SQL作业中使用UDF 在Spark SQL作业中使用UDTF 在Spark SQL作业中使用UDAF