检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
创建数据包导入任务 功能介绍 创建数据包导入任务 URI POST /v1.0/{project_id}/data/import-records 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目id,获取方法请参见获取项目ID 请求参数
数据导入 对象存储导入数据 把原始数据上传至平台前,可将数据包上传至对象存储中,从对象存储导入平台。操作步骤如下: 在左侧菜单栏中,选择“数据处理 > 数据批导”。 在“数据导入”页签单击“导入”,填写具体信息。 选择目标数据包所在的对象存储路径,平台将自动扫描该目录下所有子目录
平台对接数据格式有哪些要求? 上传数据格式 转换后数据格式 消息topic格式规范 消息topic格式示例 父主题: 数据服务常见问题
数据导入 表1 数据导入权限 权限 对应API接口 授权项(Action) IAM项目 (Project) 企业项目 (Enterprise Project) 获取导入任务列表 GET /v1.0/{project_id}/data/import-records octopus:
数据导入 获取导入任务列表 创建数据包导入任务 获取导入任务详情 删除导入任务 启动数据导入任务 父主题: API
数据批导简介 在使用平台进行自动驾驶开发时,首先需要用户把原始数据上传至Octopus平台,即数据上云。下文介绍了通过对象存储导入数据的方式,帮助用户把车载平台输出的数据上传至Octopus平台上。 对象存储导入数据:用户需先将数据包上传至对象存储桶(可自定义)中,再导入到Octopu
数据包详情。 删除数据包 单击图片下侧的“删除”,可删除数据包。 数据包详情 在左侧菜单栏中,选择“数据资产 > 源数据包”。 选择“数据包”页签,在列表视图时单击指定数据包“操作”栏内的“详情”,进入数据包详情页面。 表2 数据包详情列表 区域 说明 数据包信息 包含数据包名称
启动数据导入任务 功能介绍 启动数据导入任务 URI POST /v1.0/{project_id}/data/import-records/{id}/import 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目id,获取方法请参见获取项目ID
原始数据采集完毕之后,需要将原始数据转换成适合Octopus平台的数据格式,以便于更快速地完成数据处理。 创建数据导入任务 在左侧菜单栏中,单击“数据处理 > 数据批导”。 选择“数据导入”页签,单击“导入”。 选择“对象存储导入”页签,填写具体信息。 选择目标数据包所在的对象存储路径,平台将自动扫描该目录下所有子
描述 status String 导入任务状态 total_num Long 导入数据包总数量 success_num Long 导入数据包成功数 failed_num Long 导入数据包失败数 importing_num Long 正在导入数据包数量 表7 DataCollectionImportConfig
注册华为账号并开通华为云 在使用华为云服务之前您需要申请华为云账号并进行实名认证。通过此账号,您可以使用所有华为云服务,并且只需为您所使用的服务付费。 如果您已有一个华为云账号,请跳到下一个任务。如果您还没有华为云账号,请参考以下步骤创建。 打开华为云官网,单击“注册”。 根据提
pb 红绿灯。 使用场景 Octopus平台接收到原始数据(Rosbag包)后,将对数据进行解包、轨迹和接管分析等操作,用于数据总览、数据场景、数据回放、标注服务等模块,请用户结合实际需求,准备好相应模块所需数据。 Octopus平台转换后的OpenData数据服务模块所需数据请见下表:
在使用Octopus平台收集数据前,请仔细阅读本章节,确保上传数据格式符合平台要求,有助于用户更快速地完成数据收集以及数据格式转换。 上传数据格式:单包上传大小小于200GB。 转换后数据格式:OpenData格式。 使用场景 Octopus平台接收数据包(数据包至少需在一层文件夹
yaml配置文件)。 使用场景 Octopus平台接收Rosbag格式数据包,没有转换OpenData格式时,可用于算子作业输入。 命名规范 用户可将多个数据包存放在同个一级目录下,作为同一批次采集数据上传至Octopus平台。 一级目录的结构可根据业务情况自定义数据包名称,示例参考如下: . ├─
在使用Octopus平台收集数据前,请仔细阅读本章节,确保上传数据格式符合平台要求,有助于用户更快速地完成数据收集以及数据格式转换。 上传数据格式:单包上传大小小于200GB。 转换后数据格式:OpenData格式。 使用场景 Octopus平台接收数据包(数据包至少需在一层文件夹
删除导入任务 功能介绍 删除导入任务 URI DELETE /v1.0/{project_id}/data/import-records/{id} 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目id,获取方法请参见获取项目ID id 是
id 否 String 模糊查询:导入任务ID 最大长度:255 start_at 否 Long 最小导入时间,UTC标准时间毫秒时间戳 最小值:1000000000000 最大值:2000000000000 end_at 否 Long 最大导入时间,UTC标准时间毫秒时间戳 最小值:1000000000000
导入标签 功能介绍 导入标签 URI POST /v1.0/{project_id}/data/tags/import 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目id,获取方法请参见获取项目ID 请求参数 表2 请求Header参数
获取标签导入模板 功能介绍 获取标签导入模板文件 URI GET /v1.0/{project_id}/data/tags/template 表1 路径参数 参数 是否必选 参数类型 描述 project_id 是 String 项目id,获取方法请参见获取项目ID 请求参数 表2
单击“确认”新建一个数据合规订单并查看订单号。 上传数据包 获取传输配置。 在订单的“操作”列单击“获取传输配置”,获取传输配置,包括目标桶、导入目录、访问密钥 (AK)和私有访问密钥 (SK)。 准备待脱敏的数据包。 图商采集的数据在上传至八爪鱼平台前,需要对数据包中的文件夹梳理,便于脱敏识别,目录