检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
创建作业 在左侧菜单栏中,单击“数据合规”。 选择“数据脱敏 > 作业总览”页签,单击“创建作业”。 完成创建作业任务信息。 图1 创建作业 处理算子:根据需要选择脱敏算子。 资源规格:当前项目中可用的资源规格,资源配置需要平台管理员在集群纳管中创建。 优先级:设定任务的优先级,数值取[-50
访问密钥ID(AK)和私有访问密钥(SK),在导入数据时,通过AK识别访问用户的身份,通过SK对请求数据进行签名验证,用于确保请求的机密性、完整性和请求者身份的正确性。如何获取访问密钥AK/SK? 输入的访问密钥和私有访问密钥需要具有OBS服务如下权限: obs:object:GetObject obs:object:PutObject
查看审计日志 在您开启了云审计服务后,系统会记录Octopus的相关操作,且控制台保存最近7天的操作记录。本节介绍如何在云审计服务管理控制台查看最近7天的操作记录。 操作步骤 登录云审计服务管理控制台。 在管理控制台左上角单击图标,选择区域。 在左侧导航栏中,单击“事件列表”,进入“事件列表”页面。
1(未解析) 2(已完成) 3(解析失败) 4(未回放处理) 5(回放处理失败) processor_job_ids Array of longs 数据包处理作业id processor_ids Array of longs 数据包处理算子id 表7 PageInfo 参数 参数类型 描述
自动驾驶数据管理存储扩容包 使用对象存储服务(OBS)存储数据和模型,产生的费用。 通用处理节点 octopus计算型CPU(16u32g)专属实例 增强计算性能,产生的费用。 octopus计算型CPU(64u128g)专属实例 AI处理节点 octopus计算型GPU(ant0324g24u96g)专属实例
除”。 确认后单击“确认删除”,删除后的数据包将放入回收站。 图1 删除数据包 查看数据包状态。 单击“回收站”,删除后的数据包状态为“待处理”,此状态下的数据包还可进行以下操作: 还原 :恢复该数据包,参考步骤3。 永久删除:该数据包及关联的任务将会被Octopus平台永久删除,参考步骤4。
导入ID:单击导入ID,页面跳转至导入任务详情。 数据包详情 数据目录、数据类型、标定项ID、数据格式、数据量。 数据处理 可查看此数据包关联的数据处理作业,单击作业ID,可跳转至作业处理界面。 收集信息 车辆名称、标定ID、驾驶模式、采集站点、驾驶路线、采集时间、和总数据量以及各类传感器采集的数据量。
抽帧是将解压后的Rosbag数据,抽出单幅画面,生成图片数据或者视频数据。 自动驾驶汽车在进行测试时会产生大量数据,车企需要对这些数据高效处理与分析,因此在进行自动驾驶研究时需要对这些原始数据有选择性、针对性地进行提取和分析,抽帧便是一种筛选数据的方式。针对数据类型,Octopus将抽帧任务分为图片抽帧和点云抽帧。
到一个SimData的内存对象,用户通过访问对象中的字段即可获取自己关注的数据。 仿真pb包含仿真器输出的整个仿真过程数据,用户处理根据自身评测逻辑处理所有帧数据。 用户自定义的评测指标包含通过,不通过等结果,将该结果写入到eva.proto中的Evaluation类中,然后通过
创建OBS桶。例如,创建名称为“xxxx”的OBS桶。 创建桶的区域需要与Octopus云服务所在的区域一致。如何查看OBS桶与Octopus云服务的所处区域,请参见如何查看Octopus与OBS桶是否在同一区域?。 在桶列表页面,单击桶名称,进入该桶的概览页面。 图2 桶列表
Boolean 是否选择所有数据包 priority Integer 数据包处理任务优先级 opendata_processor_config DataProcessorConfig object 转opendata处理任务 desensitize_processor_config DataProcessorConfig
的重复购买。 合规服务依赖数据服务,在购买合规云服务-基础版前,需先购买数据云服务-基础版。 单击“下一步”,购买存储扩容包、通用处理节点和AI处理节点,请详见购买扩展资源包。 单击“下一步:确认配置”,并勾选“我已阅读并同意《八爪鱼自动驾驶云服务声明》”。 图3 确认配置 单击
Access Management,简称IAM),通过IAM,您可以: 根据企业用户的职能,设置不同的访问权限,以达到用户之间的权限隔离。 如果华为云账号已经能满足您的要求,不需要创建独立的IAM用户,您可以跳过本章节,不影响您使用Octopus服务的其它功能。 本章节为您介绍对用户授权的方法,操作流程图所示。
DataProcessorConfig object 转opendata处理任务 desensitize_processor_config 否 DataProcessorConfig object 脱敏处理任务 表4 DataProcessorConfig 参数 是否必选 参数类型
如果您需要对您所拥有的Octopus进行精细的权限管理,您可以使用统一身份认证服务(Identity and Access Management,简称IAM),如果华为云账号已经能满足您的要求,不需要创建独立的IAM用户,您可以跳过本章节,不影响您使用Octopus服务的其它功能。 默认情况下,新建的IAM
套餐包:一种预付费模式,即先付费再使用,您可以根据实际需求购买套餐包获取更多的优惠。 按需计费:一种后付费模式,即先使用再付费,按照实际使用次数、处理数据量进行结算。 表1 计费模式说明 计费模式 包年/包月 套餐包 按需计费 付费方式 预付费 预付费 后付费 计费周期 按订单的实际购买时长计费。
preprocessor object opendata转换算子信息(导入时未配置处理任务,此字段不返回) desensitization preprocessor object 脱敏算子信息(导入时未配置处理任务,此字段不返回) project String 采集项目信息 module
租户不可见域名:指华为云服务在内网相互调用使用的域名,外部用户无法访问到对应的权威DNS服务器;或者Internet受限访问域名,只允许华为办公网络黄&绿区华为员工及合作方或外包人员访问的域名。 华为云基础域名安全使用,避免直接为租户分配基础域名。 华为云服务在内网互相调用使用的域名,避免使用外部已备案域名。
文件名排序 枚举值: asc(升序) desc(降序) data_process_task_ids 否 Array of strings 数据处理任务id列表 数组长度:0 - 5 raw_data_ids 否 Array of strings 数据包ids 数组长度:0 - 5 start_time
单击仿真场景名称,页面自动跳转至“数据资产 > 通用存储 >目录名称(创建作业时选择的)> 数据处理任务”,在此可对其进行查看和删除等操作。详情请参考通用存储详情。 图7 数据处理任务 如果该场景片段需要重新生成仿真场景,则需在仿真服务模块删除该场景片段生成的仿真场景。 配置了