检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
物联网数据的数据体量大、价值密度小、数据时效性高、质量低。针对物联网数据的这些特点,在海量历史数据中提供近实时的高效探索分析能力,及时发现物联网数据中的隐含规律则显得尤为重要。IoT数据分析服务的时序分析,提供基于模型驱动的海量历史数据时序分析洞察能力,让物联网数据的规律清晰可见。
周期: 15min; 流计算类分析任务是指,以资产模型中的属性作为输入、调用IoT数据分析服务的实时分析作业进行计算、输出结果返回到资产模型的属性值,数据流示意图如下。 资产(Asset) 资产是指物理世界中需要被管理的、具有唯一标识的事物或业务对象,如一个资产可以对应一个物理设备(如
并行数: 配置项英文名:parallelism 说明: 并行数,指定算子执行时的并行任务个数。对于性能要求越高的算子,可以设置较高的并行数,但是占用资源越多。如果此参数不设置,那么作业运行时本算子使用作业的并行数设置。 类型: INTEGER 必选: 否 约束: 最小值1, 最大值
是“与”或“或”的关系。当需要按单条数据本身的字段取值来决定是否过滤数据时使用本算子。 数据扁平 把数据流中的嵌套Json字段转换为多个独立字段。如果测点类型是Object,那么是一个嵌套结构,需要把结构中的每个字段提取出来,成为数据流中的独立字段,这样数据流的所有字段都是字符串、数字等简单数据类型。
ion) = ∑[产出数量 * 一个产品在设备应有状态下加工的周期时间)] / ∑实际运行时间 * 100% 用来评价生产速度上的损失。包括任何导致生产不能以最大速度运行的因素,例如设备的磨损,材料的不合格以及操作人员的失误等 合格率 (qualificationRatio) =
在IoT数据分析服务时序分析功能中,核心功能之一就是图形化方式查看资产数据、或者设备数据的历史曲线。以查看资产数据历史曲线为例,在时序探索导航栏中选择“资产时序探索”页签,然后选择您所关注的资产属性,在图标分析区中选择“原始数据”,即可展示出资产属性数据的历史曲线,如下图所示。 图1 选择原始数据、查看历史数据曲线
在数据存储中下拉选择“Printing”存储名称,勾选所有导入的属性,然后单击“确定”保存。 导入后效果如下 通过存储导入的设备属性类型为:“测量数据”,此时模型还不完整,需要增加静态类型和分析类型的属性,同时还要为分析类型的属性配置相应该的分析任务,比如本例子中,我们通过分析任务定义各种O
允许固定时间延迟的分配器,适用于乱序但预先知道或只允许在流中将会遇到的最大延迟的场景。 AscendingTimestampExtractor:递增时间戳的分配器,适用于每个元素(elements)的时间在每个并行任务(parallel task)里是单调递增的场景。 IngestionTimeExtractor:
pipelineId 管道任务id,必须模板默认值,用户不能修改。 是 rtaOutputName RTA 的数据名称,必须模板默认值,用户不能修改。 是 body 输入数据,必须包含算子配置的“参数名称”。例如input中包含“integer”字段。 是 eventTime 时间戳字段,Long类型,用户可自定义数值。
> 用户指南> 数据管道> 创建数据管道”配置管道。 3、IoTDA 实时数据源中未配置对应的产品,请勾选对应的产品,并点击确定保存。 4、数据管道中未配置对应的产品过滤算子,请添加“产品过滤”算子以及“数据存储输出”算子。 5、设备未上报数据,请检查设备是否成功上报数据。 父主题:
删除实时作业 功能介绍 删除用户指定的作业 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。API Explorer可以自动生成SDK代码示例,并提供SDK代码示例调试功能。 URI DELETE /v1/{project_id}/streaming/jobs/{job_id}
别用于处理这两种设备上报的数据。 这两个分支各自以一个“产品过滤”算子作为起始点,分别过滤出这两种设备的数据,以便于后续处理流程仅处理某一种产品的数据,如图所示。 系统还自动根据这两种设备的产品信息(该产品信息以安全的方式从IoTDA获取),生成了默认的输出配置。 请用户自行选择
删除管道作业 功能介绍 删除用户指定的管道作业 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。API Explorer可以自动生成SDK代码示例,并提供SDK代码示例调试功能。 URI DELETE /v1/{project_id}/pipelines/{pipeline_id}
允许固定时间延迟的分配器,适用于乱序但预先知道或只允许在流中将会遇到的最大延迟的场景。 AscendingTimestampExtractor:递增时间戳的分配器,适用于每个元素(elements)的时间在每个并行任务(parallel task)里是单调递增的场景。 IngestionTimeExtractor:
filters 否 String 查询标签的值的过滤条件,例如: {"deviceCategory": "class1"},注意特殊字符需要 urlencode 最小长度:0 最大长度:1024 offset 否 Integer 查询起始元素的偏移 最小值:0 最大值:2000 缺省值:0
并行数: 配置项英文名:parallelism 说明:并行数,指定算子执行时的并行任务个数。对于性能要求越高的算子,可以设置较高的并行数,但是占用资源越多。如果此参数不设置,那么作业运行时本算子使用作业的并行数设置。 类型:INTEGER 必选:否 约束:最小值1, 最大值 1024。
停止实时作业 功能介绍 停止一个正在运行中的作业 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。API Explorer可以自动生成SDK代码示例,并提供SDK代码示例调试功能。 URI POST /v1/{project_id}/streaming/jobs/{job_id}/stop
启动管道作业 功能介绍 提交管道作业到运行环境,实时接收数据源的数据并按用户定义的数据清洗逻辑对数据进行处理。 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。API Explorer可以自动生成SDK代码示例,并提供SDK代码示例调试功能。 URI POST
对property按指定tags标签进行过滤查询,填入资产标签属性的属性名与属性值,不可为空,例如 {"tagPropertyA": "id0001"};注意,标签过滤只对打上标签时刻之后的数据生效,打标签之前的数据不能通过标签过滤 property_filter 否 Array
表2 Query参数 参数 是否必选 参数类型 描述 parallel 否 Integer 运行作业的并发度 最小值:0 最大值:1000 rtu 否 Integer 运行作业的RTU个数 最小值:2 最大值:3 resume_savepoint 否 Boolean 运行作业使用历史缓存数据