检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
服务控制台总览 数据分析服务控制台总览页为您提供数据分析流程介绍以及业务资源使用情况总览。 可以通过资产模型使用量、数据存储量和计算单元使用量,监控当前业务资源的使用情况。 流程介绍 图1 流程介绍 配置数据源 数据分析服务会将数据源的数据存储并进行后续分析。点击图标即可进入数据源配置界面
为什么有些作业启动时需要选择计算资源但有些作业不需要? 为了节约用户成本,在启动作业时,系统自行对作业的复杂度进行了检查,如果作业仅包含“IoT设备接入数据源”、“产品过滤 ”、“数据存储输出”3种算子时,不需要单独的计算资源。 父主题: 管道作业常见问题
数据模板 表1 IoT设备接入数据源 数据模板 字段名 字段说明 是否必填 { "header": { "projectId": "080dd91ecc8026bxxxxxx1be5f9d68d", "dataSourceId": "0b0c2bf036a5xxxxxxc8d2ed602d401f
启动管道作业 功能介绍 提交管道作业到运行环境,实时接收数据源的数据并按用户定义的数据清洗逻辑对数据进行处理。 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。API Explorer可以自动生成SDK代码示例,并提供SDK代码示例调试功能。 URI POST
数据过滤 算子简介 名称:数据过滤 功能说明:根据设置的条件过滤数据,满足条件的数据则输出,不满足条件的数据将被丢弃。 约束:下游不允许对接数据源及产品过滤算子。 算子配置 基础配置项 算子名称: 配置项英文名:name 说明:算子名称,对算子进行个性化的命名,以辅助增加可读性。支持中文
数据聚合 算子简介 名称: 数据聚合 功能说明: 数据聚合算子,将数据按窗口周期进行汇聚计算,以达到规约数据的目的。 约束:下游不允许对接数据源及产品过滤算子。 算子配置 基础配置项 算子名称: 配置项英文名:name 说明: 算子名称,对算子进行个性化的命名,以辅助增加可读性。支持中文
DIS输出 算子简介 名称: DIS输出,IoT数据分析服务仅在华为云部署形态支持DIS数据源 功能说明: 数据输出到DIS云服务。 约束:下游不允许接任何算子。 算子配置 基础配置项 算子名称: 配置项英文名:name 说明: 算子名称,对算子进行个性化的命名,以辅助增加可读性。
调试概述 为什么管道任务没能输出期望的结果? 管道任务中哪个算子环节出错了? 算子处理后的数据结果是什么样的? 以上问题是我们在开发阶段经常遇到的问题。为了解决以上问题,我们提供了调试数据管道工具。用户可以上报测试数据对管道业务流程进行测试,用户可直观查看测试数据在每个算子输入和输出的内容
选择属性 算子简介 名称:选择属性 功能说明:在输入数据中选择保留的属性,未选择的属性被删除。 约束:下游不允许对接数据源及产品过滤算子。 算子配置 基础配置项 算子名称: 配置项英文名:name 说明:算子名称,对算子进行个性化的命名,以辅助增加可读性。支持中文、英文、数字、中划线
数据扁平 算子简介 名称:数据扁平 功能说明:数据扁平算子,把数据流中的嵌套Json字段转换为多个独立字段。 约束:下游不允许对接数据源及产品过滤算子。 算子配置 基础配置项 算子名称: 配置项英文名:name 说明:算子名称,对算子进行个性化的命名,以辅助增加可读性。支持中文、英文
删除属性 算子简介 名称:删除属性 功能说明:从数据中删除指定的属性。 约束:下游不允许对接数据源及产品过滤算子。 算子配置 基础配置项 算子名称: 配置项英文名:name 说明:算子名称,对算子进行个性化的命名,以辅助增加可读性。支持中文、英文、数字、中划线、下划线,长度小于等于
超时插补 算子简介 名称: 超时插补 功能说明: 提供基于时间的数据插补功能。时间支持延迟等待时长,以及指定固定时间点。插补数据为上一条实际数据,但是事件时间为插补计算出的时间。 约束: 下游不允许对接数据源及产品过滤算子。 算子配置 基础配置项 算子名称: 配置项英文名:name
数据计算 算子简介 名称:数据计算 功能说明:按照表达式进行数值计算,计算的结果赋值给某个属性。举例:原消息中有温度属性,其数值是以摄氏度数值表示,可以通过本算子设置计算公式,将摄氏温度计算转换成华氏度读数再赋予给原来的温度属性,或者可以选择将计算转换后的数值赋予一个新属性。 约束
调试概述 为什么实时分析任务没能输出期望的结果? 实时分析任务中哪个算子环节出错了? 算子处理后的数据结果是什么样的? 以上问题是我们在开发阶段经常遇到的问题。为了解决以上问题,我们提供了调试实时分析工具。用户可以上报测试数据对实时分析业务流程进行测试,用户可直观查看测试数据在每个算子输入和输出的内容
创建数据管道 使用IoTDA数据源 使用DIS数据源 其他数据源的使用 父主题: 数据管道
输入类算子 IoT设备接入数据源 DIS数据源 API数据源 父主题: 算子使用指南
IoT数据分析服务操作与资源权限关系 下表 列出了IoT数据分析服务常用操作与资源权限的授权关系,您可以参照该表选择合适的系统权限。 表1 IoT数据分析服务操作与资源权限关系 操作名称 Tenant Administrator Tenant Guest IoTA FullAccess
界面介绍 启动按钮 启动调试任务 任务状态栏 查看任务状态。 状态说明 状态名称 描述 就绪 任务完成编辑后,无错误配置,等待启动。 提交中 任务提交后台服务中,此时任务处于初始化中,无法处理上报的测试数据 运行中 任务已完成初始化,等待或正在处理上报测试数据,除当任务异常或人为停止
设备有上报数据但IoTA资产监控视图数据未刷新 问题现象:设备有上报数据,但IoTA监控视图数据未刷新 处理步骤: 检查设备数据是否已到达IoTDA服务 所有设备数据是先上报到IoTDA服务,再流转到IoTA。 在IoTDA Console中查看设备是否有上报消息,点击导航树中“所有设备
支持云审计的关键操作 操作场景 平台提供了云审计服务。通过云审计服务,您可以记录与云服务器相关的操作事件,便于日后的查询、审计和回溯。 前提条件 已开通云审计服务。 支持审计的关键操作列表 表1 数据源支持审计的关键操作列表 操作名称 资源类型 事件名称 创建数据源 datasource