检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
可以通过资产模型使用量、数据存储量和计算单元使用量,监控当前业务资源的使用情况。 流程介绍 图1 流程介绍 配置数据源 数据分析服务会将数据源的数据存储并进行后续分析。点击图标即可进入数据源配置界面。 创建数据管道 数据管道是数据分析的基础功能,对进入数据分析的数据进行格式标准化、清洗等数据预
为什么有些作业启动时需要选择计算资源但有些作业不需要? 为了节约用户成本,在启动作业时,系统自行对作业的复杂度进行了检查,如果作业仅包含“IoT设备接入数据源”、“产品过滤 ”、“数据存储输出”3种算子时,不需要单独的计算资源。 父主题: 管道作业常见问题
数据模板 表1 IoT设备接入数据源 数据模板 字段名 字段说明 是否必填 { "header": { "projectId": "080dd91ecc8026bxxxxxx1be5f9d68d", "dataSourceId": "0b0c2bf036a5xxxxxxc8d2ed602d401f"
启动管道作业 功能介绍 提交管道作业到运行环境,实时接收数据源的数据并按用户定义的数据清洗逻辑对数据进行处理。 调试 您可以在API Explorer中调试该接口,支持自动认证鉴权。API Explorer可以自动生成SDK代码示例,并提供SDK代码示例调试功能。 URI POST
数据过滤 算子简介 名称:数据过滤 功能说明:根据设置的条件过滤数据,满足条件的数据则输出,不满足条件的数据将被丢弃。 约束:下游不允许对接数据源及产品过滤算子。 算子配置 基础配置项 算子名称: 配置项英文名:name 说明:算子名称,对算子进行个性化的命名,以辅助增加可读性。支持中
数据聚合 算子简介 名称: 数据聚合 功能说明: 数据聚合算子,将数据按窗口周期进行汇聚计算,以达到规约数据的目的。 约束:下游不允许对接数据源及产品过滤算子。 算子配置 基础配置项 算子名称: 配置项英文名:name 说明: 算子名称,对算子进行个性化的命名,以辅助增加可读性。支持
^[\u4E00-\u9FA5A-Za-z0-9_-]{1,64}$ 数据源ID: 配置项英文名:datasSourceId 说明: DIS数据源ID,此数据源必须在本服务被授权访问。 数据源ID可以通过数据源接口: /v1/${project_id}/datasources?type=DIS获取。
IoT设备接入数据源 API接入数据源 表1 算子支持表 算子类别 算子中文名称 算子英文名称 是否支持调试 是否展示输入数据 是否展示输出数据 输入类算子 IoT设备接入数据源 IoTDASource 是 否 是 API接入数据源 APISource 是 否 是 DIS数据源 DISSource
说明:扁平字段配置,配置需要进行扁平处理的字段列表。 必选: 是 子配置项:扁平字段配置包括如下子配置项:源数据路径、字段名称。 源数据路径: 配置项英文名:path 说明:源数据路径,以JSON Path格式来指定变量从消息中指定的JSON Path属性获取的取值。 类型:STRING
选择属性 算子简介 名称:选择属性 功能说明:在输入数据中选择保留的属性,未选择的属性被删除。 约束:下游不允许对接数据源及产品过滤算子。 算子配置 基础配置项 算子名称: 配置项英文名:name 说明:算子名称,对算子进行个性化的命名,以辅助增加可读性。支持中文、英文、数字、中划线、下划线,长度小于等于64个字符。
提供基于时间的数据插补功能。时间支持延迟等待时长,以及指定固定时间点。插补数据为上一条实际数据,但是事件时间为插补计算出的时间。 约束: 下游不允许对接数据源及产品过滤算子。 算子配置 基础配置项 算子名称: 配置项英文名:name 说明: 算子名称,对算子进行个性化的命名,以辅助增加可读性。支持
删除属性 算子简介 名称:删除属性 功能说明:从数据中删除指定的属性。 约束:下游不允许对接数据源及产品过滤算子。 算子配置 基础配置项 算子名称: 配置项英文名:name 说明:算子名称,对算子进行个性化的命名,以辅助增加可读性。支持中文、英文、数字、中划线、下划线,长度小于等于64个字符。
置计算公式,将摄氏温度计算转换成华氏度读数再赋予给原来的温度属性,或者可以选择将计算转换后的数值赋予一个新属性。 约束:下游不允许对接数据源及产品过滤算子。 算子配置 基础配置项 算子名称: 配置项英文名:name 说明:算子名称,对算子进行个性化的命名,以辅助增加可读性。支持中
资产数据输入(旧) 数据存储数据源(旧) 表1 算子类别 算子中文名称 算子英文名称 是否支持调试 是否展示输入数据 是否展示输出数据 输入算子 资产数据输入 AssetDataSource 是 否 是 AssetJobSource 是 否 是 数据存储数据源(旧) DataStoreSource
输入类算子 IoT设备接入数据源 DIS数据源 API数据源 父主题: 算子使用指南
创建数据管道 使用IoTDA数据源 使用DIS数据源 其他数据源的使用 父主题: 数据管道
查询设备属性最新状态值 √ √ √ √ 通过API数据源上报设备数据 √ x √ x 创建数据源 √ x √ x 删除数据源 √ x √ x 修改数据源 √ x √ x 查询数据源列表 √ √ √ √ 查询数据源详情 √ √ √ √ 验证数据源的连通性 √ √ √ √ 获取用户的访问权限 √
当任务异常或人为停止任务时,任务将停止处理测试数据。 停止 任务正常停止,可编辑。 输入输出 上报测试数据的控制页面。用户可在数据源类型选择对应数据源;下载对应数据源的测试数据模板文本并修改数据内容;最后上传测试数据文本。 数据监控 数据监控也是查看数据处理结果的查询页面。页面查看方式包括单算子查询和多算子查询。
确认配置。 检查 IoTDA 实时数据源中产品和设备信息是否正确 。 在IoTA Console控制台左侧导航树上,点击“数据源”,然后在右侧点击“IoTDA 实时数据源”,在下方的数据源中,点击右侧的“编辑”按钮,如下图所示: 打开数据源的配置页签,查看相关的产品是否已经勾选订
已开通云审计服务。 支持审计的关键操作列表 表1 数据源支持审计的关键操作列表 操作名称 资源类型 事件名称 创建数据源 datasource createDataSource 修改数据源 datasource updateDatasource 删除数据源 datasource deleteDataSource