检测到您已登录华为云国际站账号,为了您更好的体验,建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
为什么管道任务没能输出期望的结果? 管道任务中哪个算子环节出错了? 算子处理后的数据结果是什么样的? 以上问题是我们在开发阶段经常遇到的问题。为了解决以上问题,我们提供了调试数据管道工具。用户可以上报测试数据对管道业务流程进行测试,用户可直观查看测试数据在每个算子输入和输出的内容。 工作原理:
为什么实时分析任务没能输出期望的结果? 实时分析任务中哪个算子环节出错了? 算子处理后的数据结果是什么样的? 以上问题是我们在开发阶段经常遇到的问题。为了解决以上问题,我们提供了调试实时分析工具。用户可以上报测试数据对实时分析业务流程进行测试,用户可直观查看测试数据在每个算子输入和输出的内容。 工作原理:
支持云审计的关键操作 操作场景 平台提供了云审计服务。通过云审计服务,您可以记录与云服务器相关的操作事件,便于日后的查询、审计和回溯。 前提条件 已开通云审计服务。 支持审计的关键操作列表 表1 数据源支持审计的关键操作列表 操作名称 资源类型 事件名称 创建数据源 datasource
访问密钥(AK) 访问密钥的KEY 根据实际值填写 私有访问密钥(SK) 访问密钥的密码 根据实际值填写 点击“连接测试”按钮,测试数据源是否可访问。如果测试失败,请确认项目ID、访问密钥、私有访问密钥是否正确,修改后请重新测试。 点击“确定”按钮,完成数据接入服务数据源的添加。 当前实时
限制约束 API的演进会保持前向兼容性,若接口升级了版本,其旧版本接口可以继续使用,但功能不再做增强,新增功能仅在新版本接口中提供。 更详细的限制请参见具体API的说明。 父主题: 使用前必读
任务提交后台服务中,此时任务处于初始化中,无法处理上报的测试数据 运行中 任务已完成初始化,等待或正在处理上报测试数据,除当任务异常或人为停止,否则将一直正常运行。 停止中 当任务异常或人为停止任务时,任务将停止处理测试数据。 停止 任务正常停止,可编辑。 输入输出 上报测试数据的控制页面。用户可在数据源类
任务提交后台服务中,此时任务处于初始化中,无法处理上报的测试数据 运行中 任务已完成初始化,等待或正在处理上报测试数据,除当任务异常或人为停止,否则将一直正常运行。 停止中 当任务异常或人为停止任务时,任务将停止处理测试数据。 停止 任务正常停止,可编辑。 输入输出 上报测试数据的控制页面。用户可在数据源类
操作指导 使用测试功能主要包含启动测试任务,上报数据,查看测试结果,停止测试任务。其中上报数据,查看测试结果可重复执行,不必反复启停任务。 创建任务 创建并编辑任务。 保存任务。 确保任务为“就绪”态。 启动测试任务 点击测试按钮,等待测试状态为“运行中”。目前部分算子暂不支持测试功能(见算子支持表),测试按钮将不可点击。
操作指导 使用测试功能主要包含启动测试任务,上报数据,查看测试结果,停止测试任务。其中上报数据,查看测试结果可重复执行,不必反复启停任务。 创建任务 创建并编辑任务。 保存任务。 确保任务为“就绪”态。 启动测试任务 点击测试按钮,等待测试状态为“运行中”。目前部分算子暂不支持测试功能(见算子支持表),测试按钮将不可点击。
Path格式来指定保留的属性。 类型:STRING 必选:是 约束:需要符合正则表达式: ^.{1,1000}$。 高级配置项 并行数: 配置项英文名:parallelism 说明:并行数,指定算子执行时的并行任务个数。对于性能要求越高的算子,可以设置较高的并行数,但是占用资源越
"service_type": "", "event_time": "20210623T163200+0800" } ] } } } header 测试数据头字段,必须是json格式。 是 projectId 租户id,必须模板默认值,用户不能修改。 是 dataSourceId 数据源id,必须模板默认值,用户不能修改。
物联网数据的数据体量大、价值密度小、数据时效性高、质量低。针对物联网数据的这些特点,在海量历史数据中提供近实时的高效探索分析能力,及时发现物联网数据中的隐含规律则显得尤为重要。IoT数据分析服务的时序分析,提供基于模型驱动的海量历史数据时序分析洞察能力,让物联网数据的规律清晰可见。
按需计费:当用户账户中的余额不足以支付其费用后,会根据“客户等级”定义不同的保留期时长进入保留期,一旦进入保留期,用户将不能正常使用IoT数据分析服务,但其数据还会保留。保留期满仍未缴清欠款的,将会清除其账号下IoT数据分析服务的相关资源和数据。 包年包月:如果用户购买的套餐包中的资源消耗完
算子简介 名称:数据过滤 功能说明:根据设置的条件过滤数据,满足条件的数据则输出,不满足条件的数据将被丢弃。 约束:下游不允许对接数据源及产品过滤算子。 算子配置 基础配置项 算子名称: 配置项英文名:name 说明:算子名称,对算子进行个性化的命名,以辅助增加可读性。支持中文、英文、
允许固定时间延迟的分配器,适用于乱序但预先知道或只允许在流中将会遇到的最大延迟的场景。 AscendingTimestampExtractor:递增时间戳的分配器,适用于每个元素(elements)的时间在每个并行任务(parallel task)里是单调递增的场景。 IngestionTimeExtractor:
允许固定时间延迟的分配器,适用于乱序但预先知道或只允许在流中将会遇到的最大延迟的场景。 AscendingTimestampExtractor:递增时间戳的分配器,适用于每个元素(elements)的时间在每个并行任务(parallel task)里是单调递增的场景。 IngestionTimeExtractor:
分区键,用于作为消息分区/分组的标识,具体填入的内容为消息中获取的JSON Path,比如可以选择消息中设备ID所在的JSON Path。 设置后,拥有该分区键数值相同的所有消息会进入一个分区,比如分区键选择了设备ID后,所有相同设备ID的消息进入一个分区。当选择多个字段时,按指定字段顺序组合成的字符作
说明:扁平字段配置,配置需要进行扁平处理的字段列表。 必选: 是 子配置项:扁平字段配置包括如下子配置项:源数据路径、字段名称。 源数据路径: 配置项英文名:path 说明:源数据路径,以JSON Path格式来指定变量从消息中指定的JSON Path属性获取的取值。 类型:STRING 必选:是
分区键,用于作为消息分区/分组的标识,具体填入的内容为消息中获取的JSON Path,比如可以选择消息中设备ID所在的JSON Path。 设置后,拥有该分区键数值相同的所有消息会进入一个分区,比如分区键选择了设备ID后,所有相同设备ID的消息进入一个分区。当选择多个字段时,按指定字段顺序组合成的字符作
Path格式来指定源属性,以作为输出属性的取值。 类型: STRING 必选: 是 约束: 需要符合正则表达式: ^.{1,1000}$ 标签: 配置项英文名:tag 说明: 是否作为时序分析的标签。其对应属性的类型必须为STRING,如果属性的类型不STRING,此配置忽略。 类型: