已找到以下 22 条记录
产品选择
数据工坊 DWR
没有找到结果,请重新输入
产品选择
数据工坊 DWR
产品选择
没有找到结果,请重新输入
  • 什么是数据工坊 - 数据工坊 DWR

    Workroom,DWR)是一款近数据处理服务,通过易用数据处理工作流编排和开放生态数据处理算子,能够在云上实现图像、视频、文档、图片等数据处理业务。 如图1所示,DWR主要对外提供开放算子库和数据处理引擎。 算子库包含由DWR提供华为自有算子和第三方开发者提供第三方算子。 华为自有算子能力源是华为云数据

  • 测试算子功能 - 数据工坊 DWR

    输出值与测试算子的输出结果相同,表示算子已经完成测试,具备发布条件。具备发布条更重要是动态参数存在让用户拥有了与算子交互接口。 动态参数中桶名称、对象是由用户输入参数,而触发器中桶名称、对象则是面向触发器使用,二者不可混淆。 父主题: 发布下载OBS对象算子

  • 开发算子代码 - 数据工坊 DWR

    event :触发事件信息,OBS事件触发函数(DWR中称为算子)中event包含桶名,对象名。event也是自定义信息承载体,DWR用户输入内容通过event中动态参数(dynamic_source)保存。 context :函数上下文信息,例如函数执行时委托AK/SK,To

  • 计费说明 - 数据工坊 DWR

    计费说明 算子费用主要由三部分组成:OBS API调用费、FunctionGraph函数及函数工作流费、算子费。 表1 计费项 计费项 说明 OBS API调用费 算子请求OBS API调用费。 通过算子对数据进行处理,都会涉及到对OBS API调用,每调用一次API都计算一

  • 发布算子 - 数据工坊 DWR

    所有开发者均可以创建用于数据处理算子,审核通过后发布至DWR算子市场,开放给所有华为云用户使用。 当算子被华为云用户使用之后,算子发布者将会获得相应收益,详情参见计费说明。 算子从API上线、开发、到发布整个流程如图1所示,本节主要介绍如何使用DWR发布已开发好算子到算子市场。 算子

  • 发布算子 - 数据工坊 DWR

    所有开发者均可以创建用于数据处理算子,审核通过后发布至DWR算子市场,开放给所有华为云用户使用。 当算子被华为云用户使用之后,算子发布者将会获得相应收益,详情参见计费说明。 算子从API上线、开发、到发布整个流程如图1所示,本节主要介绍如何使用DWR发布已开发好算子到算子市场。 算子

  • 创建工作流 - 数据工坊 DWR

    C中开启桶授权,详情请参见权限说明。 鼠标单击各流程图标下方小圆圈并长按拖拽,将工作流完整串联起来。 当前仅支持串行工作流。 图1 串联后完整工作流 单击右上角“保存”,填写工作流基本信息,如表1所示。 创建完成所有同区域工作流,都将在工作流列表展示。工作流创建完成后,还

  • 准备工作 - 数据工坊 DWR

    保账号及资源安全性,有关IAM详细介绍请参见IAM用户。此处介绍如何创建一个具有DWR访问权限IAM用户。如果您不需要使用IAM用户,可以略过此部分内容。 在华为云官网,单击页面右上角“控制台”,使用注册账号登录控制台。 在“控制台”页面,鼠标移动至右上方用户名,在下拉列表中选择“统一身份认证”。

  • “无限循环”触发工作流如何处理? - 数据工坊 DWR

    在出现“无限循环”场景。如果出现“无限循环”,只能先删除桶事件触发器。主要有以下两个场景: 场景1:触发器源桶和函数执行输出目标桶是同一个桶无限循环 案例1:使用DWR内置函数触发“无限循环” 用户创建一条工作流workflowA,在工作流中使用了内置“媒资转码”函数,且

  • 案例概述 - 数据工坊 DWR

    测试算子:算子提供方在发布前可通过自定义算子方式完成DWRalpha调试,可有效降低发布后故障率,测试结果也是算子发布时重要审核项。 发布算子等待审核:算子提供方完成步骤4中测试后,进入到DWR控制台界面,根据提示信息提供必要资料提交审核。 本次实践将重点描述步骤3、4、5完成算子开发、测试、发布。 算子执行原理

  • 权限管理 - 数据工坊 DWR

    不允许删除DWR权限,控制他们对DWR资源使用范围。 如果华为云账号已经能满足您要求,不需要创建独立IAM用户进行权限管理,您可以跳过本章节,不影响您使用DWR服务其它功能。 IAM是华为云提供权限管理基础服务,无需付费即可使用,您只需要为您账号中资源进行付费。关于

  • 发布算子 - 数据工坊 DWR

    发布算子 当完成算子开发、算子在工作流中测试后,即可在DWR上将算子发布到算子市场。 操作步骤 在DWR控制台“发布算子”页面,单击界面右上角“发布公共算子”。 配置算子基本信息。 表1 配置基本信息 参数 说明 算子名称 不能与本用户已有的算子重名。 算子提供方 - 算子描述

  • 视频解析 - 数据工坊 DWR

    视频解析 场景介绍 解析视频元数据信息,包括:视频时长、视频格式、码率等。用于视频播放时获取时长,分辨率展示 等等。 流程一览 操作步骤 在OBS服务中创建桶 在OBS服务控制台创建两个桶,一个用于上传待处理数据对象,一个用于存储处理后数据对象。桶详细介绍参见创建桶。 数据输入桶:“piccomp”

  • 方案概述 - 数据工坊 DWR

    方案概述 应用场景 需要对视频抽帧截图时,在不编写额外代码情况下使用抽帧截图算子对视频进行指定时间点截帧。 约束与限制 该抽帧截图算子目前暂不支持中文对象。 方案架构 方案优势 用户自定义算子,无需依赖额外服务,功能更灵活。 父主题: 抽帧截图(自定义算子)

  • 方案概述 - 数据工坊 DWR

    需要对视频抽帧截图时,在不编写额外代码情况下使用抽帧截图算子对视频进行指定时间点截帧。 约束与限制 该抽帧截图算子目前暂不支持中文对象。 方案架构 1. 用户使用对象域名向OBS发送请求 2. DWR收到请求同步执行位于FunctionGraph视频截图抽帧算子实例,调用MPC服务

  • 数据工坊 DWR - 数据工坊 DWR

    算子市场 算子市场即DWR提供算子库,提供方包括华为和第三方。 华为算子能力源是华为云数据处理相关云服务,如媒体处理MPC、图像识别Image等,DWR将云服务提供各种数据处理能力通过函数生成算子并在算子市场发布。 第三方算子是基于DWR算子注册能力,由第三方开发者创建

  • 数据处理介绍 - 数据工坊 DWR

    DWR如何实现数据处理 DWR提供近数据处理能力,可以对OBS内存储数据,按照用户编排工作流进行自动化处理(如解析、转码、截图等)。 DWR基于函数工作流FunctionGraph函数能力,将复杂业务处理逻辑编排为工作流,通过事件触发器或API驱动,自动化完成多项复杂数据处理任务。DW

  • 媒资转码 - 数据工坊 DWR

    在OBS服务控制台创建两个桶,一个用于上传待处理数据对象,一个用于存储处理后数据对象。桶详细介绍参见创建桶。 数据输入桶:“piccomp” 数据处理后输出桶:“piccomp-output” 这里创建两个桶是为了防止无限循环。因为处理后数据如果放在源桶,又跟事件触发器执行条件匹配,会继续触发工

  • 自定义函数开发规范 - 数据工坊 DWR

    用户在自行开发自定义函数时,函数输入参数和输出参数需要遵守本节开发规范。 自定义函数编译方式请参考FunctionGraph《开发指南》。 函数输入参数 工作流执行自定义函数时,函数输入参数JSON格式结构体和环境变量定义如下: 表1 函数输入JSON格式体 名称 是否必选

  • 创建视频转码工作流 - 数据工坊 DWR

    针对使用DWR做视频转码场景,如果需要每个对象转码任务参数不同,可通过给对象增加对象元数据(例如:x-obs-meta-transcode-commands: base64(commands)),再使用DWR集成自定义函数方式来实现视频转码。 具体工作流视图如图1所示。 图1