已找到以下 32 条记录
产品选择
数据工坊 DWR
没有找到结果,请重新输入
产品选择
数据工坊 DWR
产品选择
没有找到结果,请重新输入
  • “无限循环”触发工作流如何处理? - 数据工坊 DWR

    作流中使用了内置“媒资转码”函数,且配置“媒资转码”函数转码输出桶为桶A。然后,在桶A上配置触发器关联工作流workflowA。如果自定义函数输出对象前缀或后缀匹配触发器triggerA前后缀条件(比如:前缀和后缀不配置,或者对象满足触发器条件),则转码输出会再次触发工

  • 如何测试算子 - 数据工坊 DWR

    如何测试算子 当算子功能代码开发完毕后,可以在DWR工作流中使用自定义工作流进行测试。请参考测试算子功能。

  • 开发算子代码 - 数据工坊 DWR

    上下文对象保存,需要注意是这里AK/SK属于函数配置委托,故AK/SK权限与该委托授权范围相同,如果需访问OBS,用户需要对委托进行授权并配置到FunctionGraph函数配置项。 桶名以及对象名通过event进行获取。如图2所示,桶名、对象等信息保存在event,代码中d

  • 测试算子功能 - 数据工坊 DWR

    输出值与测试算子输出结果相同,表示算子已经完成测试,具备发布条件。具备发布条更重要是动态参数存在让用户拥有了与算子交互接口。 动态参数桶名称、对象是由用户输入参数,而触发器桶名称、对象则是面向触发器使用,二者不可混淆。 父主题: 发布下载OBS对象算子

  • 案例概述 - 数据工坊 DWR

    测试算子:算子提供方在发布前可通过自定义算子方式完成DWRalpha调试,可有效降低发布后故障率,测试结果也是算子发布时重要审核项。 发布算子等待审核:算子提供方完成步骤4测试后,进入到DWR控制台界面,根据提示信息提供必要资料提交审核。 本次实践将重点描述步骤3、4、5完成算子开发、测试、发布。 算子执行原理

  • 与其他服务关系 - 数据工坊 DWR

    Service,OBS) OBS作为DWR数据处理数据源,当上传至OBS或存储在OBS数据产生事件满足触发器规则时,DWR将自动启动关联工作流进行数据处理。 函数服务 函数工作流(FunctionGraph) DWR由华为云提供自有算子均是利用数据处理服务API,通过FunctionGraph封装而成。

  • 发布算子 - 数据工坊 DWR

    "obs:object:GetObject" ], "resource": [] } ] 单击右下角“提交审核”。 审核通过后,算子将发布至算子市场。您可以过滤第三方算子提供方,查看您发布算子。 父主题: 发布下载OBS对象算子

  • 示例:图片质量变换 - 数据工坊 DWR

    将图片压缩。 触发器执行存在一定延时,大概5分钟生效。 图3 上传文件 查看图片压缩效果 压缩后图片存放在piccomp-output桶output文件夹。如图4所示,图片大小均有变小,实现了对图片压缩。 图4 压缩图片 (可选)查看运行记录 在DWR控制台左侧导航栏选择“工作流”,进入“工作流”页面

  • 发布算子 - 数据工坊 DWR

    Inputs参数(可选) 提供算子入参动态参数对应参数值,其Key值需要与动态参数中保持一致。 动态参数(可选) 提供算子入参参数列表,可配置静态参数或动态参数,动态参数需要从Inputs参数根据定义Key取值。 权限版本 华为云统一身份认证(IAM)权限版本,1.0版本以服务为

  • 入门流程 - 数据工坊 DWR

    当需要使用DWR服务对OBS内存储数据自动进行多项复杂任务(如解析、转码、截图等)处理时,建议参考表1逐步操作。 表1 DWR使用流程简介 操作步骤 操作说明 步骤一:准备工作 注册华为云账号,并开通数据工坊DWR服务。 (可选)步骤二:浏览算子市场 在算子市场查找需要算子,了解已有算子功能。 步骤三:创建工作流

  • 发布算子 - 数据工坊 DWR

    Inputs参数(可选) 提供算子入参动态参数对应参数值,其Key值需要与动态参数中保持一致。 动态参数(可选) 提供算子入参参数列表,可配置静态参数或动态参数,动态参数需要从Inputs参数根据定义Key取值。 权限版本 华为云统一身份认证(IAM)权限版本,1.0版本以服务为

  • 权限管理 - 数据工坊 DWR

    不允许删除DWR权限,控制他们对DWR资源使用范围。 如果华为云账号已经能满足您要求,不需要创建独立IAM用户进行权限管理,您可以跳过本章节,不影响您使用DWR服务其它功能。 IAM是华为云提供权限管理基础服务,无需付费即可使用,您只需要为您账号资源进行付费。关于

  • 创建用户并授权使用DWR - 数据工坊 DWR

    根据企业用户职能,设置不同访问权限,以达到用户之间权限隔离。 将DWR资源委托给更专业、高效其他华为云账号或者云服务,这些账号或者云服务可以根据权限进行代运维。 如果华为云账号已经能满足您要求,不需要创建独立IAM用户,您可以跳过本章节,不影响您使用DWR服务其它功能。

  • 产品优势 - 数据工坊 DWR

    研或集成商数据处理软件,通过数据处理软件完成数据处理。 传统云上处理方式:使用云上存储服务和数据处理服务,数据写入存储服务后,再调用数据处理服务接口实现数据处理。 云上近数据处理方式:使用云上存储服务和DWR近数据处理能力,数据写入存储服务后,自动触发DWR编排工作流完成数据处理。

  • 创建工作流 - 数据工坊 DWR

    使用视频解析、抽帧截图、媒资转码等模板需要先在MPC开启桶授权,详情请参见权限说明。 鼠标单击各流程图标下方小圆圈并长按拖拽,将工作流完整串联起来。 当前仅支持串行工作流。 图1 串联后完整工作流 单击右上角“保存”,填写工作流基本信息,如表1所示。 创建完成所有同区域工作流,都将在工作流列

  • 数据工坊 DWR - 数据工坊 DWR

    从0到1,带您快速上手数据工坊DWR使用方式。 准备 准备工作 数据处理 入门流程 示例:使用DWR压缩图片 算子管理 发布算子 04 实践 您可以通过使用DWR数据处理功能解决实际业务场景诸多问题。 最佳实践 创建视频转码工作流 发布下载OBS对象算子 抽帧截图(官方算子) 抽帧截图(自定义算子)

  • 基本概念 - 数据工坊 DWR

    子,客户可通过加入不同算子到工作流实现高度自由化数据处理功能。 算子 算子是DWR执行单位,是一个具有输入输出完成功能模块。算子既有华为云提供内置官方算子,也有经过华为云审核后第三方算子。用户可以根据自己需求挑选算子加入工作流,从而快速构建特有的数据处理功能。 触发器

  • 自定义函数开发规范 - 数据工坊 DWR

    用户在自行开发自定义函数时,函数输入参数和输出参数需要遵守本节开发规范。 自定义函数编译方式请参考FunctionGraph《开发指南》。 函数输入参数 工作流执行自定义函数时,函数输入参数JSON格式结构体和环境变量定义如下: 表1 函数输入JSON格式体 名称 是否必选

  • 视频解析 - 数据工坊 DWR

    作流运行,进行视频解析。 图3 上传视频 查看视频解析结果 解析后视频参数存放在piccomp-output桶output文件夹,如图4所示。原视频元数据信息如图5所示。 图4 解析后结果文件 图5 视频解析结果内容 (可选)查看运行记录 在DWR控制台左侧导航栏选择“工作流”,进入“工作流”页面

  • 媒资转码 - 数据工坊 DWR

    在OBS服务创建桶 在OBS服务控制台创建两个桶,一个用于上传待处理数据对象,一个用于存储处理后数据对象。桶详细介绍参见创建桶。 数据输入桶:“piccomp” 数据处理后输出桶:“piccomp-output” 这里创建两个桶是为了防止无限循环。因为处理后数据如果放在