已找到以下 24 条记录
AI智能搜索
产品选择
数据工坊 DWR
没有找到结果,请重新输入
产品选择
数据工坊 DWR
在搜索结果页开启AI智能搜索
开启
产品选择
没有找到结果,请重新输入
  • 开发算子代码 - 数据工坊 DWR

    上下文对象保存,需要注意的是这里的AK/SK属于函数配置的委托,故AK/SK的权限与该委托的授权范围相同,如果需访问OBS,用户需要对委托进行授权并配置到FunctionGraph的函数配置项。 桶名以及对象名通过event进行获取。如图2所示,桶名、对象等信息保存在event,代码dynamic_sou

  • 如何测试算子 - 数据工坊 DWR

    如何测试算子 当算子功能代码开发完毕后,可以在DWR工作流中使用自定义工作流进行测试。请参考测试算子功能。

  • “无限循环”触发工作流如何处理? - 数据工坊 DWR

    “无限循环”触发工作流如何处理? 由于DWR只能按触发器前缀、后缀、事件源类型等条件触发工作流,所以可能存在出现“无限循环”的场景。如果出现“无限循环”,只能先删除桶的事件触发器。主要有以下两个场景: 场景1:触发器源桶和函数执行输出目标桶是同一个桶的无限循环 案例1:使用DWR内置函数触发“无限循环”

  • 测试算子功能 - 数据工坊 DWR

    3所示,在弹出窗口中根据输入项名称完成触发器的配置。 图3 创建触发器 前缀与后缀配合使用可以使触发器监听桶不同目录的内容,例如图3触发器将监听testdir目录以.png结尾的文件。 事件源触发器分两大类: ObjectCreated :监听包括上传,更新,复制等操作。

  • 创建用户并授权使用DWR - 数据工坊 DWR

    and Access Management,简称IAM),通过IAM,您可以: 根据企业的业务组织,在您的华为云账号,给企业不同职能部门的员工创建IAM用户,员工拥有唯一安全凭证,并使用DWR资源。 根据企业用户的职能,设置不同的访问权限,以达到用户之间的权限隔离。 将DW

  • 准备工作 - 数据工坊 DWR

    您需要确保账户有足够金额。 关于DWR收费标准,请参见计费说明。 关于充值,请参见如何给华为云账户充值。 创建IAM用户 IAM用户由账号管理员创建并管理,可以确保账号及资源的安全性,有关IAM的详细介绍请参见IAM用户。此处介绍如何创建一个具有DWR访问权限的IAM用户。如果您不需要使用IAM用户,可以略过此部分内容。

  • 发布算子 - 数据工坊 DWR

    配置算子参数。 参数 说明 Inputs参数(可选) 提供算子入参动态参数对应的参数值,其Key值需要与动态参数中保持一致。 动态参数(可选) 提供算子入参的参数列表,可配置静态参数或动态参数,动态参数需要从Inputs参数根据定义的Key取值。 权限版本 华为云统一身份认证(IAM)的权限版本,1

  • 发布算子 - 数据工坊 DWR

    配置算子参数。 参数 说明 Inputs参数(可选) 提供算子入参动态参数对应的参数值,其Key值需要与动态参数中保持一致。 动态参数(可选) 提供算子入参的参数列表,可配置静态参数或动态参数,动态参数需要从Inputs参数根据定义的Key取值。 权限版本 华为云统一身份认证(IAM)的权限版本,1

  • 数据工坊 DWR - 数据工坊 DWR

    您可以通过使用DWR的数据处理功能解决实际业务场景的诸多问题。 最佳实践 创建视频转码工作流 发布下载OBS对象的算子 抽帧截图(官方算子) 抽帧截图(自定义算子) 视频解析 媒资转码 常见问题 了解更多常见问题、案例和解决方案 热门案例 触发器配置不当导致“无限循环”触发工作流如何处理? 如何测试算子? 一个事件触发器可以设置多个前缀或者后缀吗?

  • 官方算子一览 - 数据工坊 DWR

    FunctionGraph服务的操作指导请参见《函数工作流用户指南》“创建并初始化函数”章节的内容。 下拉列表仅展示与DWR工作流同区域且同项目的函数。工作流所属区域为创建工作流的桶所属区域。例如工作流A是在桶A创建的,则桶A的区域即为工作流A的区域。 动态参数 若自定义函数存在动态参数,可以指定动态参数的参数名和取值,作为函数的输入。

  • 应用场景 - 数据工坊 DWR

    应用场景 未来几年时间,数据量将会呈数倍增长趋势,海量数据的快速处理是企业数据变现的核心诉求。DWR提供的高效、开放、易用的近数据处理能力,视频处理、图片审核、文档压缩、灾难防治、数据搜索和推荐、办公协同、基因测序等场景的海量数据快速产生价值。 DWR的应用场景包括但不限于以下典型场景。

  • 数据处理介绍 - 数据工坊 DWR

    数据处理介绍 DWR如何实现数据处理 DWR提供的近数据处理能力,可以对OBS内存储的数据,按照用户编排的工作流进行自动化处理(如解析、转码、截图等)。 DWR基于函数工作流FunctionGraph的函数能力,将复杂的业务处理逻辑编排为工作流,通过事件触发器或API驱动,自动化

  • 示例:图片质量变换 - 数据工坊 DWR

    该实例通过创建触发器的方式异步启动工作流,实现流程为: 在OBS服务创建桶 在DWR服务创建工作流 在DWR服务创建事件触发器 在OBS服务中上传文件触发工作流执行 使用限制 当前支持使用的区域为:北京四、上海一、上海二、广州、新加坡。 操作步骤 在OBS服务创建桶 在OBS服务控制台创建两个桶,一

  • 视频解析 - 数据工坊 DWR

    在DWR服务创建工作流 将“视频解析”算子拖拽至编排区域进行串联编排,并填写相关属性配置信息,如图1所示。 bucket为视频处理后的输出桶,这里设置为“piccomp-output”。 保存并填写工作流名称“MediaMetadata”。 图1 编排工作流 在DWR服务创建事件触发器。

  • 媒资转码 - 数据工坊 DWR

    omp-output”。 保存并填写工作流名称“MediaTranscode”。编排工作流 图1 编排工作流 在DWR服务创建事件触发器。 在工作流列表,单击工作流“MediaTranscode”操作列的“创建事件触发器”进行触发器的创建,如图2所示。 事件源存储桶选择“piccomp”。

  • 通过事件触发器异步启动工作流 - 数据工坊 DWR

    登录管理控制台。在左侧导航栏上方,单击,选择“存储 > 数据工坊DWR”。 进入DWR页面。 在左侧导航栏选择“工作流”,进入“工作流”页面。 在工作流列表,单击待关联工作流操作列的“创建事件触发器”进行触发器的创建。 图1 创建事件触发器 配置事件触发器参数。 表1 事件触发器参数说明 参数 说明

  • 权限管理 - 数据工坊 DWR

    IAM是华为云提供权限管理的基础服务,无需付费即可使用,您只需要为您账号的资源进行付费。关于IAM的详细介绍,请参见IAM产品介绍。 DWR权限 默认情况下,管理员创建的IAM用户没有任何权限,需要将其加入用户组,并给用户组授予策略或角色,才能使得用户组的用户获得对应的权限,这一过程称为授权。授权后,

  • 创建工作流 - 数据工坊 DWR

    创建工作流 操作场景 工作流主要是对算子进行编排,这样DWR就可以按照用户编排的工作流对OBS的数据进行自动化处理(如视频解析、图片转码、视频截图等)。 操作步骤 登录管理控制台。在左侧导航栏上方,单击,选择“存储 > 数据工坊DWR”。 进入DWR页面。 在左侧导航栏选中“工

  • 与其他服务的关系 - 数据工坊 DWR

    S的数据产生的事件满足触发器规则时,DWR将自动启动关联的工作流进行数据处理。 函数服务 函数工作流(FunctionGraph) DWR由华为云提供的自有算子均是利用数据处理服务的API,通过FunctionGraph封装而成。 数据处理服务 媒体处理(Media Processing

  • 通过API同步启动工作流 - 数据工坊 DWR

    1,p2_v2,graphname是工作流名称,p1_v1表示工作流运行参数p1对应的值为v1,p2对应的值为v2。 注意: 当参数名和值包含下划线时,需将下划线转义为“%5F”。 如:工作流名称为test-workflow,参数名p1为thumb_samp_maxlen,p1