已找到以下 24 条记录
产品选择
数据工坊 DWR
没有找到结果,请重新输入
产品选择
数据工坊 DWR
产品选择
没有找到结果,请重新输入
  • 通过API同步启动工作流 - 数据工坊 DWR

    p1对应值为v1,p2对应值为v2。 注意: 当参数名和值中包含下划线时,需将下划线转义为“%5F”。 如:工作流名称为test-workflow,参数名p1为thumb_samp_maxlen,p1值v1为500,参数名p2为thumb_samp_dots,p2值v2为11,则请求为:<对象url>

  • 案例概述 - 数据工坊 DWR

    测试算子:算子提供方在发布前可通过自定义算子方式完成DWRalpha调试,可有效降低发布后故障率,测试结果也是算子发布时重要审核项。 发布算子等待审核:算子提供方完成步骤4中测试后,进入到DWR控制台界面,根据提示信息提供必要资料提交审核。 本次实践将重点描述步骤3、4、5完成算子开发、测试、发布。 算子执行原理

  • 自定义函数开发规范 - 数据工坊 DWR

    用户在自行开发自定义函数时,函数输入参数和输出参数需要遵守本节开发规范。 自定义函数编译方式请参考FunctionGraph《开发指南》。 函数输入参数 工作流执行自定义函数时,函数输入参数JSON格式结构体和环境变量定义如下: 表1 函数输入JSON格式体 名称 是否必选

  • 发布算子 - 数据工坊 DWR

    "obs:object:GetObject" ], "resource": [] } ] 单击右下角“提交审核”。 审核通过后,算子将发布至算子市场。您可以过滤第三方算子提供方,查看您发布算子。 父主题: 发布下载OBS对象算子

  • 与其他服务关系 - 数据工坊 DWR

    与其他服务关系 DWR数据处理数据源是华为云存储服务,DWR提供华为云自有算子是通过函数生成,且能力源是华为云数据处理相关云服务。因此,DWR与其他服务关系如表1所示。 表1 DWR与其他云服务关系 服务类别 服务名称 交互关系 存储服务 对象存储服务(Object Storage

  • 发布算子 - 数据工坊 DWR

    提供算子入参中动态参数对应参数值,其Key值需要与动态参数中保持一致。 动态参数(可选) 提供算子入参参数列表,可配置静态参数或动态参数,动态参数需要从Inputs参数中根据定义Key取值。 权限版本 华为云统一身份认证(IAM)权限版本,1.0版本以服务为粒度,提供有限服务相关角色用于授权。1

  • 开发算子代码 - 数据工坊 DWR

    中配置参数。这也是算子提供方获取用户配置参数主要方式,后文将对该参数进行更加详细介绍。bucketname以及object值根据测试需要,点击函数测试参数配置。 obsclient形参中server参数为OBSendpoint,详情参见地区和终端节点。 不同regi

  • 产品优势 - 数据工坊 DWR

    研或集成商数据处理软件,通过数据处理软件完成数据处理。 传统云上处理方式:使用云上存储服务和数据处理服务,数据写入存储服务后,再调用数据处理服务接口实现数据处理。 云上近数据处理方式:使用云上存储服务和DWR近数据处理能力,数据写入存储服务后,自动触发DWR编排工作流完成数据处理。

  • 通过事件触发器异步启动工作流 - 数据工坊 DWR

    在工作流列表中,单击待关联工作流操作列“创建事件触发器”进行触发器创建。 图1 创建事件触发器 配置事件触发器参数。 表1 事件触发器参数说明 参数 说明 触发器名称 事件触发器名称,用户自定义。同一桶内触发器名称不允许重复。 关联工作流 满足该事件触发器条件时,自动执行工作流。 事件源存储桶

  • 发布算子 - 数据工坊 DWR

    提供算子入参中动态参数对应参数值,其Key值需要与动态参数中保持一致。 动态参数(可选) 提供算子入参参数列表,可配置静态参数或动态参数,动态参数需要从Inputs参数中根据定义Key取值。 权限版本 华为云统一身份认证(IAM)权限版本,1.0版本以服务为粒度,提供有限服务相关角色用于授权。1

  • 权限管理 - 数据工坊 DWR

    不允许删除DWR权限,控制他们对DWR资源使用范围。 如果华为云账号已经能满足您要求,不需要创建独立IAM用户进行权限管理,您可以跳过本章节,不影响您使用DWR服务其它功能。 IAM是华为云提供权限管理基础服务,无需付费即可使用,您只需要为您账号中资源进行付费。关于

  • 创建工作流 - 数据工坊 DWR

    时需要进行“统一授权”。 单击界面右上角“创建工作流”,进入“工作流编排”页面。 将左侧预置模板或自定义函数拖拽至编排区域,同时在右侧属性面板配置基本属性和动态参数,配置完成后图标将由白色填充变为蓝色填充。 各预置模板及自定义函数参数配置说明,请参见官方算子一览。 使用视

  • 示例:图片质量变换 - 数据工坊 DWR

    在OBS服务中上传文件触发工作流执行 使用限制 当前支持使用区域为:北京四、上海一、上海二、广州、新加坡。 操作步骤 在OBS服务中创建桶 在OBS服务控制台创建两个桶,一个用于上传待处理数据对象,一个用于存储处理后数据对象。桶详细介绍参见创建桶。 数据输入桶:“piccomp”

  • 视频解析 - 数据工坊 DWR

    视频解析 场景介绍 解析视频元数据信息,包括:视频时长、视频格式、码率等。用于视频播放时获取时长,分辨率展示 等等。 流程一览 操作步骤 在OBS服务中创建桶 在OBS服务控制台创建两个桶,一个用于上传待处理数据对象,一个用于存储处理后数据对象。桶详细介绍参见创建桶。 数据输入桶:“piccomp”

  • 使用限制 - 数据工坊 DWR

    当前暂不支持创建重名工作流,即使工作流被删除后,也不能再创建与之重名工作流。 同一桶内触发器名称不允许重复。 工作流及工作流中使用FunctionGraph、数据处理服务、消息通知服务、OBS桶等均需要在相同区域默认项目下。 细粒度授权不支持企业项目。 一个桶支持绑定10个事件触发器。 当前发布算子功能仅支持IAM主账号。

  • 基本概念 - 数据工坊 DWR

    个算子,客户可通过加入不同算子到工作流中实现高度自由化数据处理功能。 算子 算子是DWR中执行单位,是一个具有输入输出完成功能模块。算子既有华为云提供内置官方算子,也有经过华为云审核后第三方算子。用户可以根据自己需求挑选算子加入工作流中,从而快速构建特有的数据处理功能。

  • 媒资转码 - 数据工坊 DWR

    在OBS服务控制台创建两个桶,一个用于上传待处理数据对象,一个用于存储处理后数据对象。桶详细介绍参见创建桶。 数据输入桶:“piccomp” 数据处理后输出桶:“piccomp-output” 这里创建两个桶是为了防止无限循环。因为处理后数据如果放在源桶,又跟事件触发器执行条件匹配,会继续触发工

  • 数据处理介绍 - 数据工坊 DWR

    DWR如何实现数据处理 DWR提供近数据处理能力,可以对OBS内存储数据,按照用户编排工作流进行自动化处理(如解析、转码、截图等)。 DWR基于函数工作流FunctionGraph函数能力,将复杂业务处理逻辑编排为工作流,通过事件触发器或API驱动,自动化完成多项复杂数据处理任务。DW

  • 什么是数据工坊 - 数据工坊 DWR

    Workroom,DWR)是一款近数据处理服务,通过易用数据处理工作流编排和开放生态数据处理算子,能够在云上实现图像、视频、文档、图片等数据处理业务。 如图1所示,DWR主要对外提供开放算子库和数据处理引擎。 算子库包含由DWR提供华为自有算子和第三方开发者提供第三方算子。 华为自有算子能力源是华为云数据

  • 创建视频转码工作流 - 数据工坊 DWR

    针对使用DWR做视频转码场景,如果需要每个对象转码任务参数不同,可通过给对象增加对象元数据(例如:x-obs-meta-transcode-commands: base64(commands)),再使用DWR集成自定义函数方式来实现视频转码。 具体工作流视图如图1所示。 图1