已找到以下 35 条记录
产品选择
数据工坊 DWR
没有找到结果,请重新输入
产品选择
数据工坊 DWR
产品选择
没有找到结果,请重新输入
  • 案例概述 - 数据工坊 DWR

    测试算子:算子提供方在发布前可通过自定义算子方式完成DWRalpha调试,可有效降低发布后故障率,测试结果也是算子发布时重要审核项。 发布算子等待审核:算子提供方完成步骤4中测试后,进入到DWR控制台界面,根据提示信息提供必要资料提交审核。 本次实践将重点描述步骤3、4、5完成算子开发、测试、发布。 算子执行原理

  • 数据处理介绍 - 数据工坊 DWR

    供图形化界面,方便用户直观便捷构建数据处理流程,同时提供了预置算子自定义函数能力,覆盖数据处理各种场景。预置算子详细介绍,请参见官方算子一览。用户在自行开发自定义函数时,函数输入参数输出参数需要遵守自定义函数开发规范。 DWR支持异步同步两种方式启动工作流,其中同步方式支持直接返回数据:

  • 开发算子代码 - 数据工坊 DWR

    用户在DWR中配置参数。这也是算子提供方获取用户配置参数主要方式,后文将对该参数进行更加详细介绍。bucketname以及object值根据测试需要,点击函数测试参数配置。 obsclient形参中server参数为OBSendpoint,详情参见地区终端节点。 不

  • 实施步骤 - 数据工坊 DWR

    onGraph访问OBS权限,创建方式参考创建委托。 函数创建成功后进入函数详情页添加依赖包。 在“代码依赖包”模块点击“添加依赖包”。 选择私有依赖包,添加步骤1中创建好依赖包 依赖添加成功后,在FunctionGraph控制台添加算子代码并保存部署。参考示例如下: # -*-

  • 权限管理 - 数据工坊 DWR

    访问其他数据处理服务权限不会在统一授权时添加,系统会在您创建工作流时,根据工作流函数使用到服务按需添加。 如果账号IAM用户需要使用DWR,则需要给IAM用户配置FunctionGraph、数据处理服务(如MPC)、SMN等服务访问权限。具体配置权限需要和委托权限保持一致。委托的权限详情可以在“统一身份认证

  • 示例:图片质量变换 - 数据工坊 DWR

    在OBS服务中上传文件触发工作流执行 使用限制 当前支持使用区域为:北京四、上海一、上海二、广州、新加坡。 操作步骤 在OBS服务中创建桶 在OBS服务控制台创建两个桶,一个用于上传待处理数据对象,一个用于存储处理后数据对象。桶详细介绍参见创建桶。 数据输入桶:“piccomp”

  • DWR自定义策略 - 数据工坊 DWR

    DWR自定义策略 如果系统预置DWR权限,不满足您授权要求,可以创建自定义策略。 目前华为云支持以下两种方式创建自定义策略: 可视化视图创建自定义策略:无需了解策略语法,按可视化视图导航栏选择云服务、操作、资源、条件等策略内容,可自动生成策略。 JSON视图创建自定义策略:可

  • 自定义函数开发规范 - 数据工坊 DWR

    用户在自行开发自定义函数时,函数输入参数输出参数需要遵守本节开发规范。 自定义函数编译方式请参考FunctionGraph《开发指南》。 函数输入参数 工作流执行自定义函数时,函数输入参数JSON格式结构体环境变量定义如下: 表1 函数输入JSON格式体 名称 是否必选

  • 官方算子一览 - 数据工坊 DWR

    设置缩略类型。取值为lfit、mfit、fill、padfixed,默认值为lfit。 lfit:指定一个wh矩形,将图片进行等比缩放,取在矩形内最大图片。 mfit:指定一个wh矩形,将图片进行等比缩放,取在矩形延伸区域最小图片。 fill:指定一个wh矩形,

  • 基本概念 - 数据工坊 DWR

    个算子,客户可通过加入不同算子到工作流中实现高度自由化数据处理功能。 算子 算子是DWR中执行单位,是一个具有输入输出完成功能模块。算子既有华为云提供内置官方算子,也有经过华为云审核后第三方算子。用户可以根据自己需求挑选算子加入工作流中,从而快速构建特有的数据处理功能。

  • 数据工坊 DWR - 数据工坊 DWR

    算子市场 算子市场即DWR提供算子库,提供方包括华为第三方。 华为算子能力源是华为云数据处理相关云服务,如媒体处理MPC、图像识别Image等,DWR将云服务提供各种数据处理能力通过函数生成算子并在算子市场发布。 第三方算子是基于DWR算子注册能力,由第三方开发者创建

  • “无限循环”触发工作流如何处理? - 数据工坊 DWR

    ggerB条件(比如:两个触发器前缀后缀不配置),最终,转码输出会再次触发工作流,从而导致用户工作流workflowAworkflowB不停执行,出现“无限循环”。 说明:triggerAtriggerB都不指定前后缀 图5 工作流配置workflowA 图6 工作流配置workflowB

  • 发布算子 - 数据工坊 DWR

    上传文件包括:算子代码包、中文英文帮助文档、中文英文开源声明、中文英文服务协议文档、中文英文测试报告。 图3 上传文件 配置算子参数。 参数 说明 Inputs参数(可选) 提供算子入参中动态参数对应参数值,其Key值需要与动态参数中保持一致。 动态参数(可选) 提供算子入参参数列表,可

  • 最新动态 - 数据工坊 DWR

    最新动态 本文介绍了数据工坊各特性版本功能发布对应文档动态,欢迎体验。 序号 功能名称 功能描述 阶段 相关文档 1 数据工坊全新公测上线 数据工坊通过易用数据处理工作流编排开放生态数据处理算子,能够在云上实现各种灵活数据处理业务。 公测 什么是数据工坊

  • 发布算子 - 数据工坊 DWR

    上传文件包括:算子代码包、中文英文帮助文档、中文英文服务协议文档、中文英文开源声明、中文英文测试报告。 图3 上传文件 配置算子参数。 参数 说明 Inputs参数(可选) 提供算子入参中动态参数对应参数值,其Key值需要与动态参数中保持一致。 动态参数(可选) 提供算子入参参数列表,可

  • 通过事件触发器异步启动工作流 - 数据工坊 DWR

    使事件触发器生效对象前缀。 说明: 当前缀后缀都不配置时,事件触发器将作用于桶中所有对象。 后缀 使事件触发器生效对象后缀。 说明: 文件夹是以“/”结尾,“/”前字符为文件夹名称。若要对文件夹进行后缀匹配,后缀必须以“/”结尾。 当前缀后缀都不配置时,事件触发器将作用于桶中所有对象。

  • 产品优势 - 数据工坊 DWR

    研或集成商数据处理软件,通过数据处理软件完成数据处理。 传统云上处理方式:使用云上存储服务和数据处理服务,数据写入存储服务后,再调用数据处理服务接口实现数据处理。 云上近数据处理方式:使用云上存储服务DWR近数据处理能力,数据写入存储服务后,自动触发DWR编排工作流完成数据处理。

  • 操作流程 - 数据工坊 DWR

    操作流程 您首先需要在FunctionGraph导入自定义算子需要函数依赖包。然后需要在FunctionGraph创建自定义抽帧截图函数。之后需要在DWR工作流编排界面完成配置动态参数,创建同步工作流。最后触发工作流进行验证。 图1 操作流程 父主题: 抽帧截图(自定义算子)

  • 创建工作流 - 数据工坊 DWR

    要进行“统一授权”。 单击界面右上角“创建工作流”,进入“工作流编排”页面。 将左侧预置模板或自定义函数拖拽至编排区域,同时在右侧属性面板配置基本属性动态参数,配置完成后图标将由白色填充变为蓝色填充。 各预置模板及自定义函数参数配置说明,请参见官方算子一览。 使用视频解

  • 创建视频转码工作流 - 数据工坊 DWR

    return ret 创建工作流。 关联步骤1自定义函数“媒资转码”算子。拓扑图如图2所示。 需要关闭自定义算子“媒资转码”算子动态参数开关。 图2 创建工作流 配置触发器。 触发器关联到需要做转码桶,并根据业务需要指定对象前、后缀。 填写配置信息如下: 触发器名称:“test-trans”