已找到以下 43 条记录
AI智能搜索
产品选择
数据工坊 DWR
没有找到结果,请重新输入
产品选择
数据工坊 DWR
在搜索结果页开启AI智能搜索
开启
产品选择
没有找到结果,请重新输入
  • 案例概述 - 数据工坊 DWR

    测试算子:算子提供方在发布前可通过自定义算子方式完成DWRalpha调试,可有效降低发布后故障率,测试结果也是算子发布时重要审核项。 发布算子等待审核:算子提供方完成步骤4中测试后,进入到DWR控制台界面,根据提示信息提供必要资料提交审核。 本次实践将重点描述步骤3、4、5完成算子开发、测试、发布。 算子执行原理

  • 数据处理介绍 - 数据工坊 DWR

    DWR如何实现数据处理 DWR提供近数据处理能力,可以对OBS内存储数据,按照用户编排工作流进行自动化处理(如解析、转码、截图等)。 DWR基于函数工作流FunctionGraph函数能力,将复杂业务处理逻辑编排为工作流,通过事件触发器或API驱动,自动化完成多项复杂数据处理任务。DW

  • 开发算子代码 - 数据工坊 DWR

    AK/SK通过context 上下文对象保存,需要注意是这里AK/SK属于函数配置委托,故AK/SK权限与该委托中授权范围相同,如果需访问OBS,用户需要对委托进行授权并配置到FunctionGraph函数配置项中。 桶名以及对象名通过event进行获取。如图2所示

  • 权限管理 - 数据工坊 DWR

    访问其他数据处理服务权限不会在统一授权时添加,系统会在您创建工作流时,根据工作流函数使用到服务按需添加。 如果账号IAM用户需要使用DWR,则需要给IAM用户配置FunctionGraph、数据处理服务(如MPC)、SMN等服务访问权限。具体配置权限需要和委托权限保持一致。委托的权限详情可以在“统一身份认证

  • 发布算子 - 数据工坊 DWR

    发布算子 当完成算子开发、算子在工作流中测试后,即可在DWR上将算子发布到算子市场。 操作步骤 在DWR控制台“发布算子”页面,单击界面右上角“发布公共算子”。 配置算子基本信息。 表1 配置基本信息 参数 说明 算子名称 不能与本用户已有的算子重名。 算子提供方 - 算子描述

  • 测试算子功能 - 数据工坊 DWR

    输出值与测试算子输出结果相同,表示算子已经完成测试,具备发布条件。具备发布条更重要是动态参数存在让用户拥有了与算子交互接口。 动态参数中桶名称、对象是由用户输入参数,而触发器中桶名称、对象则是面向触发器使用,二者不可混淆。 父主题: 发布下载OBS对象算子

  • 与其他服务关系 - 数据工坊 DWR

    与其他服务关系 DWR数据处理数据源是华为云存储服务,DWR提供华为云自有算子是通过函数生成,且能力源是华为云数据处理相关云服务。因此,DWR与其他服务关系如表1所示。 表1 DWR与其他云服务关系 服务类别 服务名称 交互关系 存储服务 对象存储服务(Object Storage

  • 实施步骤 - 数据工坊 DWR

    onGraph访问OBS权限,创建方式参考创建委托。 函数创建成功后进入函数详情页添加依赖包。 在“代码依赖包”模块点击“添加依赖包”。 选择私有依赖包,添加步骤1中创建好依赖包 依赖添加成功后,在FunctionGraph控制台添加算子代码并保存部署。参考示例如下: # -*-

  • 发布下载OBS对象算子 - 数据工坊 DWR

    发布下载OBS对象算子 案例概述 开发算子代码 测试算子功能 发布算子

  • 创建用户并授权使用DWR - 数据工坊 DWR

    根据企业用户职能,设置不同访问权限,以达到用户之间权限隔离。 将DWR资源委托给更专业、高效其他华为云账号或者云服务,这些账号或者云服务可以根据权限进行代运维。 如果华为云账号已经能满足您要求,不需要创建独立IAM用户,您可以跳过本章节,不影响您使用DWR服务其它功能。

  • 基本概念 - 数据工坊 DWR

    个算子,客户可通过加入不同算子到工作流中实现高度自由化数据处理功能。 算子 算子是DWR中执行单位,是一个具有输入输出完成功能模块。算子既有华为云提供内置官方算子,也有经过华为云审核后第三方算子。用户可以根据自己需求挑选算子加入工作流中,从而快速构建特有的数据处理功能。

  • 官方算子一览 - 数据工坊 DWR

    lfit:指定一个w和h矩形,将图片进行等比缩放,取在矩形内最大图片。 mfit:指定一个w和h矩形,将图片进行等比缩放,取在矩形延伸区域最小图片。 fill:指定一个w和h矩形,将图片进行等比缩放,取在延伸区域最小图片,并进行居中剪切。即将mfit缩略类型图片进行居中剪裁。

  • 数据工坊 DWR - 数据工坊 DWR

    算子市场 算子市场即DWR提供算子库,提供方包括华为和第三方。 华为算子能力源是华为云数据处理相关云服务,如媒体处理MPC、图像识别Image等,DWR将云服务提供各种数据处理能力通过函数生成算子并在算子市场发布。 第三方算子是基于DWR算子注册能力,由第三方开发者创建

  • “无限循环”触发工作流如何处理? - 数据工坊 DWR

    码”函数转码输出桶为桶A。然后,在桶A上配置触发器关联工作流workflowA。如果自定义函数输出对象前缀或后缀匹配触发器triggerA前后缀条件(比如:前缀和后缀不配置,或者对象满足触发器条件),则转码输出会再次触发工作流,从而导致用户工作流不停执行,出现“无限循环”。

  • 操作流程 - 数据工坊 DWR

    操作流程 您首先需要在FunctionGraph导入自定义算子需要函数依赖包。然后需要在FunctionGraph创建自定义抽帧截图函数。之后需要在DWR工作流编排界面完成配置动态参数,创建同步工作流。最后触发工作流进行验证。 图1 操作流程 父主题: 抽帧截图(自定义算子)

  • 发布算子 - 数据工坊 DWR

    华为云统一身份认证(IAM)权限版本,1.0版本以服务为粒度,提供有限服务相关角色用于授权。1.1版本支持细粒度授权,可以精确到具体服务操作、资源以及请求条件等。 单击右下角“提交审核”。 审核通过后,算子将发布至算子市场。您可以过滤第三方算子提供方,查看您发布算子。 算子参数配置示例 Inputs参数

  • 发布算子 - 数据工坊 DWR

    华为云统一身份认证(IAM)权限版本,1.0版本以服务为粒度,提供有限服务相关角色用于授权。1.1版本支持细粒度授权,可以精确到具体服务操作、资源以及请求条件等。 单击右下角“提交审核”。 审核通过后,算子将发布至算子市场。您可以过滤第三方算子提供方,查看您发布算子。 算子参数配置示例 Inputs参数

  • 媒资转码 - 数据工坊 DWR

    媒资转码 场景介绍 执行MPC服务预置转码模板“DASH_H.265_4K_低码_1入9出”,将片源转为4K、2K、1080等码率视频。该模板实际调用是MPC服务新建转码任务接口。 约束与限制 媒资转码算子不支持同步返回,如您配置了同步工作流执行媒资转码算子,则会采用异步方式执行,且返回值会格式异常。

  • 创建视频转码工作流 - 数据工坊 DWR

    return ret 创建工作流。 关联步骤1自定义函数和“媒资转码”算子。拓扑图如图2所示。 需要关闭自定义算子和“媒资转码”算子动态参数开关。 图2 创建工作流 配置触发器。 触发器关联到需要做转码桶,并根据业务需要指定对象前、后缀。 填写配置信息如下: 触发器名称:“test-trans”

  • 创建工作流 - 数据工坊 DWR

    要进行“统一授权”。 单击界面右上角“创建工作流”,进入“工作流编排”页面。 将左侧预置模板或自定义函数拖拽至编排区域,同时在右侧属性面板配置基本属性和动态参数,配置完成后图标将由白色填充变为蓝色填充。 各预置模板及自定义函数参数配置说明,请参见官方算子一览。 使用视频解