已找到以下 43 条记录
产品选择
数据工坊 DWR
没有找到结果,请重新输入
产品选择
数据工坊 DWR
产品选择
没有找到结果,请重新输入
  • 与其他服务关系 - 数据工坊 DWR

    与其他服务关系 DWR数据处理数据源是华为云存储服务,DWR提供华为云自有算子是通过函数生成,且能力源是华为云数据处理相关云服务。因此,DWR与其他服务关系如表1所示。 表1 DWR与其他云服务关系 服务类别 服务名称 交互关系 存储服务 对象存储服务(Object Storage

  • 方案概述 - 数据工坊 DWR

    需要对视频抽帧截图时,在不编写额外代码情况下使用抽帧截图算子对视频进行指定时间点截帧。 约束限制 该抽帧截图算子目前暂不支持中文对象。 方案架构 1. 用户使用对象域名向OBS发送请求 2. DWR收到请求同步执行位于FunctionGraph视频截图抽帧算子实例,调用MPC服务

  • 权限管理 - 数据工坊 DWR

    DWR ReadOnlyAccess 只读权限,拥有该权限用户仅能查看DWR服务数据。 系统策略 DWR操作资源权限关系列出了DWR常用操作系统权限授权关系,您可以参照该表选择合适系统权限。 表2 DWR操作资源权限关系 操作 DWR FullAccess DWR ReadOnlyAccess

  • 实施步骤 - 数据工坊 DWR

    其中委托需要创建能够授权工作流FunctionGraph访问OBS权限,创建方式参考创建委托。 函数创建成功后进入函数详情页添加依赖包。 在“代码依赖包”模块点击“添加依赖包”。 选择私有依赖包,添加步骤1中创建好依赖包 依赖添加成功后,在FunctionGraph控制台添加算子代码并保存部署。参考示例如下:

  • 发布下载OBS对象算子 - 数据工坊 DWR

    发布下载OBS对象算子 案例概述 开发算子代码 测试算子功能 发布算子

  • 案例概述 - 数据工坊 DWR

    测试算子:算子提供方在发布前可通过自定义算子方式完成DWRalpha调试,可有效降低发布后故障率,测试结果也是算子发布时重要审核项。 发布算子等待审核:算子提供方完成步骤4中测试后,进入到DWR控制台界面,根据提示信息提供必要资料提交审核。 本次实践将重点描述步骤3、4、5完成算子开发、测试、发布。 算子执行原理

  • 发布算子 - 数据工坊 DWR

    "obs:object:GetObject" ], "resource": [] } ] 单击右下角“提交审核”。 审核通过后,算子将发布至算子市场。您可以过滤第三方算子提供方,查看您发布算子。 父主题: 发布下载OBS对象算子

  • 开发算子代码 - 数据工坊 DWR

    OBS下载对象流程执行结果 AK/SK通过context 上下文对象保存,需要注意是这里AK/SK属于函数配置中委托,故AK/SK权限该委托中授权范围相同,如果需访问OBS,用户需要对委托进行授权并配置到FunctionGraph函数配置项中。 桶名以及对象名通过event进行获取。如图2

  • 测试算子功能 - 数据工坊 DWR

    输出值与测试算子的输出结果相同,表示算子已经完成测试,具备发布条件。具备发布条更重要是动态参数存在让用户拥有了算子交互接口。 动态参数中桶名称、对象是由用户输入参数,而触发器中桶名称、对象则是面向触发器使用,二者不可混淆。 父主题: 发布下载OBS对象算子

  • 数据工坊 DWR - 数据工坊 DWR

    产品介绍 什么是数据工坊 产品优势 应用场景 使用限制 计费说明 权限管理 与其他服务关系 基本概念 03 使用 通过DWR提供近数据处理能力,您可以对OBS内存储数据按照编排工作流进行自动化处理(如解析、转码、截图等)。 算子管理 算子市场 发布算子 华为算子一览 数据处理

  • 使用限制 - 数据工坊 DWR

    当前暂不支持创建重名工作流,即使工作流被删除后,也不能再创建之重名工作流。 同一桶内触发器名称不允许重复。 工作流及工作流中使用FunctionGraph、数据处理服务、消息通知服务、OBS桶等均需要在相同区域默认项目下。 细粒度授权不支持企业项目。 一个桶支持绑定10个事件触发器。 当前发布算子功能仅支持IAM主账号。

  • 官方算子一览 - 数据工坊 DWR

    lfit:指定一个w和h矩形,将图片进行等比缩放,取在矩形内最大图片。 mfit:指定一个w和h矩形,将图片进行等比缩放,取在矩形延伸区域最小图片。 fill:指定一个w和h矩形,将图片进行等比缩放,取在延伸区域最小图片,并进行居中剪切。即将mfit缩略类型图片进行居中剪裁。

  • 方案概述 - 数据工坊 DWR

    方案概述 应用场景 需要对视频抽帧截图时,在不编写额外代码情况下使用抽帧截图算子对视频进行指定时间点截帧。 约束限制 该抽帧截图算子目前暂不支持中文对象。 方案架构 方案优势 用户自定义算子,无需依赖额外服务,功能更灵活。 父主题: 抽帧截图(自定义算子)

  • 数据处理介绍 - 数据工坊 DWR

    DWR如何实现数据处理 DWR提供近数据处理能力,可以对OBS内存储数据,按照用户编排工作流进行自动化处理(如解析、转码、截图等)。 DWR基于函数工作流FunctionGraph函数能力,将复杂业务处理逻辑编排为工作流,通过事件触发器或API驱动,自动化完成多项复杂数据处理任务。DW

  • 媒资转码 - 数据工坊 DWR

    媒资转码 场景介绍 执行MPC服务预置转码模板“DASH_H.265_4K_低码_1入9出”,将片源转为4K、2K、1080等码率视频。该模板实际调用是MPC服务新建转码任务接口。 约束限制 媒资转码算子不支持同步返回,如您配置了同步工作流执行媒资转码算子,则会采用异步方式执行,且返回值会格式异常。

  • 通过事件触发器异步启动工作流 - 数据工坊 DWR

    触发器名称 事件触发器名称,用户自定义。同一桶内触发器名称不允许重复。 关联工作流 满足该事件触发器条件时,自动执行工作流。 事件源存储桶 事件发生源桶,即事件在该桶中发生时,触发关联工作流。 该参数不支持修改,默认为创建事件触发器桶。 事件源类型 使事件触发器生效事件源类型。目前,OBS支持以下事件源类型:

  • 应用场景 - 数据工坊 DWR

    未来几年时间,数据量将会呈数倍增长趋势,海量数据快速处理是企业数据变现核心诉求。DWR提供高效、开放、易用近数据处理能力,让视频处理、图片审核、文档压缩、灾难防治、数据搜索和推荐、办公协同、基因测序等场景海量数据快速产生价值。 DWR应用场景包括但不限于以下典型场景。 表1 DWR典型应用场景

  • 发布算子 - 数据工坊 DWR

    提供算子入参中动态参数对应参数值,其Key值需要与动态参数中保持一致。 动态参数(可选) 提供算子入参参数列表,可配置静态参数或动态参数,动态参数需要从Inputs参数中根据定义Key取值。 权限版本 华为云统一身份认证(IAM)权限版本,1.0版本以服务为粒度,提供有限服务相关角色用于授权。1

  • 创建用户并授权使用DWR - 数据工坊 DWR

    根据企业用户职能,设置不同访问权限,以达到用户之间权限隔离。 将DWR资源委托给更专业、高效其他华为云账号或者云服务,这些账号或者云服务可以根据权限进行代运维。 如果华为云账号已经能满足您要求,不需要创建独立IAM用户,您可以跳过本章节,不影响您使用DWR服务其它功能。

  • 自定义函数开发规范 - 数据工坊 DWR

    用户在自行开发自定义函数时,函数输入参数和输出参数需要遵守本节开发规范。 自定义函数编译方式请参考FunctionGraph《开发指南》。 函数输入参数 工作流执行自定义函数时,函数输入参数JSON格式结构体和环境变量定义如下: 表1 函数输入JSON格式体 名称 是否必选