已找到以下 43 条记录。
产品选择
数据工坊 DWR
没有找到结果,请重新输入
产品选择
数据工坊 DWR
产品选择
没有找到结果,请重新输入
  • DWR自定义策略 - 数据工坊 DWR

    DWR自定义策略 如果系统预置DWR权限,不满足您授权要求,可以创建自定义策略。 目前华为云支持以下两种方式创建自定义策略: 可视化视图创建自定义策略:无需了解策略语法,按可视化视图导航栏选择云服务、操作、资源、条件等策略内容,可自动生成策略。 JSON视图创建自定义策略:可

  • 与其他服务关系 - 数据工坊 DWR

    Service,OBS) OBS作为DWR数据处理数据源,当上传至OBS或存储在OBS数据产生事件满足触发器规则时,DWR将自动启动关联工作流进行数据处理。 函数服务 函数工作流(FunctionGraph) DWR由华为云提供自有算子均是利用数据处理服务API,通过FunctionGraph封装而成。

  • 发布下载OBS对象算子 - 数据工坊 DWR

    发布下载OBS对象算子 案例概述 开发算子代码 测试算子功能 发布算子

  • 发布算子 - 数据工坊 DWR

    发布算子 当完成算子开发、算子在工作流测试后,即可在DWR上将算子发布到算子市场。 操作步骤 在DWR控制台“发布算子”页面,单击界面右上角“发布公共算子”。 配置算子基本信息。 表1 配置基本信息 参数 说明 算子名称 不能与本用户已有的算子重名。 算子提供方 - 算子描述

  • 案例概述 - 数据工坊 DWR

    测试算子:算子提供方在发布前可通过自定义算子方式完成DWRalpha调试,可有效降低发布后故障率,测试结果也是算子发布时重要审核项。 发布算子等待审核:算子提供方完成步骤4测试后,进入到DWR控制台界面,根据提示信息提供必要资料提交审核。 本次实践将重点描述步骤3、4、5完成算子开发、测试、发布。 算子执行原理

  • 测试算子功能 - 数据工坊 DWR

    输出值与测试算子输出结果相同,表示算子已经完成测试,具备发布条件。具备发布条更重要是动态参数存在让用户拥有了与算子交互接口。 动态参数桶名称、对象是由用户输入参数,而触发器桶名称、对象则是面向触发器使用,二者不可混淆。 父主题: 发布下载OBS对象算子

  • 开发算子代码 - 数据工坊 DWR

    上下文对象保存,需要注意是这里AK/SK属于函数配置委托,故AK/SK权限与该委托授权范围相同,如果需访问OBS,用户需要对委托进行授权并配置到FunctionGraph函数配置项。 桶名以及对象名通过event进行获取。如图2所示,桶名、对象等信息保存在event,代码中d

  • 基本概念 - 数据工坊 DWR

    子,客户可通过加入不同算子到工作流实现高度自由化数据处理功能。 算子 算子是DWR执行单位,是一个具有输入输出完成功能模块。算子既有华为云提供内置官方算子,也有经过华为云审核后第三方算子。用户可以根据自己需求挑选算子加入工作流,从而快速构建特有的数据处理功能。 触发器

  • 示例:图片质量变换 - 数据工坊 DWR

    对于需要对大量图片文件进行压缩,快速发布上线场景,可以使用DWR可视化质量变换工作流来完成任务,帮助用户提升图片处理效率,节省内容发布时间。 实现流程 该实例通过创建触发器方式异步启动工作流,实现流程为: 在OBS服务创建桶 在DWR服务创建工作流 在DWR服务创建事件触发器 在OBS服务中上传文件触发工作流执行

  • 创建用户并授权使用DWR - 数据工坊 DWR

    根据企业用户职能,设置不同访问权限,以达到用户之间权限隔离。 将DWR资源委托给更专业、高效其他华为云账号或者云服务,这些账号或者云服务可以根据权限进行代运维。 如果华为云账号已经能满足您要求,不需要创建独立IAM用户,您可以跳过本章节,不影响您使用DWR服务其它功能。

  • 创建工作流 - 数据工坊 DWR

    使用视频解析、抽帧截图、媒资转码等模板需要先在MPC开启桶授权,详情请参见权限说明。 鼠标单击各流程图标下方小圆圈并长按拖拽,将工作流完整串联起来。 当前仅支持串行工作流。 图1 串联后完整工作流 单击右上角“保存”,填写工作流基本信息,如表1所示。 创建完成所有同区域工作流,都将在工作流列

  • 权限管理 - 数据工坊 DWR

    不允许删除DWR权限,控制他们对DWR资源使用范围。 如果华为云账号已经能满足您要求,不需要创建独立IAM用户进行权限管理,您可以跳过本章节,不影响您使用DWR服务其它功能。 IAM是华为云提供权限管理基础服务,无需付费即可使用,您只需要为您账号资源进行付费。关于

  • 视频解析 - 数据工坊 DWR

    视频解析 场景介绍 解析视频元数据信息,包括:视频时长、视频格式、码率等。用于视频播放时获取时长,分辨率展示 等等。 流程一览 操作步骤 在OBS服务创建桶 在OBS服务控制台创建两个桶,一个用于上传待处理数据对象,一个用于存储处理后数据对象。桶详细介绍参见创建桶。 数据输入桶:“piccomp”

  • 实施步骤 - 数据工坊 DWR

    其中委托需要创建能够授权工作流FunctionGraph访问OBS权限,创建方式参考创建委托。 函数创建成功后进入函数详情页添加依赖包。 在“代码依赖包”模块点击“添加依赖包”。 选择私有依赖包,添加步骤1创建好依赖包 依赖添加成功后,在FunctionGraph控制台添加算子代码并保存部署。参考示例如下:

  • 媒资转码 - 数据工坊 DWR

    在OBS服务创建桶 在OBS服务控制台创建两个桶,一个用于上传待处理数据对象,一个用于存储处理后数据对象。桶详细介绍参见创建桶。 数据输入桶:“piccomp” 数据处理后输出桶:“piccomp-output” 这里创建两个桶是为了防止无限循环。因为处理后数据如果放在

  • 官方算子一览 - 数据工坊 DWR

    不能和同一工作流其他任务重名 超时(秒) 任务超时时间,即任务执行最长时间。 支持设置0~300秒超时时间,如果设置为0,则表示超时时间为默认值30秒。 算子提供方 函数模板提供方。 错误处理 可定义不同类型错误发生时重试次数、重试间隔,以及重试失败后跳转到目标任务。

  • 自定义函数开发规范 - 数据工坊 DWR

    用户在自行开发自定义函数时,函数输入参数和输出参数需要遵守本节开发规范。 自定义函数编译方式请参考FunctionGraph《开发指南》。 函数输入参数 工作流执行自定义函数时,函数输入参数JSON格式结构体和环境变量定义如下: 表1 函数输入JSON格式体 名称 是否必选

  • 应用场景 - 数据工坊 DWR

    未来几年时间,数据量将会呈数倍增长趋势,海量数据快速处理是企业数据变现核心诉求。DWR提供高效、开放、易用近数据处理能力,让视频处理、图片审核、文档压缩、灾难防治、数据搜索和推荐、办公协同、基因测序等场景海量数据快速产生价值。 DWR应用场景包括但不限于以下典型场景。 表1 DWR典型应用场景

  • 数据处理介绍 - 数据工坊 DWR

    DWR如何实现数据处理 DWR提供近数据处理能力,可以对OBS内存储数据,按照用户编排工作流进行自动化处理(如解析、转码、截图等)。 DWR基于函数工作流FunctionGraph函数能力,将复杂业务处理逻辑编排为工作流,通过事件触发器或API驱动,自动化完成多项复杂数据处理任务。DW

  • 算子市场介绍 - 数据工坊 DWR

    算子市场介绍 算子市场即为DWR提供算子库,提供方包括华为和第三方。 华为云自有算子能力源是华为云数据处理相关云服务,如媒体处理MPC、图像识别Image等,DWR将云服务提供各种数据处理能力通过函数生成算子并在算子市场发布。 第三方算子是基于DWR算子注册能力,由第三方开发者