已找到以下 28 条记录
AI智能搜索
产品选择
数据工坊 DWR
没有找到结果,请重新输入
产品选择
数据工坊 DWR
在搜索结果页开启AI智能搜索
开启
产品选择
没有找到结果,请重新输入
  • 一个事件触发器可以设置多个前缀或者后缀吗? - 数据工坊 DWR

    一个事件触发器可以设置多个前缀或者后缀吗? 不可以。 不过,用户可以为该工作流创建多条事件触发器来实现支持多个前缀或者后缀,当前一个桶支持绑定10个触发器。 例如对于媒资转码工作流,用户需要对后缀mp4mov两种格式的视频进行数据处理。用户需要为该给工作流创建两条触发器,一条用

  • 资源成本 - 数据工坊 DWR

    资源成本 表1 资源成本规划 资源 资源说明 数量 每月费用 OBS 算子请求OBS API。 1 通过算子对数据进行处理,都会涉及到对OBS API的调用,每调用一次API都计算一次请求次数。对象存储服务OBS会根据调用API的请求次数进行费用收取,收取详情参见OBS请求费用说明。

  • 资源成本 - 数据工坊 DWR

    资源成本 表1 资源成本规划 资源 资源说明 数量 每月费用 OBS 算子请求OBS API。 1 通过算子对数据进行处理,都会涉及到对OBS API的调用,每调用一次API都计算一次请求次数。对象存储服务OBS会根据调用API的请求次数进行费用收取,收取详情参见OBS请求费用说明。

  • 使用限制 - 数据工坊 DWR

    当前支持使用的区域为:北京四、上海一、上海二、广州、新加坡。 使用限制 当前仅支持OBS对象桶,不支持并行文件系统。 当前仅支持创建串行的工作流。 一个事件触发器仅支持关联一个工作流,一个工作流可同时被多个事件触发器关联。 当前暂不支持创建重名工作流,即使工作流被删除后,也不能再创建与之重名的工作流。 同一桶内的触发器名称不允许重复。

  • 视频解析 - 数据工坊 DWR

    率等。用于视频播放时获取时长,分辨率展示 等等。 流程一览 操作步骤 在OBS服务中创建桶 在OBS服务控制台创建两个桶,一个用于上传待处理的数据对象,一个用于存储处理后的数据对象。桶的详细介绍参见创建桶。 数据输入桶:“piccomp” 数据处理后输出桶:“piccomp-output”

  • 基本概念 - 数据工坊 DWR

    基本概念 工作流 工作流是DWR运行单位,其中可以包含一个或多个算子,客户可通过加入不同算子到工作流中实现高度自由化的数据处理功能。 算子 算子是DWR中的执行单位,是一个具有输入输出的完成功能模块。算子既有华为云提供的内置官方算子,也有经过华为云审核后的第三方算子。用户可以根据

  • 通过事件触发器异步启动工作流 - 数据工坊 DWR

    多个事件源类型可以作用于同一个目标对象,例如:同时选择“事件源类型”复选框中的Put、Copy、Delete等方法作用于某目标对象,则用户往该桶中上传、复制、删除符合前后缀规则的目标对象时,均会使触发器生效。ObjectCreated包含了Put、Post、CopyCompleteMu

  • 准备工作 - 数据工坊 DWR

    准备工作 注册华为账号并开通华为云,再完成实名认证 如果您已有一个华为账号,请跳到下一个任务。如果您还没有华为账号,请参考以下步骤创建。 根据提示信息完成注册。 注册成功后,系统会自动跳转至您的个人信息界面。 关于注册华为账号并开通华为云,请参见注册华为账号并开通华为云。 请参考实名认证完成个人或企业账号实名认证。

  • 应用场景 - 数据工坊 DWR

    量数据的快速处理是企业数据变现的核心诉求。DWR提供的高效、开放、易用的近数据处理能力,让视频处理、图片审核、文档压缩、灾难防治、数据搜索推荐、办公协同、基因测序等场景的海量数据快速产生价值。 DWR的应用场景包括但不限于以下典型场景。 表1 DWR典型应用场景 应用场景 场景下支持的能力

  • “无限循环”触发工作流如何处理? - 数据工坊 DWR

    对象匹配上了triggerB的条件(比如:两个触发器的前缀后缀不配置),最终,转码的输出会再次触发工作流,从而导致用户工作流workflowAworkflowB不停的执行,出现“无限循环”。 说明:triggerAtriggerB都不指定前后缀 图5 工作流配置workflowA

  • 官方算子一览 - 数据工坊 DWR

    设置缩略的类型。取值为lfit、mfit、fill、padfixed,默认值为lfit。 lfit:指定一个wh的矩形,将图片进行等比缩放,取在矩形内最大的图片。 mfit:指定一个wh的矩形,将图片进行等比缩放,取在矩形延伸区域的最小图片。 fill:指定一个wh的矩形,将图片进行等比缩放,取在

  • 媒资转码 - 数据工坊 DWR

    算子,则会采用异步方式执行,且返回值会格式异常。 流程一览 操作步骤 在OBS服务中创建桶 在OBS服务控制台创建两个桶,一个用于上传待处理的数据对象,一个用于存储处理后的数据对象。桶的详细介绍参见创建桶。 数据输入桶:“piccomp” 数据处理后输出桶:“piccomp-output”

  • 开发算子代码 - 数据工坊 DWR

    BS的endpoint,详情参见地区终端节点。 不同的region拥有不同的endpoint,其主要区别在于regionid,其值通过配置环境变量完成。 代码中最后一个return语句为必选代码块,工作流的执行过程中要求算子的返回结果为一个json体(对json中的内容无要求),否则将会发生执行异常。

  • 产品优势 - 数据工坊 DWR

    传统云上处理方式:使用云上存储服务和数据处理服务,数据写入存储服务后,再调用数据处理服务接口实现数据处理。 云上近数据处理方式:使用云上存储服务DWR的近数据处理能力,数据写入存储服务后,自动触发DWR编排的工作流完成数据处理。 表1 数据处理方式对比 对比项 传统线下处理 传统云上处理

  • 权限管理 - 数据工坊 DWR

    第一次使用DWR时,需要在控制台上根据提示对DWR进行统一授权。 授权内容: 授权DWR使用您的FunctionGraph服务DWR工作流中使用到的其他数据处理服务,用以创建函数通过函数调用其他数据处理服务的API,以便能根据工作流自动处理OBS桶中的数据。 授权过程用户无感知,只需一键操作,系统将自动为您创建IAM委托。

  • 示例:图片质量变换 - 数据工坊 DWR

    当前支持使用的区域为:北京四、上海一、上海二、广州、新加坡。 操作步骤 在OBS服务中创建桶 在OBS服务控制台创建两个桶,一个用于上传待处理的数据对象,一个用于存储处理后的数据对象。桶的详细介绍参见创建桶。 数据输入桶:“piccomp” 数据处理后输出桶:“piccomp-output”

  • 数据工坊 DWR - 数据工坊 DWR

    成长地图 | 华为云 数据工坊 数据工坊(Data Workroom,DWR)是一款近数据处理服务,通过易用的数据处理工作流编排开放生态的数据处理算子,能够在云上实现各种灵活的数据处理业务。 文档 立即体验 成长地图 由浅入深,带您玩转DWR 01 了解 了解华为云数据工坊DW

  • 自定义函数开发规范 - 数据工坊 DWR

    自定义函数开发规范 用户在自行开发自定义函数时,函数的输入参数输出参数需要遵守本节的开发规范。 自定义函数的编译方式请参考FunctionGraph的《开发指南》。 函数输入参数 工作流执行自定义函数时,函数输入参数的JSON格式的结构体环境变量的定义如下: 表1 函数输入的JSON格式体

  • 创建工作流 - 数据工坊 DWR

    工作流基本信息 参数 说明 工作流名称 - 工作流类型 DWR支持同步异步两种数据处理方式 匿名 对同步工作流设置是否可匿名访问 同步工作流支持异步启动。 支持同步工作流的自营算子参见官方算子一览。 同步工作流最后一个算子当前仅支持以下两种返回方式: 返回方式1:字符串数据 {

  • 什么是数据工坊 - 数据工坊 DWR

    Workroom,DWR)是一款近数据处理服务,通过易用的数据处理工作流编排开放生态的数据处理算子,能够在云上实现图像、视频、文档、图片等数据处理业务。 如图1所示,DWR主要对外提供开放的算子库和数据处理引擎。 算子库包含由DWR提供的华为自有算子第三方开发者提供的第三方算子。 华为自有算子的能力源