已找到以下 45 条记录
AI智能搜索
产品选择
数据工坊 DWR
没有找到结果,请重新输入
产品选择
数据工坊 DWR
在搜索结果页开启AI智能搜索
开启
产品选择
没有找到结果,请重新输入
  • 数据处理介绍 - 数据工坊 DWR

    供图形化界面,方便用户直观便捷构建数据处理流程,同时提供了预置算子自定义函数能力,覆盖数据处理各种场景。预置算子详细介绍,请参见官方算子一览。用户在自行开发自定义函数时,函数输入参数输出参数需要遵守自定义函数开发规范。 DWR支持异步同步两种方式启动工作流,其中同步方式支持直接返回数据:

  • 开发算子代码 - 数据工坊 DWR

    中配置参数。这也是算子提供方获取用户配置参数主要方式,后文将对该参数进行更加详细介绍。bucketname以及object值根据测试需要,点击函数测试参数配置。 obsclient形参中server参数为OBSendpoint,详情参见地区终端节点。 不同regi

  • 资源成本 - 数据工坊 DWR

    资源成本 表1 资源成本规划 资源 资源说明 数量 每月费用 OBS 算子请求OBS API。 1 通过算子对数据进行处理,都会涉及到对OBS API调用,每调用一次API都计算一次请求次数。对象存储服务OBS会根据调用API请求次数进行费用收取,收取详情参见OBS请求费用说明。

  • 资源成本 - 数据工坊 DWR

    资源成本 表1 资源成本规划 资源 资源说明 数量 每月费用 OBS 算子请求OBS API。 1 通过算子对数据进行处理,都会涉及到对OBS API调用,每调用一次API都计算一次请求次数。对象存储服务OBS会根据调用API请求次数进行费用收取,收取详情参见OBS请求费用说明。

  • 与其他服务关系 - 数据工坊 DWR

    与其他服务关系 DWR数据处理数据源是华为云存储服务,DWR提供华为云自有算子是通过函数生成,且能力源是华为云数据处理相关云服务。因此,DWR与其他服务关系如表1所示。 表1 DWR与其他云服务关系 服务类别 服务名称 交互关系 存储服务 对象存储服务(Object Storage

  • 发布下载OBS对象算子 - 数据工坊 DWR

    发布下载OBS对象算子 案例概述 开发算子代码 测试算子功能 发布算子

  • 发布算子 - 数据工坊 DWR

    "obs:object:GetObject" ], "resource": [] } ] 单击右下角“提交审核”。 审核通过后,算子将发布至算子市场。您可以过滤第三方算子提供方,查看您发布算子。 父主题: 发布下载OBS对象算子

  • 案例概述 - 数据工坊 DWR

    测试算子:算子提供方在发布前可通过自定义算子方式完成DWRalpha调试,可有效降低发布后故障率,测试结果也是算子发布时重要审核项。 发布算子等待审核:算子提供方完成步骤4中测试后,进入到DWR控制台界面,根据提示信息提供必要资料提交审核。 本次实践将重点描述步骤3、4、5完成算子开发、测试、发布。 算子执行原理

  • 测试算子功能 - 数据工坊 DWR

    输出值与测试算子的输出结果相同,表示算子已经完成测试,具备发布条件。具备发布条更重要是动态参数存在让用户拥有了与算子交互接口。 动态参数中桶名称、对象是由用户输入参数,而触发器中桶名称、对象则是面向触发器使用,二者不可混淆。 父主题: 发布下载OBS对象算子

  • 最新动态 - 数据工坊 DWR

    最新动态 本文介绍了数据工坊各特性版本功能发布对应文档动态,欢迎体验。 序号 功能名称 功能描述 阶段 相关文档 1 数据工坊全新公测上线 数据工坊通过易用数据处理工作流编排开放生态数据处理算子,能够在云上实现各种灵活数据处理业务。 公测 什么是数据工坊

  • 自定义函数开发规范 - 数据工坊 DWR

    用户在自行开发自定义函数时,函数输入参数输出参数需要遵守本节开发规范。 自定义函数编译方式请参考FunctionGraph《开发指南》。 函数输入参数 工作流执行自定义函数时,函数输入参数JSON格式结构体环境变量定义如下: 表1 函数输入JSON格式体 名称 是否必选

  • 什么是数据工坊 - 数据工坊 DWR

    Workroom,DWR)是一款近数据处理服务,通过易用数据处理工作流编排开放生态数据处理算子,能够在云上实现图像、视频、文档、图片等数据处理业务。 如图1所示,DWR主要对外提供开放算子库和数据处理引擎。 算子库包含由DWR提供华为自有算子第三方开发者提供第三方算子。 华为自有算子能力源是华为云数据

  • 应用场景 - 数据工坊 DWR

    未来几年时间,数据量将会呈数倍增长趋势,海量数据快速处理是企业数据变现核心诉求。DWR提供高效、开放、易用近数据处理能力,让视频处理、图片审核、文档压缩、灾难防治、数据搜索推荐、办公协同、基因测序等场景海量数据快速产生价值。 DWR应用场景包括但不限于以下典型场景。 表1 DWR典型应用场景

  • 算子市场介绍 - 数据工坊 DWR

    算子市场介绍 算子市场即为DWR提供算子库,提供方包括华为第三方。 华为云自有算子能力源是华为云数据处理相关云服务,如媒体处理MPC、图像识别Image等,DWR将云服务提供各种数据处理能力通过函数生成算子并在算子市场发布。 第三方算子是基于DWR算子注册能力,由第三方开发者

  • 官方算子一览 - 数据工坊 DWR

    设置缩略类型。取值为lfit、mfit、fill、padfixed,默认值为lfit。 lfit:指定一个wh矩形,将图片进行等比缩放,取在矩形内最大图片。 mfit:指定一个wh矩形,将图片进行等比缩放,取在矩形延伸区域最小图片。 fill:指定一个wh矩形,

  • 一个事件触发器可以设置多个前缀或者后缀吗? - 数据工坊 DWR

    一个桶支持绑定10个触发器。 例如对于媒资转码工作流,用户需要对后缀mp4mov两种格式视频进行数据处理。用户需要为该给工作流创建两条触发器,一条用于触发mp4格式数据处理,一条用于触发mov格式数据处理。

  • 产品优势 - 数据工坊 DWR

    研或集成商数据处理软件,通过数据处理软件完成数据处理。 传统云上处理方式:使用云上存储服务和数据处理服务,数据写入存储服务后,再调用数据处理服务接口实现数据处理。 云上近数据处理方式:使用云上存储服务DWR近数据处理能力,数据写入存储服务后,自动触发DWR编排工作流完成数据处理。

  • “无限循环”触发工作流如何处理? - 数据工坊 DWR

    ggerB条件(比如:两个触发器前缀后缀不配置),最终,转码输出会再次触发工作流,从而导致用户工作流workflowAworkflowB不停执行,出现“无限循环”。 说明:triggerAtriggerB都不指定前后缀 图5 工作流配置workflowA 图6 工作流配置workflowB

  • 权限管理 - 数据工坊 DWR

    不允许删除DWR权限,控制他们对DWR资源使用范围。 如果华为云账号已经能满足您要求,不需要创建独立IAM用户进行权限管理,您可以跳过本章节,不影响您使用DWR服务其它功能。 IAM是华为云提供权限管理基础服务,无需付费即可使用,您只需要为您账号中资源进行付费。关于

  • 创建用户并授权使用DWR - 数据工坊 DWR

    根据企业用户职能,设置不同访问权限,以达到用户之间权限隔离。 将DWR资源委托给更专业、高效其他华为云账号或者云服务,这些账号或者云服务可以根据权限进行代运维。 如果华为云账号已经能满足您要求,不需要创建独立IAM用户,您可以跳过本章节,不影响您使用DWR服务其它功能。