已找到以下 26 条记录
AI智能搜索
产品选择
数据工坊 DWR
没有找到结果,请重新输入
产品选择
数据工坊 DWR
在搜索结果页开启AI智能搜索
开启
产品选择
没有找到结果,请重新输入
  • 产品优势 - 数据工坊 DWR

    研或集成商数据处理软件,通过数据处理软件完成数据处理。 传统云上处理方式:使用云上存储服务和数据处理服务,数据写入存储服务后,再调用数据处理服务接口实现数据处理。 云上近数据处理方式:使用云上存储服务和DWR近数据处理能力,数据写入存储服务后,自动触发DWR编排工作流完成数据处理。

  • 与其他服务关系 - 数据工坊 DWR

    与其他服务关系 DWR数据处理数据源是华为云存储服务,DWR提供华为云自有算子是通过函数生成,且能力源是华为云数据处理相关云服务。因此,DWR与其他服务关系如表1所示。 表1 DWR与其他云服务关系 服务类别 服务名称 交互关系 存储服务 对象存储服务(Object Storage

  • 资源和成本 - 数据工坊 DWR

    API调用,每调用一次API都计算一次请求次数。对象存储服务OBS会根据调用API请求次数进行费用收取,收取详情参见OBS请求费用说明。 FunctionGraph函数 算子使用FunctionGraph函数工作流。 1 通过算子对数据进行处理,可能会使用到函数工作流资源,

  • 资源和成本 - 数据工坊 DWR

    API调用,每调用一次API都计算一次请求次数。对象存储服务OBS会根据调用API请求次数进行费用收取,收取详情参见OBS请求费用说明。 FunctionGraph函数 算子使用FunctionGraph函数工作流。 1 通过算子对数据进行处理,会使用到函数工作流资源,比

  • 数据处理介绍 - 数据工坊 DWR

    DWR如何实现数据处理 DWR提供近数据处理能力,可以对OBS内存储数据,按照用户编排工作流进行自动化处理(如解析、转码、截图等)。 DWR基于函数工作流FunctionGraph函数能力,将复杂业务处理逻辑编排为工作流,通过事件触发器或API驱动,自动化完成多项复杂数据处理任务。DW

  • 示例:图片质量变换 - 数据工坊 DWR

    在OBS服务中上传文件触发工作流执行 使用限制 当前支持使用区域为:北京四、上海一、上海二、广州、新加坡。 操作步骤 在OBS服务中创建桶 在OBS服务控制台创建两个桶,一个用于上传待处理数据对象,一个用于存储处理后数据对象。桶详细介绍参见创建桶。 数据输入桶:“piccomp”

  • 入门流程 - 数据工坊 DWR

    当需要使用DWR服务对OBS内存储数据自动进行多项复杂任务(如解析、转码、截图等)处理时,建议参考表1逐步操作。 表1 DWR使用流程简介 操作步骤 操作说明 步骤一:准备工作 注册华为云账号,并开通数据工坊DWR服务。 (可选)步骤二:浏览算子市场 在算子市场查找需要算子,了解已有算子功能。 步骤三:创建工作流

  • 计费说明 - 数据工坊 DWR

    表1 计费项 计费项 说明 OBS API调用费 算子请求OBS API调用费。 通过算子对数据进行处理,都会涉及到对OBS API调用,每调用一次API都计算一次请求次数。对象存储服务OBS会根据调用API请求次数进行费用收取,收取详情参见OBS请求费用说明。 FunctionGraph函数及函数工作流费

  • 应用场景 - 数据工坊 DWR

    未来几年时间,数据量将会呈数倍增长趋势,海量数据快速处理是企业数据变现核心诉求。DWR提供高效、开放、易用近数据处理能力,让视频处理、图片审核、文档压缩、灾难防治、数据搜索和推荐、办公协同、基因测序等场景海量数据快速产生价值。 DWR应用场景包括但不限于以下典型场景。 表1 DWR典型应用场景

  • 媒资转码 - 数据工坊 DWR

    在OBS服务控制台创建两个桶,一个用于上传待处理数据对象,一个用于存储处理后数据对象。桶详细介绍参见创建桶。 数据输入桶:“piccomp” 数据处理后输出桶:“piccomp-output” 这里创建两个桶是为了防止无限循环。因为处理后数据如果放在源桶,又跟事件触发器执行条件匹配,会继续触发工

  • 方案概述 - 数据工坊 DWR

    需要对视频抽帧截图时,在不编写额外代码情况下使用抽帧截图算子对视频进行指定时间点截帧。 约束限制 该抽帧截图算子目前暂不支持中文对象。 方案架构 1. 用户使用对象域名向OBS发送请求 2. DWR收到请求同步执行位于FunctionGraph视频截图抽帧算子实例,调用MPC服务

  • 视频解析 - 数据工坊 DWR

    视频解析 场景介绍 解析视频元数据信息,包括:视频时长、视频格式、码率等。用于视频播放时获取时长,分辨率展示 等等。 流程一览 操作步骤 在OBS服务中创建桶 在OBS服务控制台创建两个桶,一个用于上传待处理数据对象,一个用于存储处理后数据对象。桶详细介绍参见创建桶。 数据输入桶:“piccomp”

  • 创建视频转码工作流 - 数据工坊 DWR

    、视频截图等。视频转码前需要配置转码模板。 待转码音视频需要存储媒体处理服务同区域OBS桶中,且该OBS桶已授权。 1 由媒体处理服务MPC进行收费,详情查看计费说明。 操作步骤 创建解析对象元数据并封装MPC转码任务函数。 在FunctionGraph创建函数,选择“Python

  • 数据工坊 DWR - 数据工坊 DWR

    云图说合集 云图说系列,是您了解华为云必备利器 对象存储专题 汇聚云图说、视频、最佳实践,带您玩转华为云OBS 智能客服 您好!我是有问必答知识渊博智能问答机器人,有问题欢迎随时求助哦! 社区求助 华为云社区是华为云用户聚集地。这里有来自容器服务技术牛人,为您解决技术难题。

  • 官方算子一览 - 数据工坊 DWR

    圆角剪切 是 对象存储服务OBS 普通裁剪 是 对象存储服务OBS 索引剪切 是 对象存储服务OBS 图片水印 是 对象存储服务OBS 文字水印 是 对象存储服务OBS 缩略图 是 对象存储服务OBS 内切圆裁剪 是 对象存储服务OBS 自适应旋转 是 对象存储服务OBS 基础旋转

  • 测试算子功能 - 数据工坊 DWR

    查看工作流运行结果 输出值测试算子输出结果相同,表示算子已经完成测试,具备发布条件。具备发布条更重要是动态参数存在让用户拥有了算子交互接口。 动态参数中桶名称、对象是由用户输入参数,而触发器中桶名称、对象则是面向触发器使用,二者不可混淆。 父主题: 发布下载OBS对象算子

  • 自定义函数开发规范 - 数据工坊 DWR

    用户在自行开发自定义函数时,函数输入参数和输出参数需要遵守本节开发规范。 自定义函数编译方式请参考FunctionGraph《开发指南》。 函数输入参数 工作流执行自定义函数时,函数输入参数JSON格式结构体和环境变量定义如下: 表1 函数输入JSON格式体 名称 是否必选

  • 发布算子 - 数据工坊 DWR

    提供算子入参中动态参数对应参数值,其Key值需要与动态参数中保持一致。 动态参数(可选) 提供算子入参参数列表,可配置静态参数或动态参数,动态参数需要从Inputs参数中根据定义Key取值。 权限版本 华为云统一身份认证(IAM)权限版本,1.0版本以服务为粒度,提供有限服务相关角色用于授权。1

  • 开发算子代码 - 数据工坊 DWR

    OBS下载对象流程执行结果 AK/SK通过context 上下文对象保存,需要注意是这里AK/SK属于函数配置中委托,故AK/SK权限该委托中授权范围相同,如果需访问OBS,用户需要对委托进行授权并配置到FunctionGraph函数配置项中。 桶名以及对象名通过event进行获取。如图2

  • 通过事件触发器异步启动工作流 - 数据工坊 DWR

    触发器名称 事件触发器名称,用户自定义。同一桶内触发器名称不允许重复。 关联工作流 满足该事件触发器条件时,自动执行工作流。 事件源存储桶 事件发生源桶,即事件在该桶中发生时,触发关联工作流。 该参数不支持修改,默认为创建事件触发器桶。 事件源类型 使事件触发器生效事件源类型。目前,OBS支持以下事件源类型: