检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
最新动态 本文介绍了数据工坊各特性版本的功能发布和对应的文档动态，欢迎体验。 序号 功能名称 功能描述 阶段 相关文档 1 数据工坊全新公测上线 数据工坊通过易用的数据处理工作流编排和开放生态的数据处理算子，能够在云上实现各种灵活的数据处理业务。 公测 什么是数据工坊
多条事件触发器来实现支持多个前缀或者后缀。 当前一个事件触发器支持设置一个前缀或者后缀，一个桶支持绑定10个触发器。 例如：对于媒资转码工作流，用户需要对后缀mp4和mov两种格式的视频进行数据处理。用户需要为该给工作流创建两个触发器，一个用于触发mp4格式的数据处理，一个用于触发mov格式的数据处理。
动态参数 sync 视频解析处理模式。 排队处理：查询后仅返回任务ID，还需进一步调用查询视频解析任务接口才能获取到视频元数据。 同步处理：查询后将直接返回视频元数据。 bucket 视频解析输出桶，用于保存解析后的视频。 输出桶需要和DWR工作流在同一区域，工作流所属区域为创建工作
定义算子需要的函数依赖包。然后需要在FunctionGraph创建自定义抽帧截图函数。之后需要在DWR工作流编排界面完成配置动态参数，创建同步工作流。最后触发工作流进行验证。 图1 操作流程 父主题： 抽帧截图（自定义算子）
API调用费、FunctionGraph函数及函数工作流费、算子费。 表1 计费项 计费项 说明 OBS API调用费 算子请求OBS API的调用费。 通过算子对数据进行处理，都会涉及到对OBS API的调用，每调用一次API都计算一次请求次数。对象存储服务OBS会根据调用API的请求次数进行费用收取，收取详情参见OBS请求费用说明。
为桶tes-workflow-sh1的output目录 tar: 抽帧截图图片是否需要压缩， 选择否 sync: 是否同步处理图片，目前只有按照时间点截图支持同步 type: 抽帧截图的采样类型，选择按照时间点截图 format:输出截图格式，目前只支持jpg格式 max_length:
开发指南。通过对该示例算子开发方式的说明，能够帮助算子开发者快速适应开发流程。通过本节将学到以下内容： 算子代码的入口结构 如何在算子中获得AK/SK 如何通过算子访问OBS 操作步骤 登录FunctionGraph控制台创建python函数，创建详情参见创建事件函数。 函数类型
指定时间点截帧。 约束与限制 该抽帧截图算子目前暂不支持中文对象。 方案架构 1. 用户使用对象域名向OBS发送请求 2. DWR收到请求同步执行位于FunctionGraph的视频截图抽帧算子实例，调用MPC服务 3. MPC服务完成抽帧截图，将结果写回租户桶 4. DWR读取租户桶并将结果返回给用户
场景介绍 解析视频的元数据信息，包括：视频时长、视频格式、码率等。用于视频播放时获取时长，分辨率展示 等等。 流程一览 操作步骤 在OBS服务中创建桶 在OBS服务控制台创建两个桶，一个用于上传待处理的数据对象，一个用于存储处理后的数据对象。桶的详细介绍参见创建桶。 数据输入桶：“piccomp”
您需要确保账户有足够金额。 关于DWR收费标准，请参见计费说明。 关于充值，请参见如何给华为云账户充值。 创建IAM用户 IAM用户由账号管理员创建并管理，可以确保账号及资源的安全性，有关IAM的详细介绍请参见IAM用户。此处介绍如何创建一个具有DWR访问权限的IAM用户。如果您不需要使用IAM用户，可以略过此部分内容。
应用场景 未来几年时间，数据量将会呈数倍增长趋势，海量数据的快速处理是企业数据变现的核心诉求。DWR提供的高效、开放、易用的近数据处理能力，让视频处理、图片审核、文档压缩、灾难防治、数据搜索和推荐、办公协同、基因测序等场景的海量数据快速产生价值。 DWR的应用场景包括但不限于以下典型场景。
资源和成本 表1 资源和成本规划 资源 资源说明 数量 每月费用 OBS 算子请求OBS API。 1 通过算子对数据进行处理，都会涉及到对OBS API的调用，每调用一次API都计算一次请求次数。对象存储服务OBS会根据调用API的请求次数进行费用收取，收取详情参见OBS请求费用说明。
Service，OBS） OBS作为DWR数据处理的数据源，当上传至OBS或存储在OBS的数据产生的事件满足触发器规则时，DWR将自动启动关联的工作流进行数据处理。 函数服务 函数工作流（FunctionGraph） DWR中由华为云提供的自有算子均是利用数据处理服务的API，通过FunctionGraph封装而成。
"thumb_out", }, //是否压缩抽帧图片生成tar包。 Tar: 0, //是否同步处理，同步处理是指不下载全部文件，快速定位到截图位置进行截图。 Mode: 0, //截图参数 ThumbnailParam:
创建工作流之后，可以通过创建事件触发器来为工作流设置执行条件，指定桶内什么数据在执行某类操作后开始执行工作流。 前提条件 已完成工作流创建。 约束与限制 一个桶支持绑定10个事件触发器。 操作步骤 登录管理控制台。在左侧导航栏上方，单击，选择“存储 > 数据工坊DWR”。 进入DWR页面。 在左侧导航栏选择“工作流”，进入“工作流”页面。
通过API异步启动工作流 DWR支持通过API异步启动已有工作流，详情参见API异步启动工作流。 父主题： 启动工作流
并且与其他数据处理服务相互配合进行数据处理。主要分以下两个方面： 第一次使用DWR时，需要在控制台上根据提示对DWR进行统一授权。 授权内容： 授权DWR使用您的FunctionGraph服务和DWR工作流中使用到的其他数据处理服务，用以创建函数和通过函数调用其他数据处理服务的A
自定义函数。 加入动态参数f（截图秒数frame），h（输出图片高度height），w（输出图片宽度width）。 点击保存工作流。可选择同步并支持匿名访问 保存成功后通过url方式触发工作流。其中可以指定参数f（截图秒数frame）,h（输出图片高度）获得截帧结果。 https
当前暂不支持创建重名工作流，即使工作流被删除后，也不能再创建与之重名的工作流。 同一桶内的触发器名称不允许重复。 工作流及工作流中使用的FunctionGraph、数据处理服务、消息通知服务、OBS桶等均需要在相同区域的默认项目下。 细粒度授权不支持企业项目。 一个桶支持绑定10个事件触发器。 当前发布算子功能仅支持IAM主账号。
测试算子功能 当算子功能代码开发完毕后，可以在DWR工作流中使用或进行上线前的测试。本节主要介绍如何使用DWR的自定义工作流来测试算子的功能。 测试算子功能 登录DWR控制台， 在工作流页面点击“创建工作流”进入工作流编排界面。 将左侧“自定义”算子拖拽至编排区域。 鼠标单击各流
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
