已找到以下 38 条记录
AI智能搜索
产品选择
数据工坊 DWR
没有找到结果,请重新输入
产品选择
数据工坊 DWR
在搜索结果页开启AI智能搜索
开启
产品选择
没有找到结果,请重新输入
  • “无限循环”触发工作流如何处理? - 数据工坊 DWR

    作流中使用了内置“媒资转码”函数,且配置“媒资转码”函数转码输出桶为桶A。然后,在桶A上配置触发器关联工作流workflowA。如果自定义函数输出对象前缀或后缀匹配触发器triggerA前后缀条件(比如:前缀和后缀不配置,或者对象满足触发器条件),则转码输出会再次触发工

  • 如何测试算子 - 数据工坊 DWR

    如何测试算子 当算子功能代码开发完毕后,可以在DWR工作流中使用自定义工作流进行测试。请参考测试算子功能。

  • 与其他服务关系 - 数据工坊 DWR

    与其他服务关系 DWR数据处理数据源是华为云存储服务,DWR提供华为云自有算子是通过函数生成,且能力源是华为云数据处理相关云服务。因此,DWR与其他服务关系如表1所示。 表1 DWR与其他云服务关系 服务类别 服务名称 交互关系 存储服务 对象存储服务(Object Storage

  • 示例:图片质量变换 - 数据工坊 DWR

    将图片压缩。 触发器执行存在一定延时,大概5分钟生效。 图3 上传文件 查看图片压缩效果 压缩后图片存放在piccomp-output桶output文件夹中。如图4所示,图片大小均有变小,实现了对图片压缩。 图4 压缩图片 (可选)查看运行记录 在DWR控制台左侧导航栏选择“工作流”,进入“工作流”页面

  • 权限管理 - 数据工坊 DWR

    如果您需要对华为云上购买DWR资源,为企业中员工设置不同访问权限,以达到不同员工之间权限隔离,您可以使用统一身份认证服务(Identity and Access Management,简称IAM)进行精细权限管理。该服务提供用户身份认证、权限分配、访问控制等功能,可以帮助您安全控制华为云资源的访问。

  • 创建用户并授权使用DWR - 数据工坊 DWR

    根据企业用户职能,设置不同访问权限,以达到用户之间权限隔离。 将DWR资源委托给更专业、高效其他华为云账号或者云服务,这些账号或者云服务可以根据权限进行代运维。 如果华为云账号已经能满足您要求,不需要创建独立IAM用户,您可以跳过本章节,不影响您使用DWR服务其它功能。

  • 开发算子代码 - 数据工坊 DWR

    OBS下载对象流程执行结果 AK/SK通过context 上下文对象保存,需要注意是这里AK/SK属于函数配置中委托,故AK/SK权限与该委托中授权范围相同,如果需访问OBS,用户需要对委托进行授权并配置到FunctionGraph函数配置项中。 桶名以及对象名通过event进行获取。如图2

  • 准备工作 - 数据工坊 DWR

    保账号及资源安全性,有关IAM详细介绍请参见IAM用户。此处介绍如何创建一个具有DWR访问权限IAM用户。如果您不需要使用IAM用户,可以略过此部分内容。 在华为云官网,单击页面右上角“控制台”,使用注册账号登录控制台。 在“控制台”页面,鼠标移动至右上方用户名,在下拉列表中选择“统一身份认证”。

  • 实施步骤 - 数据工坊 DWR

    其中委托需要创建能够授权工作流FunctionGraph访问OBS权限,创建方式参考创建委托。 函数创建成功后进入函数详情页添加依赖包。 在“代码依赖包”模块点击“添加依赖包”。 选择私有依赖包,添加步骤1中创建好依赖包 依赖添加成功后,在FunctionGraph控制台添加算子代码并保存部署。参考示例如下:

  • 媒资转码 - 数据工坊 DWR

    在OBS服务控制台创建两个桶,一个用于上传待处理数据对象,一个用于存储处理后数据对象。桶详细介绍参见创建桶。 数据输入桶:“piccomp” 数据处理后输出桶:“piccomp-output” 这里创建两个桶是为了防止无限循环。因为处理后数据如果放在源桶,又跟事件触发器执行条件匹配,会继续触发工

  • 创建工作流 - 数据工坊 DWR

    时需要进行“统一授权”。 单击界面右上角“创建工作流”,进入“工作流编排”页面。 将左侧预置模板或自定义函数拖拽至编排区域,同时在右侧属性面板配置基本属性和动态参数,配置完成后图标将由白色填充变为蓝色填充。 各预置模板及自定义函数参数配置说明,请参见官方算子一览。 使用视

  • 实施步骤 - 数据工坊 DWR

    按照指定时间点截图并输出最长边尺寸为480棘突,参数修改如下: bucket: 抽帧截图结果输出桶名,如图所示填为test-workflow-sh1 output: 抽帧截图结果在输出桶下输出路径如图中所示输出图片路径为桶tes-workflow-sh1output目录 tar: 抽帧截图图片是否需要压缩,

  • 产品优势 - 数据工坊 DWR

    研或集成商数据处理软件,通过数据处理软件完成数据处理。 传统云上处理方式:使用云上存储服务和数据处理服务,数据写入存储服务后,再调用数据处理服务接口实现数据处理。 云上近数据处理方式:使用云上存储服务和DWR近数据处理能力,数据写入存储服务后,自动触发DWR编排工作流完成数据处理。

  • 测试算子功能 - 数据工坊 DWR

    听对象变化将会触发工作流执行,这一步我们将上传符合监听事件对象。 在事件源存储桶中创建一个目录testdir 并上传.png结尾文件至testdir目录下。 回到DWR工作流列表界面,点击“运行记录”查看工作流执行结果。 图4 查看工作流运行结果 输出值与测试算子输出结

  • 自定义函数开发规范 - 数据工坊 DWR

    用户在自行开发自定义函数时,函数输入参数和输出参数需要遵守本节开发规范。 自定义函数编译方式请参考FunctionGraph《开发指南》。 函数输入参数 工作流执行自定义函数时,函数输入参数JSON格式结构体和环境变量定义如下: 表1 函数输入JSON格式体 名称 是否必选

  • 案例概述 - 数据工坊 DWR

    测试算子:算子提供方在发布前可通过自定义算子方式完成DWRalpha调试,可有效降低发布后故障率,测试结果也是算子发布时重要审核项。 发布算子等待审核:算子提供方完成步骤4中测试后,进入到DWR控制台界面,根据提示信息提供必要资料提交审核。 本次实践将重点描述步骤3、4、5完成算子开发、测试、发布。 算子执行原理

  • 发布算子 - 数据工坊 DWR

    "obs:object:GetObject" ], "resource": [] } ] 单击右下角“提交审核”。 审核通过后,算子将发布至算子市场。您可以过滤第三方算子提供方,查看您发布算子。 父主题: 发布下载OBS对象算子

  • 发布算子 - 数据工坊 DWR

    1版本支持细粒度授权,可以精确到具体服务操作、资源以及请求条件等。 单击右下角“提交审核”。 审核通过后,算子将发布至算子市场。您可以过滤第三方算子提供方,查看您发布算子。 算子参数配置示例 Inputs参数 Input结构体参数说明参见创建工作流API。 regex参数设置正则表达式请使用regexploit工具校验。

  • 数据工坊 DWR - 数据工坊 DWR

    产品介绍 什么是数据工坊 产品优势 应用场景 使用限制 计费说明 权限管理 与其他服务关系 基本概念 03 使用 通过DWR提供近数据处理能力,您可以对OBS内存储数据按照编排工作流进行自动化处理(如解析、转码、截图等)。 算子管理 算子市场 发布算子 华为算子一览 数据处理

  • 发布算子 - 数据工坊 DWR

    1版本支持细粒度授权,可以精确到具体服务操作、资源以及请求条件等。 单击右下角“提交审核”。 审核通过后,算子将发布至算子市场。您可以过滤第三方算子提供方,查看您发布算子。 算子参数配置示例 Inputs参数 Input结构体参数说明参见创建工作流API。 regex参数设置正则表达式请使用regexploit工具校验。