已找到以下 10000 条记录
  • HDFS对接OBS

    MRS服务的默认配置文件中已经添加了OBS的实现类来对接OBS,如下图所示: 对接OBS及相关参数配置参考网址: https://support.huaweicloud.com/bestpractice-obs/obs_05_1507

  • Spark对接OBS

    Spark对接OBS 概述 Apache Spark是专为大规模数据处理而设计的快速通用的计算引擎。 前提条件 已安装Hadoop,具体请参见Hadoop对接OBS。 注意事项 为了减少日志输出,在/opt/spark-2

  • Hive对接OBS

    xml文件,添加配置: 可选配置,当添加了上述配置后在创建H

  • Flink对接OBS

    flink-obs-fs-hadoop目前仅支持OBS并行文件系统。 不推荐state状态数据存储在OBS上。 为了减少日志输出,在/opt/flink-1.12.1/conf/log4j.properties文件中增加配置:logger.obs.name=com

  • 配置OBS桶 - 数据治理中心 DataArts Studio

    配置OBS桶 脚本、作业或节点的历史运行记录依赖于OBS桶,如果未配置测试运行历史OBS桶,则无法查看历史运行的详细信息。请参考本节操作配置OBS桶。 约束限制 OBS路径仅支持OBS桶,不支持并行文件系统。 配置方法 参考访问DataArts Studio实例控制台,登录DataArts

  • DataX对接OBS

    //github.com/alibaba/DataX/。OBS在大数据场景中可以替代Hadoop系统中的HDFS服务,本文介绍DataX如何对接OBS。 对接步骤 下载datax源码:下载地址。 修改编译datax。

  • OBS权限管理配置实践

    /SK+STStoken访问OBS为例进行说明。5.2       配置操作5.2.1      登陆统一身份认证服务控制台,创建委托选择委托类型为“云服务”,在云服务中选择“ECS BMS”,在权限选择中配置“全局服务-对象存储服务的策略为Tenant Administrator”5

    作者: 云小白
    15760
    1
  • PublishAssetFromObs 创建媒资:OBS转存方式 - API

    该API属于VOD服务,描述: 若您在使用点播服务前,已经在OBS桶中存储了音视频文件,您可以使用该接口将存储在OBS桶中的音视频文件转存到点播服务中,使用点播服务的音视频管理功能。调用该接口前,您需要调用[桶授权](https://support.huaweicloud.com

  • 连接OBS

    连接OBS 介绍 前提条件 数据转储 父主题: 开发准备

  • OBS权限配置实践--子账户授权

    后可以看到该用户组的权限及用户配置信息1.2.4 获取账户ID(租户ID)和子账户ID配置桶策略1)在账户-我的凭证中获取账号ID2)在统一身份管理用户-基本信息中获取子账户ID3)登陆控对象存储控制台,找到需要配置子账户访问的桶,在桶策略-高级配置中添加桶策略。a.同时为use

    作者: 云小白
    发表时间: 2018-07-27 17:25:54
    17191
    0
  • BatchDeleteFlinkJobs Deleting Flink Jobs in Batches - API

    该API属于DLI服务,描述: This API is used to delete jobs in any status in batches.接口URL: "/v1.0/{project_id}/streaming/jobs/delete"

  • OBS权限配置实践--子账户桶资源隔离

    直接创建子用户,不添加到任何用户组或者添加到不具有OBS访问权限的用户组中创建userB后可以看到该用户未配置相关用户组2.2 登陆控对象存储控制台,找到需要配置子账户访问的桶,在桶策略-高级配置中添加桶策略a.为userB配置特定桶的完全访问权限(至少需要配置列举权限)点击桶功能列表的“权限”

    作者: 云小白
    发表时间: 2018-08-21 11:53:54
    16273
    0
  • ListFlinkJobs Querying Flink Jobs - API

    该API属于DLI服务,描述: This API is used to query the list of the current user's jobs. You can set the job ID as the ID and query jobs whose IDs are

  • 配置SQL ON OBS桶策略,实现DWS访问分离

    GaussDB(DWS) 提供SQL on OBS功能,满足用户对OBS桶中的数据进行查询。用户可以新建OBS桶,用于存储数据,然后通过OBS外表功能,将数据导入导出到OBS桶上。 在实际业务应用中,用户需要对OBS桶进行权限管控。当前的OBS桶的权限设计中,OBS桶可以基于IAM用户层级管控,

    作者: 谈笑鸿儒
    发表时间: 2021-03-04 11:45:15
    2247
    0
  • OBSUtil工具 FAQ

    1. 如何检查 obsutil 配置是否准确,是否能正常访问 OBSobsutil 配置完成后,通过列举桶命令来验证配置及网络连通性,命令(Linux):./obsutil ls -s 根据命令回显结果,检查配置结果:· 如果返回结果中包含“Bucket number is:”,表明配置正确。·

    作者: 数据上云专家张涛
    发表时间: 2019-08-01 15:43:20
    11489
    0
  • CheckObsBuckets 检查已经配置OBS桶是否可以成功转储 - API

    该API属于CTS服务,描述: 检查已经配置OBS桶是否可以成功转储。接口URL: "/v3/{domain_id}/checkbucket"

  • obs存储服务密钥配置

    租户名 Hizrgj联系电话 15891449679   邮箱yili003@chinasofti.comobs存储服务没有密钥,请提供一个密钥给我们! 错误信息如下:Smart Office项目下getObjectProxy服务:入参:{ "sysParams":"meeting_objectStroge

    作者: yd_283377206
    66
    2
  • siddhi-obs

    嵌入到 Java 和 Python 应用程序中,作为微服务在裸机、VM 或 Docker 上运行,并在 Kubernetes 中大规模本地运行。本商品是作为本地微服务的方式在使用,并且扩展运行将时间发布到OBS桶中 内置OBS

    交付方式: 镜像
  • 配置HDFS映射方式对接OBS文件系统

    单击“保存配置”,并勾选“重新启动受影响的服务或实例。”重启Presto服务。 通过MRS服务安装的Flink组件提交作业 登录服务配置页面。 针对MRS

  • UploadFromObs2 Importing Metadata from OBS - API

    该API属于GES服务,描述: This API is used to import metadata from OBS.接口URL: "/v2/{project_id}/graphs/metadata/upload-from-obs"