检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
检测到您已登录华为云国际站账号，为了您更好的体验，建议您访问国际站服务网站 https://www.huaweicloud.com/intl/zh-cn
不再显示此消息
CDN加速场景下访问OBS桶内对象变成强制下载 问题现象 在OBS控制台配置自定义域名开启CDN加速后，或在CDN控制台配置“源站类型”为“OBS桶域名”的加速域名后，访问OBS桶中对象无法在线预览，变成强制下载。 解决方案 该问题有以下两种解决方案。 方案一： 登录CDN控制台
设置CDN加速后，处理过的图片存储在哪里？ 用户通过CDN访问图片处理服务，CDN会对处理后的图片做缓存，此时处理后的图片存储在CDN。 当用户再次对该图片进行相同的处理时，由CDN直接返回处理后的效果，不会再次访问图片处理服务，也不会对此次图片处理请求进行计费。 父主题： 图片处理
下，CDN加速访问OBS的示意图如图3所示。 图3 CDN加速访问OBS示意图（CDN有缓存） 方案优势 低成本：OBS提供CDN回源流量包折扣方式，使CDN从OBS获取数据时流量费用更低。当数据缓存至CDN节点时，后续请求都将通过CDN回源流量计费，从而减少OBS费用。 高效率
配置CDN回源，并购买回源流量包，计费未走回源流量包 请检查购买的回源流量包和CDN回源源站桶是否在同一区域。 登录控制台。 在顶部导航栏单击“资源 > 我的资源”，查看购买的资源包所在区域。 登录CDN控制台，在“域名管理”中查看CDN加速域名所配置的源站OBS桶域名，根据桶域名可以判断出回源源站桶所在的区域。
已开启”时，才表示CDN加速生效。 后续操作 CDN加速功能将存储在OBS中的数据缓存到终端用户附近的CDN节点上，让身处各地的终端用户都可以快速访问存储在OBS中的数据。当用户需要更新OBS中存储的数据时，CDN中缓存的过时数据也需要进行更新，可以使用CDN自动刷新功能来自动通
为桶的CDN加速域名配置自动刷新策略 使用场景 CDN加速功能将存储在OBS中的数据缓存到终端用户附近的CDN节点上，让身处各地的终端用户都可以快速访问存储在OBS中的数据。当用户需要更新OBS中存储的数据时，CDN中缓存的过时数据也需要进行更新，可以使用CDN自动刷新功能来自动
支持的大数据组件简介 在华为云大数据存算分离方案中，OBS除了可以与大数据平台对接外，还可以直接与开源的大数据组件对接。 当前支持的大数据组件如下： Hadoop Hive Spark Flume DataX Druid Flink logstash 父主题： 对接大数据组件
方案一：使用OBS自定义域名访问（不开启CDN加速） 方案二：使用OBS自定义域名+CDN方式访问 方案三：CDN私有桶回源方式访问 如果您已经为桶配置了自定义域名并使用CDN加速，但仍然强制下载，请参考CDN加速场景下访问OBS桶内对象变成强制下载处理。 方案一：使用OBS自定义域名访问（不开启CDN加速） 方案优劣势及约束限制说明
对接大数据组件 支持的大数据组件简介 Hadoop对接OBS Hive对接OBS Spark对接OBS Presto对接OBS Flume对接OBS DataX对接OBS Druid对接OBS Flink对接OBS Logstash对接OBS 父主题： 大数据场景下使用OBS实现存算分离
Configuration = { // 认证用的ak和sk硬编码到代码中或者明文存储都有很大的安全风险，建议在配置文件或者环境变量中密文存放，使用时解密，确保安全；本示例以ak和sk保存在环境变量中为例，运行本示例前请先在本地环境中设置环境变量AccessKeyId和SecretKey。
使用工具、SDK不经过CDN直接下载对象都会产生公网流出流量。 直接访问OBS桶的访问域名，会产生公网流出流量。 访问CDN加速域名，CDN上源站类型配置“源站域名”，如果未命中CDN缓存，会产生OBS公网流出流量和CDN流量。 访问CDN加速域名，CDN上源站类型配置“OBS桶
换成https即可。 OBS自定义域名：暂不支持，如需使用请提交工单。 开启CDN加速后的OBS加速域名：支持，开启CDN加速后可通过CDN管理控制台进行HTTPS证书管理，即可使用HTTPS访问。CDN管理控制台HTTPS证书管理方式，详见HTTPS配置。 父主题： 产品咨询
properties文件中增加配置： log4j.logger.com.obs= ERROR 对接步骤 以Spark2.3.3为例。 下载spark-2.3.3-bin-without-hadoop.tgz，并解压到/opt/spark-2.3.3。 在/etc/profile文件中增加配置内容：
1/conf/log4j.properties文件中增加配置： logger.obs.name=com.obs logger.obs.level=ERROR flink-obs-fs-hadoop的实现基于flink的plugin加载机制（flink从1.9开始引入），flink-obs-fs-h
等包管理插件引入 OBS SDK 时，包管理工具会自动下载相关依赖，其他情况下需要您自行下载依赖包并添加至工程，最新版 SDK 依赖的三方组件与版本如下： 依赖库名称 版本号 作用 okhttp 4.11.0 发送HTTP请求的组件 okio 3.5.0 okhttp的配套组件 java-xmlbuilder
此类错误一般有三种原因： 程序中未能正确引入SDK，解决方法：排查程序引入SDK的方式，确认是否正确引入了esdk-obs-browserjs-x.x.x.min.js或esdk-obs-browserjs-without-polyfill-x.x.x.min.js； 程序中引入了AMD规范的模块化组件，例如require
Server、Oracle、PostgreSQL、HDFS、Hive、HBase、OTS、ODPS等各种异构数据源之间高效的数据同步功能。OBS在大数据场景中可以替代Hadoop系统中的HDFS服务，本文介绍DataX如何对接OBS。 对接步骤 下载datax源码，以发布版本datax_v202308为例：下载地址。
OBS域名管理 通过CDN加速访问OBS 使用自定义域名托管静态网站
Hive对接OBS 概述 Hive是一个数据仓库工具，可以对存储在分布式存储中的大规模数据进行数据提取、转化和加载，它提供了丰富的SQL查询方式来进行数据分析。 前提条件 已安装Hadoop，具体请参见Hadoop对接OBS。 对接步骤 以Hive 2.3.3为例。 下载apache-hive-2
properties 将druid-hdfs-storage加入druid.extensions.loadList。 配置Deep storage在OBS中的存储路径。 配置OBSA-HDFS插件。 在官方Github下载OBSA-HDFS插件：下载地址，然后拷贝到extensions/druid-hdfs-storage/
长按/截图保存，微信识别二维码
或者关注公众号“华为云”
