弹性文件服务 SFS-华为云

弹性文件服务 SFS-存储联动:元数据导入功能

元数据导入功能 SFS Turbo文件系统绑定OBS桶后，可以使用元数据导入功能。当您使用SFS Turbo文件系统访问OBS桶的数据时，您需要使用元数据导入功能提前将OBS数据文件的元数据（名称、大小、最后修改时间）导入到SFS Turbo文件系统中。只有元数据导入之后，您才可以在文件系统的联动子目录中去访问OBS存储桶中的数据。元数据导入功能仅会导入文件元数据，文件内容会在首次访问时从OBS存储桶中加载并缓存在SFS Turbo中，后续重复访问会直接命中，无需再从OBS存储桶中加载。 SFS Turbo文件系统提供快速导入和附加元数据导入两种元数据导入方式。元数据导入之后，您可以在联动子目录下看到导入的目录和文件列表。快速导入：当您绑定的OBS桶中存储的数据不是来源于SFS Turbo导出时，可以选择快速导入方式，快速导入方式仅会导入OBS的元数据（名称、大小、最后修改时间），不会导入其它附加元数据（如uid、gid、mode），SFS Turbo会生成默认的附加元数据（uid、gid、目录权限、文件权限），如果您想指定导入目录和文件的权限，请参考《高性能弹性文件服务API参考》的“创建数据导入导出任务”章节，该操作仅针对本次导入任务生效。快速导入能够提供更快的元数据导入性能，推荐您使用快速导入。附加元数据导入：当您绑定的OBS桶中存储的数据是来源于SFS Turbo导出时，可以使用附加元数据导入方式，附加元数据导入方式会导入OBS的元数据（名称、大小、最后修改时间）以及来源于SFS Turbo导出时的附加元数据（如uid、gid、mode）。如果没有来源于SFS Turbo的附加元数据则以指定导入目录和文件的权限为准。在绑定OBS桶之后，单击“元数据导入”选项。图4 元数据导入 “导入前缀”请填写绑定OBS桶内对象的前缀，可以具体到某个对象名。如果要导入整个OBS桶内的所有对象，则不用填写。勾选“附加元数据导入”将会采用附加元数据导入方式，不勾选“附加元数据导入”将采用快速导入方式。单击“确定”，提交导入任务。在OBS数据导入到SFS Turbo之后，如果OBS桶中的数据发生新增或修改，需要重新导入到SFS Turbo中。不支持长度大于255字节的文件名或子目录名。

弹性文件服务 SFS SFS Turbo文件系统

弹性文件服务 SFS-存储联动:数据导入功能

数据导入功能 SFS Turbo文件系统绑定OBS桶后，可以使用数据导入功能。默认情况下，元数据导入完成后，数据不会导入到SFS Turbo文件系统中，初次访问会按需从OBS中加载数据，对文件的第一次读取操作可能耗时较长。如果您的业务对时延比较敏感，并且您知道业务需要访问哪些目录和文件，比如AI训练等场景涉及海量小文件，对时延比较敏感，可以选择提前导入指定目录和文件。数据导入功能会同时导入元数据和数据内容，元数据将会采用快速导入方式，不会导入其他附加元数据（如uid、gid、mode），如果您想指定导入目录和文件的权限，请参考《高性能弹性文件服务API参考》的“创建数据导入导出任务”章节，该操作仅针对本次导入任务生效。在绑定OBS桶之后，单击“数据导入”选项。图5 数据导入 “对象路径”请填写绑定OBS桶内对象的路径（不包含桶名）。 OBS桶中的对象路径（不包含桶名），目录需以“/”结尾。如果要导入OBS桶内所有对象，则不用填写对象路径。SFS Turbo会将数据导入到联动目录下，且联动目录下的文件路径和OBS桶里的对象路径保持一致。对象路径示例（“/mnt/sfs_turbo”为您的挂载目录，“output-1”为您的联动目录名称）：如对象路径为dir/，则会导入到“/mnt/sfs_turbo/output-1/dir” 如对象路径为dir/file, 则会导入到“/mnt/sfs_turbo/output-1/dir/file” 如对象路径为空，则会直接导入到“/mnt/sfs_turbo/output-1” 单击“确定”，提交导入任务。在OBS数据导入到SFS Turbo之后，如果OBS桶中的数据发生新增或修改，需要重新导入到SFS Turbo中。通过API使用数据导入功能的具体操作请参考创建SFSTurbo 和 OBS 之间的联动任务。不支持长度大于255字节的文件名或子目录名。

弹性文件服务 SFS SFS Turbo文件系统

弹性文件服务 SFS-存储联动:数据淘汰功能

数据淘汰功能 SFS Turbo文件系统绑定OBS桶之后，可以使用数据淘汰功能。淘汰时会释放数据内容，仅保留元数据，释放后不占用SFS Turbo文件系统上的存储空间。再次访问该文件时，将重新从OBS中加载文件数据内容。按时间淘汰 SFS Turbo文件系统绑定OBS桶之后，支持数据按时间淘汰功能。设定时间内没有被访问过的文件会被淘汰。按时间淘汰功能支持设置（冷）数据淘汰时间，设置步骤请参考以下操作。登录高性能弹性文件服务管理控制台。在文件系统列表中，单击创建的SFS Turbo文件系统名称，进入文件系统详情页面。在“基本信息”页签，设置（冷）数据淘汰时间。图7 设置冷数据淘汰时间按容量淘汰 SFS Turbo文件系统绑定OBS桶后，支持数据按容量淘汰功能。容量达到95%及以上按照30分钟淘汰时间进行淘汰，淘汰至容量低于85%。淘汰规则：按时间淘汰和按容量淘汰哪个先达到就先按哪个淘汰。数据淘汰默认开启，淘汰时间默认为60小时。设置（冷）数据淘汰时间的API请参考更新文件系统。如果SFS Turbo文件系统存储空间写满，会影响业务运行，建议在云监控服务 CES上配置SFS Turbo已用容量的监控告警。当触发容量阈值告警时请手动缩短数据淘汰时间，例如从60小时配置成40小时，加速（冷）数据淘汰，或者对SFS Turbo存储空间进行扩容。

弹性文件服务 SFS SFS Turbo文件系统

弹性文件服务 SFS-存储联动:绑定OBS桶

绑定OBS桶登录高性能弹性文件服务管理控制台。在文件系统列表中，单击创建的文件系统名称，进入文件系统详情页面。进入“绑定后端存储”页签，单击“绑定OBS桶”。图1 绑定OBS桶在右侧弹窗“绑定OBS桶”中，填写如下参数。表1 参数说明参数含义限制配置后可编辑联动目录名称 SFS Turbo文件系统根目录下会以该名称创建一个子目录，该目录将绑定对应的OBS桶，且该目录名称不能和已有目录重名。子目录名称不能重复，子目录名称长度不能超过255个字符。子目录名称必须是文件系统根目录下不存在的目录名。子目录名称不能是“.”或“..”。不支持桶名 OBS存储桶桶名。无法绑定不存在的存储桶。目前仅支持OBS存储桶，不支持OBS并行文件系统。不支持 OBS区域域名 OBS区域域名，即OBS的终端节点。 OBS存储桶必须和SFS Turbo文件系统在同一个Region。不支持自动导出打开开关后，当文件系统发生数据更新时，将自动导出到OBS桶。 - 支持导出数据打开“自动导出”开关，则会出现该参数。选择导出到OBS桶的数据更新类型“新增数据”、“修改数据”或“删除数据”后，SFS Turbo会以异步方式导出到OBS。新增数据：SFS Turbo联动目录下创建的文件，及之后对这些文件进行的元数据和数据修改，会被自动同步到OBS桶里。修改数据：从OBS桶里导入到SFS Turbo联动目录下的文件，在SFS Turbo上对这些文件所进行的数据和元数据的修改，会被自动同步到OBS桶里。删除数据：在SFS Turbo联动目录下删除文件，OBS桶对应的对象也会被删除，只有被SFS Turbo写入的OBS对象才会被删除。 - 支持勾选“将OBS桶的读写权限通过桶策略授权给SFS Turbo云服务”，并单击“确定”，完成绑定。如果您想指定导入目录和文件的权限，请参考《高性能弹性文件服务API参考》的“绑定后端存储”和“更新后端存储属性”执行操作。目前仅支持OBS存储桶，不支持OBS并行文件系统。绑定OBS桶时，会在OBS桶上添加Sid为“PolicyAddedBySFSTurbo”的桶策略，请不要修改或删除该桶策略，否则可能导致联动功能异常。如果您已将一个或多个SFS Turbo文件系统绑定了OBS存储桶，在删除文件系统或删除绑定之前，请不要删除该OBS存储桶，否则可能导致联动功能异常。以桶名为“obs-test”的OBS桶为例，桶策略“PolicyAddedBySFSTurbo”的内容如下所示： { "Statement": [ { "Sid": "PolicyAddedBySFSTurbo", "Effect": "Allow", "Principal": { "ID": [ "domain/xxx:user/xxx" ] }, "Action": [ "ListBucket", "HeadBucket", "GetBucketStorage", "GetBucketPolicy", "GetBucketAcl", "GetBucketNotification", "GetBucketQuota", "GetObject", "PutObject", "DeleteObject", "GetObjectAcl", "PutObjectAcl", "ModifyObjectMetaData" ], "Resource": [ "obs-test", "obs-test/*" ] } ] }

弹性文件服务 SFS SFS Turbo文件系统

弹性文件服务 SFS-存储联动:FAQ

FAQ 什么情况下会发生数据淘汰? 从OBS导入到SFS Turbo的文件，当文件在设定数据淘汰时间内没有被访问时，会自动对该文件进行淘汰。在SFS Turbo上创建的文件，只有已经导出到OBS并且满足数据淘汰时间，才会进行淘汰，如果还没有导出到OBS，则不会淘汰。数据淘汰之后，怎么重新将数据导入到SFS Turbo文件系统？对文件进行读写操作时会重新从OBS桶加载文件数据到SFS Turbo文件系统；使用数据导入功能重新将数据从OBS桶加载到SFS Turbo文件系统。什么场景下会发生数据导入失败？当只导入了文件元数据，或者SFS Turbo中发生了数据淘汰，SFS Turbo中只剩下文件元数据，但OBS桶中的对象又被删除时，进行数据导入或访问文件内容时会发生失败。导入/导出任务是同步的，还是异步的？是异步的，任务提交后马上返回，您可以通过任务id查询异步任务完成状态。删除SFS Turbo联动目录内的文件，OBS桶里对应的对象会删除吗？不会。如果没有开启自动同步策略，则不会。如果开启了自动同步策略，则会删除。 SFS Turbo绑定OBS桶时或者绑定之后可以指定导入目录和文件的权限吗？一般情况下，您可以指定导入目录和文件的权限。如果无法指定，请提交工单申请。指定权限详情如下所示：绑定OBS桶时或绑定OBS桶后，支持设置导入目录和文件的默认权限，请参考《高性能弹性文件服务API参考》的“绑定后端存储”和“更新后端存储属性”章节。如果未设置，默认为750（目录权限）和640（文件权限）。元数据导入（快速导入）和数据导入时，支持指定导入目录和文件的权限，请参考《高性能弹性文件服务API参考》的“创建数据导入导出任务”章节。如果未指定，则以上述默认权限为准。历史版本导入目录和文件的默认权限为755（目录权限）和644（文件权限），现逐步按区域切换为750（目录权限）和640（文件权限），如有疑问，请提交工单咨询。 SFS Turbo绑定OBS桶时或者绑定之后，建议指定导入目录和文件的默认权限。如果您未指定，非root用户无权限访问对应的目录和文件。

弹性文件服务 SFS SFS Turbo文件系统

弹性文件服务 SFS-存储联动:使用限制

使用限制支持存储联动的SFS Turbo文件系统规格有：20MB/s/TiB、40MB/s/TiB、125MB/s/TiB、250MB/s/TiB、500MB/s/TiB、1000MB/s/TiB。 SFS Turbo目录和OBS配置联动后不支持以下操作：硬链接、重命名和目录配额。单个SFS Turbo文件系统最多可配置16个OBS联动目录。创建 OBS 后端存储库，依赖的服务是对象存储服务 OBS。用户需要额外配置OBS Adminstrator权限。同一层目录下不允许同样名称的文件和目录存在。不支持超长路径，数据流动支持的路径最大长度是1023字符。数据流动导入时，不支持长度大于255字节的文件名或子目录名。开启WORM策略的OBS桶，只能从OBS桶导入数据到SFS Turbo，无法从SFS Turbo导出数据到OBS桶。

弹性文件服务 SFS SFS Turbo文件系统

弹性文件服务 SFS-存储联动:概述

概述 AI训练和推理、高性能数据预处理、EDA、渲染、仿真等场景下，您可以通过SFS Turbo文件系统来加速OBS对象存储中的数据访问。SFS Turbo文件系统支持无缝访问存储在OBS对象存储桶中的对象。您可以指定SFS Turbo内的目录与OBS对象存储桶进行关联，然后通过创建导入导出任务实现数据同步。您可以在上层训练等任务开始前将OBS对象存储桶中的数据提前导入到SFS Turbo中，加速对OBS对象存储中的数据访问；上层任务产生的中间和结果等数据可以直接高速写入到SFS Turbo缓存中，中间缓存数据可被下游业务环节继续读取并处理，结果数据可以异步方式导出到关联的OBS对象存储中进行长期低成本存储。同时，您还可以配置缓存数据淘汰功能，及时将长期未访问的数据从SFS Turbo缓存中淘汰，释放SFS Turbo高性能缓存空间。

弹性文件服务 SFS SFS Turbo文件系统

弹性文件服务 SFS-容量调整:约束与限制

约束与限制 SFS容量型文件系统支持在线容量调整，容量调整时对业务无任何影响。并且扩容时文件系统必须处于运行中状态。 SFS Turbo文件系统支持在线扩容，扩容过程中挂载文件系统可能失败，正在挂载使用的连接会感知30秒左右的IO延迟（最长可能为3分钟），建议业务低峰期扩容。注意扩容时文件系统必须处于运行中状态。暂无法直接对SFS Turbo文件系统进行缩容操作，可以通过购买小容量的新文件系统再将原文件系统数据进行手动迁移，实现“缩容”。通用文件系统无容量限制，不支持容量调整。

弹性文件服务 SFS

弹性文件服务 SFS-资源包管理:续费资源包

续费资源包在SFS管理控制台左侧导航栏选择“资源包管理”。选择所要续费的资源包。在需要续费的资源包操作列，单击“续费”。选择续费时长。页面将显示资源包在续费后的到期时间，以及对应的费用。（可选）根据需要，选择是否统一到期日为每月1号。将到期时间延长至统一到期日，可能产生额外的续费天数，进而产生额外的费用。选择此项后，请务必核对清楚续费时长和费用信息。确认无误后，单击“去支付”，并在支付页面完成付款。

弹性文件服务 SFS

弹性文件服务 SFS-资源包管理:购买资源包

购买资源包通用文件系统同时提供包年包月计费模式，您可以购买资源包实现包年包月计费。暂不支持退订资源包，请提前规划资源的使用额度和时长。在SFS管理控制台左侧导航栏选择“资源包管理”。单击页面右上角“购买资源包”。图1 购买通用文件系统资源包配置资源包参数。表1 配置资源包参数参数说明区域选择资源包所属区域。区域专属资源包，不支持共享给其他区域使用，请根据您资源所在地谨慎选择。资源包规格选择资源包规格。通用文件系统资源包无法扩容，但可以叠加购买。购买时长选择购买时长。购买数量输入购买数量。购买数量必须在1~3000之间。生效时间选择生效时间：支付完成后立即生效/指定时间生效。如果支付时间晚于指定生效时间，资源包将在支付后立即生效。企业项目勾选“限定企业项目使用”可限定企业项目使用资源包，即仅在所选企业项目下的通用文件系统才能使用此资源包进行抵扣，同时也需满足资源包所属区域匹配的要求。如果未限定则全部企业项目均可使用。该选项仅对企业账号展示。资源包示意根据以上配置显示资源包示意图，包括资源包的基础配置和折合单价，以及相比按需计费所节省费用的百分比。单击“立即购买”。确认订单无误后，单击“去支付”。如果发现订单有误，也可单击“上一步”修改订单后再继续购买。根据界面提示进行订单支付。资源包购买注意事项：支持续订，暂不支持退订。资源包到期后，不会影响您通用文件系统的使用和数据安全。您只要保证云服务账号上有足够的余额，系统会自动以按需计费的模式进行结算。

弹性文件服务 SFS

弹性文件服务 SFS-查看文件系统:操作步骤

操作步骤登录弹性文件服务管理控制台。在文件系统列表中查看所有文件系统的基本信息，参数说明如表1所示。表1 参数说明参数说明名称已创建的文件系统名称，例如：sfs-name-001。可用区文件系统所在的可用区。状态文件系统的状态，包含“可用”、“不可用”、“已冻结”、“正在创建”、“正在删除”、“删除错误”、“创建失败”、“正在扩容”、“扩容错误”、“正在缩容”、“缩容错误”和“缩容失败”。类型文件系统的类型。协议类型文件系统的协议类型为NFS或CIFS。已用容量(GB) 文件系统存放数据已使用的空间。说明：该数据不是实时数据，平均15分钟刷新一次。SFS容量型文件系统已用容量小于1MB时，将不会显示已用容量。最大容量（GB）文件系统的最大使用容量。已上传文件数文件系统内已上传的文件数量。说明：通用文件系统展示该字段。该数据不是实时数据，平均15分钟刷新一次。是否加密已经创建的文件系统的加密状态，包括“是”和“否”。企业项目文件系统归属的企业项目。挂载地址文件系统的挂载地址，NFS类型的格式为：文件系统域名:/路径，或文件系统IP:/，或域名地址:/；CIFS类型的格式为：\\文件系统域名\路径。说明：由于挂载地址名称较长，需要拉宽该栏以便完整显示。操作 SFS容量型包含“容量调整”、“查看监控指标”和“删除”操作。 SFS Turbo包含“扩容”、“删除”、“查看监控指标”、“续订”和“退订”操作。通用文件系统包含“删除”操作。说明：包年/包月的SFS Turbo文件系统创建完成后，大约1到2分钟后，才能执行续订、退订等操作。单击文件系统名称，可查看更多的文件系统信息。图1 SFS Turbo文件系统的扩展信息图2 通用文件系统的扩展信息图3 SFS容量型文件系统的扩展信息（可选）通过文件系统名称关键字、密钥ID或文件系统状态来过滤查看指定的文件系统。

弹性文件服务 SFS 管理文件系统

弹性文件服务 SFS-标签:约束限制

约束限制标签由标签“键”和标签“值”组成。 “键”最大长度为128个字符，不能为空，首尾不支持空格字符，以“_sys_”开头的键属于系统标签，不支持用户输入，可用UTF-8格式表示的任意语种的字母、数字和空格，以及“_”、“.”、“:”、“=”、“+”、“-”、“@”。 “值”最大长度为255个字符，首尾不支持空格字符，可以为空字符串，可用UTF-8格式表示的任意语种的字母、数字和空格，以及以下字符： “_”、“.”、“:”、“=”、“+”、“-”、“@”。单个文件系统最多可以添加20个标签。同一个文件系统的标签的“键”不允许重复。文件系统标签的“键”创建之后不可再编辑，只可对标签的“值”进行编辑。可以对标签进行删除操作。

弹性文件服务 SFS

弹性文件服务 SFS-文件系统权限管理:网段类型

网段类型网段类型配置可以采用两种配置方式。 * : 代表任何ip地址 CIDR格式网段： CIDR格式地址使用可变长度子网掩码来表示 IP 地址中网络地址位和主机地址位之间的比例。 CIDR IP地址在普通IP地址的基础上附加了一个后缀值，这个后缀值就是网络地址前缀位数。例如，192.1.1.0/24 是一个 IPv4 CIDR地址，其中前 24 位（即 192.1.1）是网络地址。任何前24位与192.1.1.0相同的ip都适用于这一条鉴权规则，即192.1.1.1 与 192.1.1.1/32 表达的含义相同。

弹性文件服务 SFS

弹性文件服务 SFS-文件系统权限管理:权限类型

权限类型权限分为两部分：access权限和squash权限。表1 access权限权限描述 rw 用户拥有读写权限 ro 用户拥有只读权限 none 用户无权限访问表2 squash权限权限描述 all_squash 所有的用户访问时权限降为nobody root_squash root用户访问时权限降为nobody no_root_squash 包括root用户在内的任何用户访问时权限都不会降为nobody

弹性文件服务 SFS

弹性文件服务 SFS-文件系统权限管理:添加授权地址操作步骤

添加授权地址操作步骤本章节介绍如何通过控制台完成添加授权地址进行权限管理。如果您想通过API调用完成文件系统权限管理，请参考《弹性文件服务API参考》权限管理章节。登录弹性文件服务管理控制台。在SFS Turbo文件系统列表中，找到待添加授权地址的SFS Turbo文件系统并单击目标文件系统名称，进入文件系统详情界面。在“权限列表”页签，单击“添加”。图1 添加授权地址在“添加授权地址”弹窗内，参考表3完成授权地址的添加。一个文件系统最多可以配置64条权限规则，单次最多可新增5个授权地址。表3 添加授权地址说明参数说明授权地址只能输入一个的IP或网段。输入的IPv4地址/地址段必须合法，且不能为除0.0.0.0/0以外之前0开头的IP地址或地址段，其中当设置为0.0.0.0/0时表示VPC内的任意IP。同时，不能为127以及224~255开头的IP地址或地址段，例如127.0.0.1，224.0.0.1，255.255.255.255，因为以224-239开头的IP地址或地址段是属于D类地址，用于组播；以240-255开头的IP地址或地址段属于E类地址，用于研究。使用非合法的IP或IP地址段可能会导致添加访问规则失败或者添加的访问规则无法生效。如果要表示一个地址段，如192.168.1.0-192.168.1.255的地址段应使用掩码形式：192.168.1.0/24，不支持192.168.1.0-255等其他地址段表示形式。掩码位数的取值为0到31的整数，且只有为0.0.0.0/0时掩码位数可取0，其他情况均不合法。网段类型请参见网段类型。读写权限支持选择以下读写权限。默认选择“rw”。 rw：用户拥有读写权限。 ro：用户拥有只读权限。 none：用户无权限访问。用户权限支持选择以下用户权限。默认选择“all_squash”。 all_squash：所有的用户访问时权限降为nobody。 root_squash：root用户访问时权限降为nobody。 no_root_squash：包括root用户在内的任何用户访问时权限都不会降为nobody。确认授权地址信息，单击“确定”。

弹性文件服务 SFS

云服务器内容精选

弹性文件服务 SFS

7*24

备案

专业服务

退订

建议反馈

售前咨询热线