Amazon EFS 文件系统分布在任意数量的存储服务器上,使文件系统可以弹性扩展到 PB 级,并支持从多个 Amazon EC2 实例大规模并行访问数据。Amazon EFS 的分布式设计可以避免传统文件服务器固有的瓶颈和限制。
该分布式数据存储设计意味着,多线程应用程序和从多个 Amazon EC2 实例同时访问数据的应用程序可以推动实现极高的总吞吐量和 IOPS。这些应用程序可以是大数据及分析工作负载、媒体处理工作流程、内容管理以及 Web 服务。
此外,Amazon EFS 数据分布在多个可用区内,具有高水平的持久性和可用性。
开始使用 Amazon EFS
尝试使用免费套餐下表简要对比了 Amazon 文件和数据块云存储产品的性能和存储特性。
| Amazon EFS | Amazon EBS PIOPS | ||
|---|---|---|---|
| 性能 | 每次操作的延迟 | 低且稳定 | 最低且稳定 |
| 吞吐量级别 |
每秒多 GB | 每秒单 GB | |
| 特性 | 数据 可用性/持久性 |
跨多个可用区冗余存储 | 在单个可用区内冗余存储 |
| 访问 | 同时访问多个可用区内的一个到数千个 EC2 实例 | 访问单个可用区内的单个 EC2 实例 | |
| 使用案例 | 大数据及分析、媒体处理工作流程、内容管理、Web 服务、主目录 |
启动卷、事务数据库与 NoSQL 数据库、数据仓库与 ETL |
Amazon EFS 的分布式特性可以实现高水平的可用性、持久性和可扩展性。这种分布式架构使得每次文件操作的延迟开销都较低。由于每次操作的延迟都较低并且延迟开销会分摊到更多的数据上,因此总吞吐量通常会随着平均 I/O 大小的增加而提高。Amazon EFS 支持高度并行化的工作负载(即从多个线程和多个 EC2 实例并行操作),因而可实现非常高的总吞吐量和 IOPS。
Amazon EFS 提供了大数据应用程序所需的规模和性能、计算节点高吞吐量、写后读一致性以及低延迟文件操作。
视频编辑、影音制作、广播处理、声音设计和渲染等媒体工作流程通常依赖于共享存储来操作大型文件。强大的数据一致性模型加上高吞吐量和共享文件访问,可以缩短完成上述工作所需的时间,并将多个本地文件存储库合并到面向所有用户的单个位置。
Amazon EFS 可以作为一种持久性强、吞吐量高的文件系统,用于各种内容管理系统,为网站、在线发行、存档等各种应用存储和提供信息。
Amazon EFS 提供的存储服务适合员工众多且需要访问和共享相同数据集的组织。管理员可以使用 Amazon EFS 来创建文件系统并使其可以供组织中的个人访问,还可以在文件或目录级别为用户和组设置权限。