CPFS存储,即Cloud Parallel File Storage,是阿里云推出的全托管、可扩展的并行文件存储系统,以下是关于CPFS存储的详细回答:
1、
定义:CPFS是一种并行文件系统,专为高性能计算场景设计,提供高IOPS、高吞吐和低时延的数据存储服务。
特点:支持POSIX、MPI-IO和NFS协议,具备统一的命名空间,支持多客户端同时访问,适用于大规模数据处理和高性能计算需求。
2、产品功能
高性能访问:支持标准的POSIX、MPI-IO和NFS协议,无需接口适配即可高效执行计算程序。
子文件系统管理:通过Fileset对文件系统进行切分独立管理,实现容量规划、数据隔离和生命周期管理。
数据流动能力:方便地与OSS数据流动,作为OSS数据的高性能加速器,降低存储整体费用。
全并行架构:支持百亿文件、百万IOPS和OPS,Tbps级吞吐,无单点瓶颈。
客户端缓存:可配置数据本地读缓存,缩短访问时延。
3、应用场景
AI与自动驾驶训练:提高多机多卡GPU计算资源的利用率,降低计算成本,实现云上云下无缝对接。
基因与药物小分子计算:满足对写也有极高吞吐要求的基因计算性能需求。
EDA仿真:分布式元数据架构,大文件分片读取实现大吞吐,满足前后端仿真需求。
影视渲染:为TB级数据提供超大吞吐和百万IOPS的性能,随渲染任务规模在线扩容。
4、产品规格与使用限制
文件系统类型:支持CPFS和CPFS智算版两种类型,分别适用于不同的业务负载。
计费方式:默认按量付费,也支持资源包付费方式。
使用限制:包括地域、容量、性能等方面的限制,具体可参考阿里云官方文档。
5、快速入门
创建文件系统:在ECS中挂载CPFS文件系统,或在容器中挂载CPFS文件系统。
挂载访问:通过NFSv3协议访问CPFS文件系统。
卸载挂载:在服务器中卸载挂载的文件系统。
删除文件系统:删除不再需要的文件系统。
数据流动:实现CPFS与OSS之间的数据流动。
数据监控:监测文件的使用量。
备份数据:配置文件系统的ACL权限。
6、FAQs
Q: CPFS存储支持哪些访问协议?
A: CPFS存储支持标准的POSIX、MPI-IO和NFS协议。
Q: CPFS存储的计费方式是什么?
A: CPFS存储默认按量付费,也支持资源包付费方式。
7、小编有话说
CPFS存储作为阿里云推出的高性能并行文件存储系统,为AI深度训练、自动驾驶、基因计算等业务场景提供了强大的数据存储支持,其全托管、可扩展的特性以及丰富的产品功能使得用户能够更加便捷地管理和利用数据资产,无论是企业还是科研机构,在选择高性能存储解决方案时,都可以考虑将CPFS存储纳入候选名单。