天翼云并行文件服务HPFS助力企业构建更高效的大型模型训练平台

国内外AI大模型层出不穷，训练数据复杂程度更是呈指数级增加。如今，在万亿级参数时代，单个资源池已无法满足大模型训练场景中动辄PB级的数据存储量，对于企业来说，启用多个资源池构成的分布式存储势在必行。

为了应对AI大模型训练对数据存储的需求，天翼云推出并行文件服务HPFS（CT-HPFS，High Performance File Storage），旨在为AI时代提供高性能存储底座，助力企业构建基于云资源的、更高效的大型模型训练平台，实现大模型的连续训练。天翼云HPFS可通过分布式存储实现数据的并发读取，同时提供最高百万IOPS和百GBPS的吞吐能力，显著提升了数据的读取速度，从而大大提升GPU卡的利用率，为提升HPC和AI等场景的训练效率赋能。

天翼云HPFS为AI场景的数据训练提供高并发、低延时、高吞吐的存储解决方案：

高并发，天翼云HPFS在保证文件一致性的前提下，将数据分布存储在多个节点上，通过分布式锁机制，实现多客户端同时对同一文件的不同部分进行读写，显著提升并发性能，单客户端的单流IO性能可提升200%以上，并发访问同一文件的性能提升300%以上。