首页 > 热点播报 > 正文

芯展速推出AI90软硬件一体化推理加速方案 将SSD纳入GPU显存体系实现性能突破

芯展速在WAIC 2026展出了AI90软硬件一体化AI推理加速方案。该方案将高性能SSD纳入GPU显存体系,形成HBM、DRAM与SSD的三级存储体系,旨在优化AI推理性能。

据悉,该方案可将首Token延迟缩短至原来的1/50,吞吐量提升5.1倍,并节省39%的显存。结合其智能P2P多卡互联技术,能使8卡NVIDIA GeForce RTX 5090集群的推理速度提升5.8倍,并支持超过128K的上下文长度。

为应对方案中KV Cache卸载带来的高写入负载,芯展速同步推出了PT200Z AI SSD。这款SSD基于pSLC闪存介质,采用PCIe Gen5接口,具有极高的耐用性和性能,其顺序读取速度达14.8GB/s,随机读取速度达3100K IOPS,读取和写入延迟分别低至54微秒和10微秒。

网友评论

热门IT产品
  1. ¥1999
    荣耀X80 Pro Max
    ·
  2. ¥4699
    HUAWEI Mate 80
    ·
  3. ¥1599
    REDMI Note 17 Pro
    ·
  4. ¥2999
    REDMI K90至尊版
    ·
  5. ¥2999
    HUAWEI nova 16
    ·
  6. ¥8999
    苹果iPhone17 Pro
    ·
  7. ¥3599
    荣耀500 Pro
    ·
  8. ¥9999
    苹果iPhone17 Pro Max
    ·
  9. ¥7999
    vivo X Fold6
    ·
  10. ¥6999
    vivo X300 Ultra
    ·