产品性能

• 深度学习训练
  

  NVIDIA A100 的第三代 Tensor Core 借助 Tensor 浮点运算 (TF32) 精度，可提供比上一代高 10 倍之多的性能，并且无需更改代码，更能通过自动混合精度将性能进一步提升两倍。与第三代 NVIDIA NVLink、NVIDIA NVSwitch、PCIe 4.0、Mellanox 和 Magnum IO 软件 SDK 结合使用时，系统中可以集成数千个 A100 GPU。这意味着，BERT 等大型 AI 模型只需在 A100 构成的集群上进行训练几十分钟，从而提供出色的性能和可扩展性。
• 深度学习推理
  

  A100 引入了突破性的新功能优化推理工作负载。它通过全系列精度（从 FP32、FP16、INT8 一直到 INT4）加速，实现了强大的多元化用途。MIG 技术支持多个网络同时在单个 A100 GPU 运行，从而优化计算资源的利用率。在 A100 其他推理性能提升的基础上，结构化稀疏支持将性能再提升两倍。
• 高性能计算
  

  A100 引入了双精度 Tensor Cores, 继用于 HPC 的 GPU 双精度计算技术推出至今，这是非常重要的里程碑。利用 A100，原本在 NVIDIA V100 Tensor Core GPU 上需要 10 小时的双精度模拟作业如今只要 4 小时就能完成。HPC 应用还可以利用 A100 的 Tensor Core，将单精度矩阵乘法运算的吞吐量提高 10 倍之多。
• 数据分析
  

  搭载 A100 的加速服务器可以提供必要的计算能力，并利用第三代 NVLink 和 NVSwitch 1.6TB/s 的显存带宽和可扩展性，妥善应对这些庞大的工作负载。结合 Mellanox InfiniBand、Magnum IO SDK、GPU 加速的 Spark 3.0 和 NVIDIA RAPIDS™ NVIDIA 数据中心平台能够以出色的性能和效率加速这些大规模工作负载。
• 企业级利用率
  

  A100 的 多实例 GPU (MIG) 功能使 GPU 加速的基础架构利用率大幅提升，达到前所未有的水平。MIG 支持将 A100 GPU 安全分割到多达七个独立实例中，这些 A100 GPU 实例可供多名用户使用，以加速应用和开发项目。此外，数据中心管理员可以利用基于虚拟化技术带来的管理、监控和操作方面的优势，发挥 NVIDIA 虚拟计算服务器 ( vCS) 的动态迁移和多租户功能。A100 的 MIG 功能可以使基础架构管理员对其 GPU 加速的基础架构作标准化处理，同时以更精确的粒度提供 GPU 资源，从而为开发者提供正确的加速计算量，并确保其所有 GPU 资源得到充分利用。