DeepSpeed
  • 训练设置
  • 推理设置
  • 训练 API
  • 推理 API
  • 模型检查点
  • 激活检查点
  • ZeRO
  • 专家混合 (MoE)
  • Transformer 内核
  • 流水线并行
  • 优化器
  • 学习率调度器
  • 浮点运算 (FLOPs) 分析器
  • 自动调整
  • 内存需求
  • 监控
DeepSpeed
  • 搜索

© 2020 版权所有，Microsoft。

使用 Sphinx 构建，并使用 主题 由 Read the Docs 提供。