大模型
1篇文章 · 0订阅
  • 大模型分布式训练并行技术（三）-流水线并行
    近年来，随着Transformer、MOE 架构的提出，使得深度学习模型轻松突破上万亿规模参数，传统的单机单
    LLM 人工智能
    大模型分布式训练并行技术（三）-流水线并行