分布式高阶配置案例

• 鹏程·盘古模型网络多维度混合并行解析
• 分布式训练通信融合
• 通信子图提取与复用
• 数据集切分
• 分布式图切分
• 分布式故障恢复
• 分布式弹性训练与推理
• 保存和加载模型（HyBrid Parallel模式）
• 切分策略传播
• 异构存储