Piper: A Programmable Distributed Training System
Piper: 可编程的分布式训练系统
机构 * University of Washington(华盛顿大学) ; University of Washington and Shanghai Jiao Tong University(华盛顿大学和上海交通大学)
AI总结 提出Piper系统,通过解耦策略与运行时实现,允许用户用少量注解和调度指令声明分布式训练策略,并编译为设备执行计划,支持常见策略并实现组合策略的联合调度优化。