分布式

TePDistTePDist是阿里云PAI团队自研的基于HLO IR层的全自动分布式深度学习系统，它不仅仅是一个分布式Compiler，还拥有自己的分布式Runtime，有效地解决了深度学习模型并行策略的自动搜索与分布式策略实施问题。 GitHub地址 文档 钉群答疑 EasyNLPEasyNLP是PyTorch中易于使用的NLP开发和应用工具包，它采用可扩…