大模型是什么？大模型有什么用？训练大模型会遇到哪些挑战？

大模型是什么？大模型有什么用？训练大模型会遇到哪些挑战？ 【大模型与分布式训练】系列第二篇！这一期内容主要宏观层面去看看大模型所谓的大，到底对实际的AI有什么帮助和作用。既然要训练大模型，会遇到四个方面的主要的挑战：内存墙、通信墙、效率墙、调优墙。希望MindSpore可以在大模型引领业界，小菊花们要继续努力。