百度
作者:zhenfei 阅读帮助 第一部分为看清:大模型的训练及推理过程是如何的,以及内部逻辑 第二部分为理解:大模型的训练及推理和算力的关系 第三部分为推演:用简单的公式量化大模型算力的需求 第四部分为优化:我们如何提高算力利用率 一、看清 1.1 大模型训练 我们以投篮训练为例,来尝试理解大模型的
2023-08-25


作者:zhenfei 阅读帮助 第一部分为看清:大模型的训练及推理过程是如何的,以及内部逻辑 第二部分为理解:大模型的训练及推理和算力的关系 第三部分为推演:用简单的公式量化大模型算力的需求 第四部分为优化:我们如何提高算力利用率 一、看清 1.1 大模型训练 我们以投篮训练为例,来尝试理解大模型的