GitHub repository: KaihuaTang/Building-a-Small-LLM-from-Scratch
Primary language: Python
Description: 该系列的目的是让读者可以在基础的pytorch上，不依赖任何其他现成的外部库，从零开始理解并实现一个大语言模型的所有组成部分，以及训练微调代码，因此读者仅需python，pytorch和最基础深度学习背景知识即可。