GitHub - jingyaogong/minimind: 🚀🚀 「大模型」2小时完全从0训练26M的小参数GPT!🌏 Train a 26M-parameter GPT from scratch in just 2h!

<aside> 💡

!!!注意,up制作视频时是2025.11,在之后minimind官方仓库针对很多错误的地方进行了修复

代码可以参照minimind官方原仓库

如有错误请b站@我,如果比较严重会重制相关内容

感谢支持~

</aside>

需要学习的前置知识以及相关资源

理论讲解

手敲代码部分

数据搜集与训练部分

相关torch方法