简易实现AKarpathy的Let39sbuildGPT使用MLX库

内容同步自知识星球《AGI Hunt》，加入可查看更多项目与实时AI动向

简易实现 A. Karpathy 的 Let's build GPT，使用 MLX 库

2024-03-14 4 stars 0 forks

mlx-gpt

简介

mlx-gpt 项目是 DiogoNeves 创建的一个学习项目，用于利用 Apple 的 MLX 库实现 GPT 语言模型，参考 Andrej Karpathy 的 Let's build GPT 视频。

特点

项目致力于保持与原始材料的接近度，易于跟随

包含 Bigram 和 GPT 模型的训练和运行指南

提供了实验性笔记本供参考

截图

项目演示截图 链接: https://youtu.be/kCc8FmEb1nY?si=PRVcXtLSZFvnNHjx

Bigram 模型验证结果比较图表

GPT 模型操作即将推出

安装&使用

环境设置和依赖安装详细指南

Bigram 模型训练和运行说明

GPT 模型即将推出

依赖

Apple's MLX 库

requests 库

Tiny Shakespeare 数据集

(可选) jupyter 笔记本