nanoGPT - Mã nguồn mở để huấn luyện/tinh chỉnh GPT cỡ trung với tốc độ nhanh nhất
(github.com/karpathy)- Mã do Andrej Karpathy, người từng đứng đầu AI của Tesla, viết lại từ minGPT
- Mục tiêu là viết mã dễ đọc và đơn giản
train.pykhoảng 300 dòngmodel.pykhoảng 300 dòng
- Đang trong quá trình tái hiện GPT-2 trên bộ dữ liệu OpenWebText
Chưa có bình luận nào.