xturing - Tạo và kiểm soát LLM của riêng bạn
(github.com/stochasticai)- Công cụ mã nguồn mở để fine-tune nhanh và hiệu quả các LLM như LLaMA, GPT-J, GPT-2
- Lấy dữ liệu từ nhiều nguồn khác nhau và tiền xử lý chúng sang định dạng mà các LLM có thể hiểu
- Tận dụng từ GPU đơn đến nhiều GPU để tinh chỉnh nhanh hơn
- Giảm chi phí bằng cách sử dụng các kỹ thuật tối ưu bộ nhớ (như LoRA)
- Đánh giá nhiều phương pháp fine-tune khác nhau để tìm ra mô hình tối ưu
- Đánh giá các mô hình đã fine-tune thông qua các metric được định nghĩa rõ ràng
Chưa có bình luận nào.