Cập nhật 'Blank.' - chuyển sang Gemma 4, sửa lỗi đáp án trùng lặp, cải thiện chất lượng đáp án sai
(play.google.com)Đây là tin cập nhật về Blank., ứng dụng đố vui điền vào chỗ trống AI on-device mà tôi đã đăng vào tháng 2 vừa qua.
Những phản hồi mà mọi người để lại trong phần bình luận khi đó đã thực sự giúp ích rất nhiều trong việc định hướng phát triển. Xin cảm ơn.
Đặc biệt, lỗi mà deleuze đã chỉ ra là "trong 7 câu hỏi thì có 5 đáp án đúng là cùng một từ"
đã là một phản hồi rất đau nhưng cũng trở thành hạng mục cải thiện cốt lõi của bản cập nhật lần này.
Các thay đổi chính
1. Gemma 3 1B → Gemma 4 E2B
Engine suy luận cũng đã được thay từ MediaPipe LlmInference sang Google AI Edge LiteRT.
Độ ổn định trong instruction following được cải thiện, nên các đầu ra kỳ lạ lệch khỏi prompt
đã giảm đi thấy rõ.
2. Sửa lỗi đáp án trùng lặp
Đã sửa lỗi cùng một từ điền vào chỗ trống bị lặp lại ở nhiều câu hỏi.
Trong quá trình tạo quiz từ một tài liệu, các từ đã dùng trước đó sẽ được theo dõi và loại trừ.
3. Cải thiện chất lượng lựa chọn đáp án sai
Trước đây chỉ chọn ngẫu nhiên 3 từ khóa trong tài liệu để làm đáp án sai,
lần này đã thay bằng hệ thống chấm điểm.
- Khớp ngôn ngữ với đáp án đúng (tiếng Hàn↔tiếng Hàn, tiếng Anh↔tiếng Anh)
- Mức độ tương đồng về số ký tự với đáp án đúng
- Ưu tiên các từ xuất hiện trong cùng một câu
- Mức độ tương đồng về tần suất xuất hiện trong tài liệu
Nhờ đó, hiện tượng đáp án đúng lộ ra quá rõ đã giảm đi khá nhiều.
4. Thêm tính năng làm lại quiz
Ở màn hình kết quả, giờ có thể bắt đầu lại quiz ngay với cùng một tài liệu.
Vấn đề hiệu năng trên điện thoại đời cũ (newbie1004) khó có thể được giải quyết hoàn toàn vì đó là giới hạn mang tính bản chất của LLM on-device, nhưng chúng tôi kỳ vọng việc thay model và engine sẽ giúp cải thiện phần nào.
Phiên bản iOS (luclipse) sẽ được xem xét sau khi hoàn tất việc ổn định hóa trên Android.
Play Store: https://play.google.com/store/apps/details?id=com.shootsir.blank
Chúng tôi sẽ tiếp tục cải thiện. Rất hoan nghênh phản hồi.
Chưa có bình luận nào.