Khả năng kể chuyện về tương lai của ChatGPT: Khám phá prompt tường thuật để cải thiện dự đoán
(arxiv.org)• Nghiên cứu này khảo sát khả năng dự đoán của ChatGPT-3.5 và ChatGPT-4 của OpenAI bằng hai chiến lược prompt riêng biệt: dự đoán trực tiếp và tường thuật về tương lai.
• Phân tích tập trung vào các sự kiện xảy ra trong năm 2022, sau mốc cắt dữ liệu huấn luyện tháng 9 năm 2021 của mô hình, nhằm đánh giá khả năng dự đoán các sự kiện tương lai.
• Kết quả nghiên cứu cho thấy prompt tường thuật về tương lai giúp cải thiện đáng kể độ chính xác dự đoán của ChatGPT-4, đặc biệt trong việc dự đoán các tác phẩm đoạt giải Oscar lớn và xu hướng kinh tế.
• Prompt tường thuật của ChatGPT tận dụng khả năng xây dựng tường thuật mang tính hallucination, cho phép tổng hợp và ngoại suy dữ liệu hiệu quả hơn so với dự đoán trực tiếp.
• Nghiên cứu này nhấn mạnh một khía cạnh mới trong năng lực dự đoán của các mô hình ngôn ngữ lớn (LLM) và gợi ý các ứng dụng tiềm năng trong bối cảnh phân tích.
• Nhóm nghiên cứu đã thuê 2 trợ lý nghiên cứu và truy vấn ChatGPT 50 lần cho mỗi prompt để tạo ra phân phối câu trả lời, tổng cộng 100 lần chạy cho mỗi prompt.
• Kết quả được trình bày bằng biểu đồ hộp mô tả toàn bộ phân phối câu trả lời cho từng prompt, cung cấp góc nhìn sâu hơn về hiệu năng và giới hạn của mô hình.
Chưa có bình luận nào.