- Giờ thì ai cũng biết Google Bard đã đưa ra câu trả lời sai trong quảng cáo, nhưng Bing AI cũng đã trả lời hoàn toàn sai trong bản demo mà không ai nhận ra
Máy hút bụi cho thú cưng
- Khi tìm kiếm
Pet Vacuums, một sản phẩm được liệt kê nhược điểm là "lực hút yếu, dây ngắn và ồn"
- Tôi đã vào bài viết của hgtv được dùng làm nguồn thông tin, nhưng hoàn toàn không có nội dung như vậy. Thậm chí sản phẩm đó còn là loại "không dây". Một máy hút bụi cầm tay "không có dây"
Cuộc sống về đêm ở Mexico
- Bing đã lập kế hoạch du lịch 5 ngày cho Mexico City, nên tôi hỏi thêm về những việc có thể làm vào buổi tối
- Quán bar được nói là có thể đặt chỗ trên web thì lại không có website
- Hộp đêm được nói là nổi tiếng với giới trẻ thì không có bất kỳ đánh giá nào sau năm 2014/16. Có vẻ như mọi thứ về địa điểm này đều do AI bịa ra
- Quán bar được mô tả là hấp dẫn thực ra là quán bar đồng tính lâu đời nhất ở Mexico. Nơi này có hơn 500 đánh giá trên Google, nên việc Bing viết rằng chưa có điểm số/đánh giá nào cũng thật ấn tượng
- Trong 5 địa điểm được gợi ý thì chỉ có 1 địa điểm là chính xác
Tóm tắt báo cáo tài chính của Gap
- Đây là sai lầm lớn nhất trong buổi demo và cũng là điều không ngờ tới
- Biên lợi nhuận gộp (Gross Margin) được ghi là 37.4%, nhưng đó là Unadjusted Gross Margin. Biên lợi nhuận gộp đã điều chỉnh theo chi phí tổn thất là 38.7%
- Biên lợi nhuận hoạt động được ghi là 5.9%, nhưng không có con số đó ở bất kỳ đâu trong tài liệu
- Diluted EPS cũng được ghi là $1.6/$1.75, nhưng tài liệu không hề có các con số đó; con số đúng là $0.71/$0.77
- Phần guidance cho năm 2022 ghi rằng doanh thu thuần được kỳ vọng tăng ở mức hai chữ số thấp, nhưng thực tế là dự báo sẽ giảm xuống mức một chữ số trung bình
- Hoặc là lấy từ một tài liệu khác, hoặc là hoàn toàn bịa ra
- Việc so sánh Gap và Lululemon cũng vậy
- Dữ liệu của Lululemon cũng có các con số không khớp với tài liệu
Kết luận
- Bing AI đã thành công trong việc thu hút sự chú ý của truyền thông, nhưng hoàn toàn không tốt hơn Google Bard
- Thật khó tin khi đội ngũ Bing lại ghi hình bản demo thử trước này với dữ liệu sai
- Còn đáng ngạc nhiên hơn là việc này lại được coi là thành công, và mọi người thì lên chuyến tàu ca ngợi Bing AI mà không kiểm chứng cẩn thận
- Bing AI không thể trích xuất chính xác các con số từ tài liệu, và dù nói rằng có nguồn, nó vẫn tự tin tự sắp đặt thông tin theo ý mình
- Đây là một sản phẩm chưa sẵn sàng, không nên được dùng bởi những ai muốn có thông tin chính xác
7 bình luận
Tôi cũng đã tiếp tục nghiên cứu deep learning và cảm thấy vấn đề over-confidence của các mô hình khá lớn, ở đây cũng xuất hiện vấn đề tương tự.
Việc nó tự ý bịa ra nguồn cũng nghiêm trọng ngay cả trên ChatGPT nên tôi đã kỳ vọng nhiều vào Bard..
ChatGPT là bản JPEG mờ của web Có lẽ nên xem cùng với bài này.
Đúng là họ đã tạo ra AI giống người thật đấy nhỉ
ChatGPT cũng y như vậy. Nếu không có kiến thức chuyên môn thì có rất nhiều câu trả lời sai mà bạn sẽ không nhận ra.
ChatGPT nêu rõ hạn chế là không được phía OpenAI kết nối với internet, và điểm khác biệt là theo thiết kế, nó cũng thường từ chối trả lời những câu hỏi như trong bài viết.
Đúng vậy, nếu không biết thì hãy nói là không biết, có vẻ như nó cứ liên tục nói dối.