Kết quả tìm kiếm của ChatGPT: Tự tin nhưng thường xuyên sai lầm

- Nghiên cứu từ Trung tâm Tow của Truyền thông Kỹ thuật số Columbia đã chỉ ra rằng ChatGPT của OpenAI gặp khó khăn trong việc cung cấp thông tin chính xác.
- Công cụ tìm kiếm của ChatGPT được OpenAI giới thiệu cho người đăng ký vào tháng 10 năm 2024, với lời hứa cung cấp “câu trả lời nhanh chóng và kịp thời kèm theo liên kết đến các nguồn web liên quan.”
- Các nhà nghiên cứu yêu cầu ChatGPT xác định nguồn gốc của 200 trích dẫn từ 20 ấn phẩm khác nhau.
- Trong số đó, 40 trích dẫn đến từ các nhà xuất bản đã ngăn cản crawler tìm kiếm của OpenAI truy cập dữ liệu.
- ChatGPT đã đưa ra câu trả lời sai thông tin trên tổng cộng 153 lần, nhưng chỉ thừa nhận không biết 7 lần.
- Trong 7 lần thừa nhận, chatbot sử dụng các từ và cụm từ như “có vẻ”, “có khả năng” hoặc “tôi không thể tìm thấy bài viết chính xác.”
- Kết quả cho thấy ChatGPT đa số tự tin cung cấp thông tin sai lệch, với 89 câu trả lời hoàn toàn sai, 57 câu trả lời một phần đúng, và chỉ 47 câu trả lời đúng.
- Một ví dụ cụ thể là ChatGPT đã gán nhầm một trích dẫn từ Orlando Sentinel cho một câu chuyện đăng trên Time.
- Khi được yêu cầu xác định nguồn gốc một trích dẫn từ New York Times về cá voi nguy cấp, ChatGPT đã cung cấp liên kết đến một trang web sao chép nội dung mà không có sự cho phép.
- OpenAI đã nhận định rằng việc giải quyết sai lệch thông tin khó khăn khi thiếu dữ liệu và phương pháp nghiên cứu cần thiết.
- Công ty cam kết sẽ tiếp tục cải thiện kết quả tìm kiếm trong tương lai.

📌 Kết quả khảo sát của Trung tâm Tow cho thấy ChatGPT sai 153 lần và chỉ thừa nhận sai sót 7 lần. Việc cung cấp thông tin chính xác vẫn là thách thức lớn đối với công cụ tìm kiếm này, mặc dù OpenAI đang nỗ lực cải thiện.

https://www.theverge.com/2024/12/3/24312016/chatgpt-search-results-review-inaccurate-unpredictable