فیلم بیشتر »»
کد خبر ۱۱۱۸۶۶۶
تاریخ انتشار: ۰۷:۵۵ - ۰۹-۰۹-۱۴۰۴
کد ۱۱۱۸۶۶۶
انتشار: ۰۷:۵۵ - ۰۹-۰۹-۱۴۰۴

میزان توهم زدن مدل‌های هوش مصنوعی بر اساس پاسخ‌های نادرست یا ناقص (+ اینفوگرافی)

میزان توهم زدن مدل‌های هوش مصنوعی بر اساس پاسخ‌های نادرست یا ناقص (+ اینفوگرافی)
بالا‌ترین نرخ توهم هوش مصنوعی مربوط به Grok‑۳ با ۹۴ درصد بود، به این معنی که تقریباً تمام پاسخ‌های آن اشتباه بودند.

بسیاری از مدل‌های هوش مصنوعی امروز هنگام شناسایی و استناد به منابع خبری از یک متن، دچار مشکل شده و خطاهای زیادی تولید می‌کنند.

به گزارش روزیاتو، بالا‌ترین نرخ توهم هوش مصنوعی مربوط به Grok‑۳ با ۹۴ درصد بود، به این معنی که تقریباً تمام پاسخ‌های آن اشتباه بودند.

آیا هوش مصنوعی شما همیشه پاسخ درست می‌دهد؟ متأسفانه، «حقیقت» ارائه شده توسط آن ممکن است توهم باشد.

این اینفوگرافی، نرخ توهمات هوش مصنوعی را بر اساس مدل‌ها نشان می‌دهد.

«توهم هوش مصنوعی» به مواردی گفته می‌شود که در آن مدل زبانی اطلاعات نادرست یا بدون منبع را به عنوان حقیقت به کاربر ارائه می‌دهد.

توهم هوش مصنوعی چیست؟

«توهم هوش مصنوعی» به مواردی گفته می‌شود که در آن مدل زبانی اطلاعات نادرست یا بدون منبع را به عنوان حقیقت به کاربر ارائه می‌دهد.

این توهمات به این دلیل اتفاق می‌افتند که سیستم‌های آموزش استاندارد، حدس زدن را به جای نشان دادن عدم اطمینان، پاداش می‌دهند. تصور کنید که در یک تست چندگزینه‌ای حدس بزنید؛ احتمال اینکه درست باشد بیشتر از زمانی است که هیچ پاسخی ندهید.

نرخ توهمات هوش مصنوعی: بهترین و بدترین مدل‌ها

برای اندازه‌گیری نرخ توهمات، محققان مدل‌های شرکت‌های پیشرو در حوزه هوش مصنوعی را با متون خبری آزمایش کردند و از آن‌ها خواستند مقاله، رسانه و URL اصلی را مشخص کنند.

نکته مهم اینکه محققان، متونی را انتخاب کردند که اگر در گوگل جستجو شوند، منبع اصلی در سه نتیجه اول ظاهر می‌شود.

سپس پاسخ‌های مدل‌های هوش مصنوعی برای دقت بررسی شدند. جدول زیر نشان می‌دهد هر مدل چند درصد پاسخ نادرست یا ناقص داده است:

مدل هوش مصنوعی نرخ توهم
Perplexity ۳۷ درصد
Copilot ۴۰ درصد
Perplexity Pro ۴۵ درصد
ChatGPT Search ۶۷ درصد
Deepseek Search ۶۸ درصد
Gemini ۷۶ درصد
Grok-2 Search ۷۷ درصد
Grok-3 Search ۹۴ درصد

Grok‑۳ بدترین عملکرد را داشت و ۹۴ درصد پاسخ‌هایش توهم بود، در حالی که Perplexity دقیق‌ترین پاسخ‌ها را ارائه کرد.

نکته جالب اینکه مدل‌های پولی حتی در مواردی از نسخه‌های رایگان ضعیف‌تر عمل کردند. اکثر مدل‌ها نیز، باوجود خطاهای زیاد، هیچ نشانه‌ای از عدم اطمینان در پاسخ‌هایشان نشان ندادند.

پربیننده ترین پست همین یک ساعت اخیر
ارسال به دوستان
captcha
رسانه ترکیه‌ای: نیرو‌های انصارالله شهر المخا را تصرف کردند و حدود ۲۶۰۰ کیلومتر مربع از مناطق یمن را به کنترل خود در آوردند علی جنتی: رفراندوم می‌تواند بن‌بست‌های کشور را بشکند/ در دوران جدید انتظار می‌رود حاکمیت گوش شنوای جامعه باشد ادعای ونس: اگر ترامپ بخواهد، می‌توانیم با ایران به توافق برسیم تصاویر جدید الهام اخوان، بازیگر «مرداب» با استایلی متفاوت و قرمز (+عکس) بازگشت يمن به جنگ داخلی / حملات حوثی ها به عربستان سعودی / رویترز: پیام عربستان سعودی به ایران از کانال پاکستان انگشتان «Pro Max» برای آیفون Duo/ اپل برای کوچک نشان دادن گوشی تاشو دست مدل را هم کش داد؟ سخنگوی وزارت خارجه: انصارالله خود تصمیم می‌گیرد و نیابتی دیگران نیست معاون وزیر بهداشت: طرح نفوذ مسیر تعاملات علمی کشور را محدود می‌کند جنگنده‌ای که آمریکا از آن می‌ترسید، ناگهان سر از ژاپن درآورد جشن تولد غزاله اکرمی، بازیگر «سوجان» در کشتی رستوران لوکس تهران (+عکس) سی‌بی‌اس: ۹ جنگنده آمریکایی در حمله ایران به پایگاهی در اردن آسیب دیدند اکونومیست: ذخایر موشک‌های پاتریوت اوکراین تقریبا تمام شده است رویترز: ایران احتمالاً زیردریایی را که به دست آورده، مهندسی معکوس خواهد کرد تصاویر واضح از یک زیردریایی کلاس نَکِن در خشکی ۲۵ سال بعد از ۱۱ سپتامبر؛ روایت «زمان طلایی» که آمریکا برای صلح با ایران از دست داد