تاریخ:
خلاصه بازی مکزیک - آفریقایجنوبی 
درس پنجاه و یک
هوش مصنوعی همهچیزدان نیست؛ دقت ۶۹ درصدی پیشرفتهترین مدلها
آمار جدید محققان گوگل نشان میدهد که حتی پیشرفتهترین مدل هوش مصنوعی موجود دقت ۶۹ درصدی دارد.
گوگل تصویری نگرانکننده از میزان دقت هوش مصنوعی در بیان حقایق به دست آورد. گوگل دیپمایند هفتهی گذشته از مجموعهی بنچمارک FACTS رونمایی کرد؛ ابزاری برای سنجش اعتبار و درستی پاسخهای مدلهای AI.
به گزارش زومیت، این بنچمارک مدلها را در چهار حوزهی کلیدی به چالش میکشد: پاسخ به پرسشهای واقعی بر اساس دانش درونی، استفادهی مؤثر از جستوجوی وب، استناد دقیق به اسناد طولانی و تفسیر تصاویر. در این آزمون، جمنای ۳ پرو گوگل با کسب امتیاز ۶۹ درصد، بهترین عملکرد را به ثبت رساند؛ درحالیکه سایر مدلهای پیشرو با اختلاف فاحشی پایینتر از این سطح قرار گرفتند.
آمار مذکور باید زنگ خطری جدی برای کسبوکارهایی باشد که روی هوش مصنوعی شرط بستهاند. اگرچه مدلها در سرعت و شیوایی کلام بینظیرند؛ اما قابلیت اطمینان آنها در بیان حقایق همچنان فرسنگها با انتظارات انسانی فاصله دارد؛ بهویژه در وظایفی که نیازمند دانش تخصصی، استدلال پیچیده یا استناد دقیق به منابع هستند.
حتی خطاهای واقعی کوچک در صنایعی مانند امور مالی، بهداشت و درمان و حقوق میتوانند پیامدهای ویرانگری بههمراه داشته باشند. یکی از خبرنگاران روایت میکند که چگونه یک شرکت حقوقی، کارمندش را به دلیل استفاده از ChatGPT در تنظیم لایحهای که مملو از پروندههای ساختگی بود، اخراج کرد.
بنچمارک FACTS هم هشدار است و هم نقشهی راه؛ گوگل امید دارد با کاهش نقاط شکست و نحوهی خطای مدلها، پیشرفت در این حوزه را شتاب ببخشد. اما فعلاً پیام روشن است: هوش مصنوعی بهتر میشود؛ اما همچنان در حدود یکسوم موارد اشتباه میکند.
لینک کوتاه: کپی لینک
30 سال زندان برای رئیس جمهوری سابق کره جنوبی / دلیل: حمله پهپادی به کره شمالی صیادان با شوکر در تالاب/ روایتی از فروپاشی زیستبوم جنوب رسانه نزدیک به جلیلی: معلوم نیست چه کسی در کشور توافق را تایید کرده که می خواهند با قاتلان رهبر جشن امضا بگیرند طلای جهانی کاهش یافت/ قیمت هر اونس چند؟ علت قطع برق شب گذشته در جنوبغرب استان تهران چه بود؟ پنتاگون مدعی سرنگونی دو پهپاد ایرانی در تنگه هرمز شد آکسیوس منتشر کرد: جزئیات «یادداشت تفاهم» ایران و آمریکا امروز با حافظ: خوش خبر باشی ای نسیمِ شِمال ۴۰ درصد تختهای بیمارستانی در تصرف سالمندان اقدام نیروی هوایی آمریکا برای امضای توافق با ایران نمک دریایی سلتیک چیست (+اینفوگرافیک) مغز انسان؛ فرماندهی کوچک با قدرتی بی پایان (+اینفوگرافیک) نگاهی به درون کارگاه ساخت زیردریایی 20 هزار تنی و فوق محرمانه کلاس کلمبیا (+عکس) ايران - آمریکا /توافق در ژنو سوئیس امضا می شود/ تماس ایران و ویتکاف از طریق قطری ها در تهران / جزئیات توافق: امکان استفاده ایران از پول های بلوکه شده ؛ کاهش سطح اورانیوم داخل ایران / پرواز 4 هواپیمای پشتیبان سفر ونس به اروپا برای امضای توافق ورود سامانه بارشی به کشور/ احتمال رگبار و رعدوبرق از امروز جمعه