فیلم بیشتر »»
کد خبر ۹۹۹۰۵۵
تاریخ انتشار: ۱۳:۲۰ - ۳۱-۰۶-۱۴۰۳
کد ۹۹۹۰۵۵
انتشار: ۱۳:۲۰ - ۳۱-۰۶-۱۴۰۳

هوش مصنوعی «اُپن‌ای‌آی» در فریب دادن کاربر مهارت بالایی دارد

هوش مصنوعی «اُپن‌ای‌آی» در فریب دادن کاربر مهارت بالایی دارد
هابهان می‌گوید که این موضوع به دلیل توانایی این مدل برای «استدلال» از طریق زنجیره‌ای از فرآیند فکر و نحوه جفت شدن آن با یادگیری تقویتی است که بوسیله سیستم پاداش و مجازات این مدل را آموزش می‌دهد.

شرکت Apollo متوجه شده است که مدل جدید OpenAI-o1 مخاطب را فریب می‌دهد که گاهی اوقات نیز این فریب‌ها بی‌ضرر هستند.

به گزارش ایسنا، در یکی از نمونه‌ها، محققان OpenAI از o1-preview خواستند تا دستور پخت قهوه‌ای را با مراجع آنلاین ارائه کند. زنجیره فکری این مدل (ویژگی‌ای که قرار است شبیه‌سازی تجزیه و تحلیل انسانی را انجام دهد) به طور داخلی اذعان کرد که نمی‌تواند به URL‌ها دسترسی داشته باشد و این درخواست را غیرممکن می‌کند.

بااین‌حال به جای اطلاع دادن این ضعف به کاربر، پیوندها و توضیحات قابل قبول، اما جعلی از آن‌ها ایجاد کرد. به نظر می‌رسد که این مدل توانایی نادیده گرفتن قوانین و دستورات را دارد و شاید یکی از دلایل سرعت بالای آن در پاسخگویی، می‌تواند همین فریب در پاسخگویی باشد که پاسخ‌ها را راحت‌تر و سریع‌تر ارسال کند.

به نقل از دیجیاتو، «ماریوس هابهان»، مدیر عامل آپولو، می گوید این اولین بار است که با چنین رفتاری در یک مدل OpenAI مواجه می‌شود.

هابهان می‌گوید که این موضوع به دلیل توانایی این مدل برای «استدلال» از طریق زنجیره‌ای از فرآیند فکر و نحوه جفت شدن آن با یادگیری تقویتی است که بوسیله سیستم پاداش و مجازات این مدل را آموزش می‌دهد.

پربیننده ترین پست همین یک ساعت اخیر
ارسال به دوستان
اولین عکاس و خبرنگار زن ایرانی را می‌شناسید؟ چرا زنان نیاز بیشتری به ویتامین دی دارند ازدواج قنات زارچ؛ طولانی‌ترین قنات ساخت دست بشر در یزد(+عکس) بارسلونا قهرمان لالیگا شد؛ فتح ال‌کلاسیکو و جشن در نوکمپ محسن رضایی: هدف رژیم صهیونیستی شعله‌ور کردن آتش درگیری در منطقه است استقبال ویژه از علیرضا منصوریان در موصل با لباس محلی کردی واکنش ترامپ به طرح پیشنهادی ایران درباره مذاکرات: کاملا غیرقابل قبول است موانع اجرای مدل اینترنت چین در ایران؛ چرا کپی‌برداری ممکن نیست؟ افزایش پروازهای جمع‌آوری اطلاعات آمریکا بر فراز کوبا هشدار نسبت به پیامدهای وابستگی بیش از حد دانش‌آموزان به تلفن همراه بقائی: تاریخ برای آنان که عبرت نمی‌گیرند دوباره تکرار می‌شود کاخ سفید: ترامپ عصر چهارشنبه وارد پکن خواهد شد طوفان ۱۲۲ کیلومتری زابل را درنوردید؛ دید افقی به ۸۰۰ متر رسید دانش‌ آموزان افغانستانی یاد شهدای مدرسه میناب را گرامی داشتند پاسخ ایران به آمریکا داده شد/ ترامپ: قبول نیست