GPT-4 اکثر تست ها را در 10% بالای گروه انجام می دهد، در حالی که نسخه اصلی اغلب در 10% پایین قرار دارد. GPT-4 که آخرین نسخه چت ربات هوش مصنوعی ChatGPT است، می تواند در آزمون دبیرستان و حقوق با نمره 90 از 100 قبول شود و دارای قابلیت های پردازشی جدیدی است که در نسخه قبلی امکان پذیر نبود.
شکل‌های آزمایش GPT-4 توسط توسعه‌دهنده در 14 مارس به اشتراک گذاشته شد که نشان می‌دهد ChatGPT می‌تواند تصاویر ورودی، صدا و ویدیو را به متن و «دستورالعمل‌های ظریف» خلاقانه‌تر و قابل اعتمادتر برای مدیریت تبدیل کند.
OpenAI اضافه کرد:
“این پرونده در آزمون وکالت شبیه سازی شده با امتیاز در 10 درصد از شرکت کنندگان موفق می شود. در مقابل، امتیاز GPT-3.5 حدود 10 درصد کمتر بود.
اعداد نشان می دهد که GPT-4 در LSAT امتیاز 163 را کسب کرده است. طبق قانون، دانش آموزان برای پذیرش در دانشکده حقوق باید امتحان را در ایالات متحده بگذرانند. نمره GPT4 او را در موقعیت خوبی برای پذیرش در 20 دانشکده حقوق برتر قرار می دهد و تنها چند امتیاز با شرایط پذیرش دانشکده های معتبر مانند هاروارد، استنفورد، پرینستون یا ییل فاصله دارد.
نسخه قبلی ChatGPT امتیاز 149 را در LSAT کسب کرد که آن را در 40 درصد پایین تر قرار داد. علاوه بر این، GPT-4 امتیاز 298 از 400 را در آزمون وکالت به دست آورد، امتحانی که به فارغ التحصیلان اخیر اجازه می دهد در هر حوزه قضایی ایالات متحده وکالت کنند.
نسخه قدیمی ChatGPT در این تست با مشکل مواجه شد و امتیاز 213 از 400 را در 10 درصد پایینی کسب کرد.
در آزمون‌های SAT Evidence Reading & Writing و SAT Math که توسط دانش‌آموزان دبیرستانی ایالات متحده برای اندازه‌گیری آمادگی دانشگاهی آنها گرفته شد، GPT-4 به ترتیب امتیاز 93 و 89 را کسب کرد.
GPT-4 در علوم پایه نیز سرآمد بود و نمرات بسیار بالایی کسب کرد. حدود 85-100٪ در زیست شناسی، 71-88٪ در شیمی و حدود 66-84٪ در فیزیک 2. با این حال، نمره AP او تقریباً متوسط بود و در حدود 43-59 از 100 امتیاز داشت.
یکی دیگر از زمینه‌هایی که GPT-4 در آن شکست خورد، آزمون‌های ادبیات انگلیسی بود که در دو آزمون مجزا بین 8 تا 44 امتیاز کسب کرد.
OpenAI گفت که GPT-4 و GPT-3.5 این تست ها را در آزمون های تمرینی 2022-2023 انجام دادند و “هیچ آموزش خاصی توسط ابزارهای پردازش زبان انجام نشد.”
ما هیچ آموزش خاصی برای این امتحانات انجام ندادیم. در طول آموزش، مدل متوجه بخش کوچکی از مشکلات امتحان شد، اما ما معتقدیم که نتایج معرف هستند.”
نیازی به گفتن نیست که این نتایج موجی از شوک را در جامعه توییتر ایجاد کرد.
نیک آلموند، بنیانگذار FactoryDAO، به ۱۴۳۰۰ دنبال کننده توییتر خود در ۱۴ مارس گفت:
GPT4 “مردم را می ترساند و سیستم آموزشی جهانی را از بین می برد.”
وی همچنین در 14 مارس 2023 گفت:
«تئوری ارزش گذاری سال ها بخش بزرگی از زندگی من بوده است. سالها پیش به آن روز فکر کردم. سپس سخنان من به معنای واقعی کلمه عجیب به نظر می رسید! این بدان معنی است که از این نقطه به بعد همه چیز به جز ارزیابی نادیده گرفته شده به پایان رسیده است. “
مدیر عامل سابق Coinbase Conor Grogan گفت که او یک قرارداد هوشمند اتریوم زنده را روی GPT-4 پیاده سازی کرده است، و چت بات به سرعت به چندین “آسیب پذیری امنیتی” اشاره کرد و توضیح داد که چگونه می توان از کد mighbe استفاده کرد:
من یک قرارداد زنده از GPT-4 گذاشتم. او در یک نقطه، تعدادی از آسیب‌پذیری‌های امنیتی را برجسته کرد و به مناطق سطحی اشاره کرد که از قرارداد می‌توان بهره‌برداری کرد. سپس او به نوعی تایید کرد که می توانم از قرارداد سوء استفاده کنم.
ممیزی های قبلی قرارداد هوشمند ChatGPT نشان داده است که نسخه اول همچنین می تواند خطاهای کد را تا حد معقولی تشخیص دهد.
Rowan Cheung، بنیانگذار خبرنامه، ویدئویی از GPT را به اشتراک گذاشت که یک وب سایت جعلی را که با دست طراحی شده بود روی یک تکه کاغذ به کد تبدیل می کرد. شما در 14 مارس در توییتر اعلام کردید:
من به تازگی تماشا کردم که GPT-4 یک طرح دستی را به یک وب سایت کاربردی تبدیل کرد. این دیوانه است!”
این مطلب توسط تیم تحریریه کوین اکسو گردآوری شده است.
