یک شبیه‌سازی دقیق و کامل از پردازنده آتاری 2600 که با سرعت ناچیز 1.19 مگاهرتز اجرا می‌شود، به‌راحتی موفق شد ChatGPT را در بازی شطرنج کاملاً تحقیر کند. مهندس شرکت Citrix، رابرت جونیور کاروسو، این آزمایش «خنده‌دار» را آخر هفته انجام داد و چت‌بات قدرتمند OpenAI را در برابر یک کنسول آتاری 2600 مجازی شبیه‌سازی‌شده توسط نرم‌افزار Stella قرار داد. نتیجه به نفع چت‌بات نبود.
با وجود اینکه مدل‌های زبانی بزرگ به‌عنوان گامی نوین در تکامل هوش مصنوعی مطرح شده‌اند، آن‌ها از یک تکه چوب پوسیده هوشمندتر نیستند. هر از گاهی، آزمایش یا تجربه‌ای عجیب یادآور می‌شود که این مدل‌های به‌اصطلاح «هوشمند» در واقع وجود خارجی ندارند، مگر در گزارش‌های مالی سه‌ماهه شرکت‌های فناوری.
گفته می‌شود کاروسو این ایده را از خود ChatGPT گرفته است. او در حین صحبت با این بات درباره تاریخچه هوش مصنوعی و شطرنج، پیشنهاد بازی «Atari Chess» را از سوی این سرویس دریافت کرد. کاروسو فرض کرد که منظور از این بازی، شطرنج ویدیویی است؛ تنها عنوان شطرنجی که تاکنون برای آتاری 2600 منتشر شده است.
عملکرد ChatGPT در بازی شطرنج مقابل آتاری 2600
با وجود اینکه ChatGPT نقشه‌ای ابتدایی از صفحه شطرنج برای شناسایی مهره‌ها دریافت کرده بود، به‌شدت دچار مشکل شد. این بات قلعه‌ها را با فیل‌ها اشتباه می‌گرفت، به سربازها توجه نمی‌کرد و مجموعه‌ای از اشتباهات حیرت‌انگیز مرتکب می‌شد. کاروسو می‌گوید ChatGPT حتی عوامل خارجی مانند نمادهای انتزاعی استفاده‌شده در بازی شطرنج ویدیویی را بهانه کرد و آن‌ها را دلیل عدم توانایی خود در پیگیری وضعیت بازی دانست.
کاروسو درباره عملکرد ChatGPT در برابر یک کنسول شبیه‌سازی‌شده دهه 70 گفت: به مدت 90 دقیقه مجبور بودم جلوی حرکت‌های وحشتناک آن را بگیرم و در هر نوبت چندین بار آگاهی آن از صفحه را تصحیح کنم.
ظاهراً این بات مرتباً درخواست می‌کرد بازی را از نو شروع کند، به این امید که عملکرد بهتری داشته باشد، اما در نهایت توسط یک موتور شطرنج 8 بیتی شکست خورد. یک پردازنده 1 مگاهرتزی، در بهترین حالت، می‌تواند تنها یکی دو حرکت جلوتر را پیش‌بینی کند، در حالی که ChatGPT برای ارائه خدمات چت خود به مجموعه‌ای از واحدهای پردازش گرافیکی مدرن و پرمصرف وابسته است. با این حال، پردازنده 1 مگاهرتزی پیروز شد و این چت‌بات را در سطح مبتدی به‌کلی شکست داد.
آزمایش کاروسو یادآوری مفیدی از ماهیت واقعی مدل‌های زبانی بزرگ است: یک جعبه سیاه پیچیده مبتنی بر اکتشافات و الگوریتم‌های ابتکاری که برای ارائه نتیجه‌ای جذاب و رضایت‌بخش به کاربر نهایی طراحی شده‌اند.
دیدگاهتان را بنویسید