ChatGPT, satranç oyununda sınıfta kaldı!

OpenAI tarafından geliştirilen yapay zeka modeli ChatGPT, 1977 yapımı Atari 2600 oyun konsolunun emüle edilmiş bir versiyonunda çalışan basit bir satranç motoruna karşı oynadığı oyunda açık bir yenilgi aldı. Deney, Citrix mühendisi Robert Jr. Caruso tarafından gerçekleştirildi. Karşısında yer alan yazılım ise Atari’nin “Video Chess” adlı klasik satranç oyunuydu.

ChatGPT, satrançta resmen sınıfta kaldı

1 MHz hızında çalışan Video Chess motoru, modern yapay zekaya karşı oyunu net bir şekilde kazandı. ChatGPT, satranç tahtasında yer alan taşları tanımakta zorlandı. Kaleleri fillerle karıştırdı, piyonların varlığını göz ardı etti ve oyunun temel akışını anlayamadı.

Caruso’nun her hamlede tahtadaki durumu yapay zekâya yeniden açıklaması gerekti. Model, oyunun gidişatını kavrayamayıp sürekli olarak kullanıcı yönlendirmesi bekledi. Mühendis, bu durumu “taş farkındalığının olmaması” şeklinde tanımladı.

Maç boyunca yaşananlar, büyük dil modellerinin strateji temelli oyunlardaki zaaflarını ortaya koydu. ChatGPT, oyunun birçok anında hatalı değerlendirmelerde bulundu. Bazı durumlarda oyun sıfırdan başlatılmak zorunda kaldı.

Hatalarını Video Chess’in simgesel arayüzüne bağlayan ChatGPT, emüle edilmiş basit bir oyun motoru karşısında başarısız oldu. 8-bit grafiklere sahip ve oldukça sınırlı donanımsal kapasiteye sahip Atari satranç motoru, parametre sayısı milyonları bulan bir yapay zeka sistemini net bir şekilde mağlup etti.

Caruso, bu deneyin ardından bir sonraki testi için hazırlıklara başladı. Sırada, 16 MHz hızında çalışan emüle edilmiş bir 80286 işlemcide “Battle Chess” oyununun ChatGPT ile oynanması planlanıyor. Yeni deneyin sonucu, büyük dil modellerinin oyun temelli yeteneklerine dair daha fazla veri sunma potansiyeli taşıyor.