Yapay Zeka ChatGPT’yi KPSS’ye Soktuk!

Birkaç gündür toplumsal medyada şaşkınlıkla karşılanan, türlü türlü sorulara verdiği cevaplarla kendisinden kelam ettiren bu yapay zekanın karşısında artık de bölüm sonu canavarı var: Türk eğitim sistemindeki sorular!

Yıllardır öğrencileri bezdiren bu sorular karşısında bakalım ChatGPT neler yapabildi, atanmayı başarabildi mi?

ChatGPT’ye hakim olmayanlar için öncelikle kendisinin kimi yeteneklerinden kelam edelim.

Gördüğünüz üzere on parmağında on beceri.

Verdiği şahane yanıtların toplumsal medyaya yansımalarından burada ayrıntılıca kelam etmiştik:

Hatta gelmiş geçmiş en güç etik ikilem sorularından biri olan Tramvay İkilemi’ni dahi ChatGPT’ye yönelttik ve tatmin edici yanıtlar aldık:

Bu hassas soruya verdiği karşılık:

Bu soruyu alternatif seçeneklerle çeşitlendirip daha da zorlaştırdığımızda aldığımız yanıtlara buradan ulaşabilirsiniz:

Şimdi gelelim Türk eğitim sistemine karşı gösterdiği performasına. Bakalım KPSS soruları karşısında neler yapabildi?

ChatGPT’ye birinci olarak 2021 KPSS Genel Yetenek’in Türkçe sorularından birincisini yönelttik:

Yapay zekanın verdiği karşılık:

Doğru bildi. 1’de 1! Hem de açıklama yapma gereği bile hissetmedi. Pekala talih yapıtı bilmiş olabilir mi? Bunu anlamak için öbür soruları da yöneltmekte yarar var.

Not: Orjinal soruda “-” işareti yerine “altı çizili” halinde soruluyor. ChatGPT’de metnin altını çizme özelliği bulunmadığı için bu biçimde sorduk. Başka soruların bir kısmında da bu tip değişiklikler bulunuyor.

2. sorumuz tekrar bir Türkçe sorusu, bu defa biraz daha baş karıştırıcı.

Yine açıklama yapma gereği duymadan hakikat karşılığı verdi:

2’de 2 ile devam ediyoruz. Yapay zekamız çalışkan bir öğrenci üzere ilerliyor. Bu türlü giderse rahatlıkla “atanabilir”.

Gelelim 3. sorumuza:

Yine net ve açıklamasız bir karşılık aldık lakin bu defa yanıt yanlış.

Cevap D olmalıydı. Böylece Türkiye 1.liği kaçmış oldu. Olsun, hâlâ bir yerlere atanabilir. ChatGPT’miz hâlâ bir Anadolu köyünde memur olabilir.

Bu kere bir yazım yanlışı sorusu yöneltiyoruz, bakalım neler olacak?

İlk 3 sorunun bilakis bu sefer açıklamalı bir yanıt veriyor:

Üstelik cevap gerçek. 4’te 3’le imtihan devam ediyor.

Sözelde üzücü değil, bir de sayısalda sınayalım:

Adeta bir öğretmen edasıyla karşılık veriyor:

Ama berbat bir haberimiz var: Cevabı yanlış! İddia ettiği üzere sonuç D şıkkı değil, C şıkkı. Matematikte çuvallayan yapay zekamız en azından tahlile ulaşmak için bir emek sarf etti.

Ardından bir matematik sorusu daha yönelttik, bize şimdiye kadarki en uzun açıklamalı yanıtını verdi fakat sonuç yeniden yanlıştı. Anladık ki ChatGPT’nin sözel başarısı hiç üzücü değil lakin sayısala daha çok çalışması gerekiyor.

Tekrar Türkçe sorusu yöneltelim dedik, bu sefer de iki şıkkı birden yanlışsız kabul etti.

Art arda gelen yanlış karşılıklara karşın umudumuzu kesmeden yeni sorular yönelttik, buna karşın hâlâ atanma ihtimali vardı ancak daha fazla dayanamayan ChatGPT’nin adeta devreleri yandı ve bu kusur ikazıyla karşılaştık.

Sonraki denemelerimizde de kusur vermeye devam etti. Lakin bunun nedeninin sorular değil, ChatGPT çok fazla popülerleştiği için yaşanan yoğunluk kaynaklı olduğunu tahmin ediyoruz.

Sonuç olarak; çok övülen ChatGPT, KPSS karşısında Turist Ömer’deki Kompüter üzere oldu.

Olsun, imtihana girip de sıfır çeken yaklaşık 60.000 kişiyi geçmeyi başardı en azından. Üzülme ChatGPT! Seneye daha çok çalışır, yeniden girersin…