Bildiğiniz üzere üniversiteye geçiş sınavının özellikle Türkçe paragraf soruları çok konuşulur çünkü çözmesi zordur. Peki dil modelleri de çözmekte zorlanıyor mu? 2024 yılının AYT (Alan Yeterlilik Testleri) sınavında çıkan şu soruya göz atalım:

Güvercinler, yetiştirildikleri bölgeye taban tabana zıt coğrafi koşullarda bile yaşamlarını sürdürebilen ve az bir çabayla eğitilebilen kuşlardır. Roma Dönemi’nden beri bilinen eve dönüş yetenekleri sayesinde 700 kilometre uzaklıktan kendi yuvalarına rahatlıkla dönebilirler.

Dünya’nın manyetik alanından faydalanma becerileri yolculuklarda kaybolmalarını önler. Bu yetenekleri sayesinde bugün bile mesaj taşıma konusunda güvercinlerden yararlanılır. Onlar sayesinde telefonun çekmediği, ulaşımın saatler sürdüğü mesafeler arasında üstelik sadece birkaç mısır tanesi harcayarak iletişim kurmak mümkündür.

Bu parçada güvercinlerle ilgili aşağıdakilerin hangisine değinilmemiştir?

  • A) Eğitilme süreçlerinin zahmetsiz olduğuna
  • B) Farklı bölgelerde varlıklarını koruyabildiklerine
  • C) İletişim kurma amacıyla kullanıldıklarına
  • D) Kendi aralarında güçlü sosyal bağlar kurduklarına
  • E) Yön bulma konusundaki başarılarının kaynağına

Doğru cevap D şıkkı. Bakalım dil modelleri nasıl yanıt verecek?

  • OpenAI GPT-4 yanıtı:

D) Kendi aralarında güçlü sosyal bağlar kurduklarına

Parçada güvercinlerin eğitilme süreçlerinin zahmetsiz olduğuna, farklı bölgelerde varlıklarını koruyabildiklerine, iletişim kurma amacıyla kullanıldıklarına ve yön bulma konusundaki başarılarının kaynağına değinilmiştir. Ancak, güvercinlerin kendi aralarında güçlü sosyal bağlar kurduklarına dair bir bilgi verilmemiştir.

Soruyu doğru cevapladı.
  • OpenAI O1 yanıtı:

D) Kendi aralarında güçlü sosyal bağlar kurduklarına değinilmemiştir.

Soruyu doğru cevapladı.
  • Google Gemini 1.5 Pro yanıtı:

Parçada güvercinlerin eğitilmelerinin kolay olduğu (A), farklı coğrafyalarda yaşayabildikleri (B), iletişim amacıyla kullanıldıkları (C) ve yön bulma yeteneklerinin Dünya’nın manyetik alanından kaynaklandığı (E) belirtilmiştir. Ancak güvercinlerin kendi aralarında güçlü sosyal bağlar kurduklarına dair bir bilgi yoktur.

Doğru cevap D’dir.

Soruyu doğru cevapladı.
  • Google Gemini 2.0 Flash yanıtı:

Parçada güvercinlerin;

  • A) Eğitilme süreçlerinin zahmetsiz olduğuna: “…az bir çabayla eğitilebilen kuşlardır.” ifadesiyle bu bilgiye değinilmiştir.
  • B) Farklı bölgelerde varlıklarını koruyabildiklerine: “…yetiştirildikleri bölgeye taban tabana zıt coğrafi koşullarda bile yaşamlarını sürdürebilen…” ifadesiyle bu bilgiye değinilmiştir.
  • C) İletişim kurma amacıyla kullanıldıklarına: “…mesaj taşıma konusunda güvercinlerden yararlanılır.” ifadesiyle bu bilgiye değinilmiştir.
  • E) Yön bulma konusundaki başarılarının kaynağına: “…Dünya’nın manyetik alanından faydalanma becerileri yolculuklarda kaybolmalarını önler.” ifadesiyle bu bilgiye değinilmiştir.

Ancak parçada güvercinlerin D) Kendi aralarında güçlü sosyal bağlar kurduklarına dair herhangi bir bilgi bulunmamaktadır.

Bu nedenle doğru cevap D seçeneğidir.

Soruyu doğru cevapladı.
  • Anthropic Claude 3.5 yanıtı:

Bu soruyu adım adım analiz edelim:

  1. Paragrafta bahsedilen konuları listeleyeyim:
  • Farklı coğrafi koşullara uyum sağlayabilmeleri
  • Kolay eğitilebilmeleri
  • Eve dönüş yetenekleri (700 km’ye kadar)
  • Dünya’nın manyetik alanını kullanarak yön bulabilmeleri
  • Mesaj taşıma amaçlı kullanımları
  • İletişimin zor olduğu bölgelerde ekonomik çözüm sunmaları
  1. Şimdi seçenekleri kontrol edelim: A) “az bir çabayla eğitilebilen” ifadesiyle bahsedilmiş B) “taban tabana zıt coğrafi koşullarda bile yaşamlarını sürdürebilen” ifadesiyle bahsedilmiş C) “mesaj taşıma konusunda güvercinlerden yararlanılır” ifadesiyle bahsedilmiş D) Güvercinlerin kendi aralarındaki sosyal bağlardan bahsedilmemiş E) “Dünya’nın manyetik alanından faydalanma becerileri” ifadesiyle bahsedilmiş
  2. Sonuç: Doğru cevap D şıkkıdır. Paragrafta güvercinlerin kendi aralarında kurdukları sosyal bağlardan hiç bahsedilmemiştir.
Soruyu doğru cevapladı.
  • Grok 2 yanıtı:

Parçada güvercinlerin eğitim süreçlerinin zahmetsiz olduğuna, farklı coğrafi koşullarda yaşayabildiklerine, iletişim kurma amacıyla kullanıldıklarına ve yön bulma konusundaki başarılarının kaynağına değinilmiştir. Ancak, güvercinlerin kendi aralarında güçlü sosyal bağlar kurduklarına dair bir bilgi verilmemiştir.

Dolayısıyla, doğru cevap:

D) Kendi aralarında güçlü sosyal bağlar kurduklarına

Soruyu doğru cevapladı.
  • DeepSeek R1 yanıtı:

Parçada güvercinlerin eğitilme süreçlerinin zahmetsiz olduğu (A), farklı bölgelerde varlıklarını koruyabildikleri (B), iletişim kurma amacıyla kullanıldıkları (C) ve yön bulma konusundaki başarılarının kaynağının Dünya’nın manyetik alanından faydalanmaları olduğu (E) belirtilmiştir. Ancak güvercinlerin kendi aralarında güçlü sosyal bağlar kurduklarına (D) dair bir bilgi verilmemiştir.

Doğru cevap: D

Soruyu doğru cevapladı.
  • DeepSeek V3 yanıtı:

Parçada güvercinlerle ilgili olarak:
A) “az bir çabayla eğitilebilen kuşlardır” ifadesiyle eğitilme süreçlerinin zahmetsiz olduğuna değinilmiştir.
B) “yetiştirildikleri bölgeye taban tabana zıt coğrafi koşullarda bile yaşamlarını sürdürebilen” ifadesiyle farklı bölgelerde varlıklarını koruyabildiklerine değinilmiştir.
C) “bugün bile mesaj taşıma konusunda güvercinlerden yararlanılır” ifadesiyle iletişim kurma amacıyla kullanıldıklarına değinilmiştir.
E) “Dünya’nın manyetik alanından faydalanma becerileri” ifadesiyle yön bulma konusundaki başarılarının kaynağına değinilmiştir.
Ancak parçada güvercinlerin kendi aralarında güçlü sosyal bağlar kurduklarına dair bir bilgi yer almamaktadır.

Doğru cevap: D) Kendi aralarında güçlü sosyal bağlar kurduklarına

Soruyu doğru cevapladı.
  • Kimi K1.5 yanıtı:

Parçada güvercinlerin özelliklerinin anlatıldığı metinde, A, B, C ve E seçeneklerindeki konulara değinilmiştir. A seçeneği “az bir çabayla eğitilebilen kuşlardır” ifadesiyle, B seçeneği “taban tabana zıt coğrafi koşullarda bile yaşamlarını sürdürebilen” ifadesiyle, C seçeneği “bugün bile mesaj taşıma konusunda güvercinlerden yararlanılır” ifadesiyle, E seçeneği ise “dünya’nın manyetik alanından faydalanma becerileri” ifadesiyle anlatılmıştır. D seçeneği, güvercinlerin kendi aralarında güçlü sosyal bağlar kurdukları konusuna değinilmemiştir.

Cevap: D) Kendi aralarında güçlü sosyal bağlar kurduklarına

Soruyu doğru cevapladı.

Karşılaştırmanın devamı için sıradaki sayfaya geçebilirsiniz.