Yapay zekâ öğretmenimiz TUS sorularında kaç doğru yaptı?

Sınavbul TUS paketindeki yapay zekâ öğretmeni, ÖSYM'nin 2013'ten bu yana yayımladığı TUS sorularından görsel içermeyen 836 sorunun %98'ini doğru çözdü (en düşük turda 823 doğru). Aşağıda neyi, nasıl ölçtüğümüzü ve sonucun nerede geçerli olmadığını yazdık.

TUS paketine dön

Ne ölçtük?

ÖSYM, TUS oturumlarında Temel ve Klinik Tıp Bilimleri testlerinden oluşan 200 soruluk temel soru kitapçığının 2013 İlkbahar döneminde tamamını, sonraki dönemlerde yalnız yaklaşık %10'unu, resmî cevap anahtarıyla birlikte herkese açık yayımlıyor (7 oturumda 20, 14 oturumda 24, 1 oturumda 25, 2 oturumda 27, 1 oturumda 28, 1 oturumda 31, 1 oturumda 34, 1 oturumda 240 soru). Ölçüm kümemiz, ÖSYM'nin 2013 ile 2026 arasındaki 28 oturumda yayımladığı bu sorulardır; sınavlarda sorulan soruların tamamı değildir.

• Yayımlanan soru: 888 (28 oturum).
• Ölçüme girmeyen: 17 soru formül, şekil, grafik ya da tablo görseli içeriyor. Ölçüm soruyu metin olarak verdiği için bu sorular dışarıda kaldı. ÖSYM'nin iptal ettiği 35 soru da dışarıda.
• Ölçülen: 836 soru. Sonuç, metinle çözülebilen soruları yansıtır.

Nasıl ölçtük?

1. Gerçek model. Ölçüm günü Sınavbul TUS uygulamasında AI Öğretmen'in kullandığı model (OpenAI GPT-6.1 Sol).
2. Kör çözüm. Modele yalnız kitapçıktaki yönerge, soru ve şıklar gitti; resmî cevap anahtarı gitmedi. Her soru ayrı bir istekle soruldu.
3. Uygulamadaki gibi. Uygulamanın "Direkt çöz" istemi ve aynı ayarlar (akıl yürütme düzeyi düşük, yanıt başına en çok 2.500 belirteç) kullanıldı.
4. Resmî anahtarla puanlama. Seçilen şık ÖSYM'nin resmî cevap anahtarıyla karşılaştırıldı. Şıkkı ayrıştırılamayan yanıt yanlış sayıldı (en düşük turda 3 yanıt).
5. Üç tekrar, en düşüğü esas. Bütün sorular üç ayrı turda soruldu. Ana tabloda her satır için üç turun en düşüğü yazılıdır.

Sonuç

Tümü için %95 güven aralığı: %97,4 ile %99,1. Ders satırlarında üç turun en düşüğü yazılıdır; 20'den az sorulu satırlarda yüzde yazmıyoruz, çünkü bu kadar az soruyla oran yanıltıcı olur. Öğretmen de yanılabilir: en düşük turda 836 sorunun 13'ünü yanlış çözdü.

Üç tur ayrı ayrı

Tablodaki sayılar doğru yanıt sayısıdır. Model her istekte yanıtını yeniden ürettiği için turlar arasında birkaç soruluk oynama olabilir. 836 sorunun 821'i üç turda da doğru çözüldü, 10'u üç turda da yanlış; 5 soruda turlar farklı sonuç verdi.

Sınırlar

• Sorular ölçümden önce herkese açıktı. Model bu soruları eğitimi sırasında görmüş olabilir; ölçüm bunu dışlamaz. Temiz sınama için ÖSYM'nin 2027-TUS 1. Dönem sınavından sonra yayımlayacağı yeni soruları aynı yöntemle ölçmeyi planlıyoruz.
• ÖSYM 2013 İlkbahar dışındaki oturumlarda kitapçığın yalnız yaklaşık %10'unu yayımlıyor. Bu ölçüm sınavların tamamını kapsamaz; "ÖSYM'nin yayımladığı sorular" demektir.
• Görselli sorular ölçülmedi. Görsel, şekil, grafik ya da tablo içeren 17 soru ölçüme girmedi; sonuç yalnız metinle çözülebilen soruları yansıtır, görselli sorulardaki başarıyı göstermez.
• Küçük örneklem. Toplam 836 soru; tek tek derslerde soru sayısı az. Oranı kesin değil, yön gösterici oku.
• Tek model, tek tarih. Sonuç yalnız 11 Ekim 2026 tarihindeki model ve istem için geçerlidir.

Kaynaklar ve açıklama

Sorular ve cevap anahtarları ÖSYM tarafından yayımlanmıştır; soru metinleri ÖSYM'ye aittir ve bu sayfada yer almaz, yalnız toplu sayılar yer alır. Sınavbul'un ÖSYM ile bağlantısı yoktur; bu ölçüm ÖSYM'nin herkese açık yayınlarıyla yapılmıştır.

Aynı yöntemle yaptığımız ölçümü YDS yapay zekâ ölçümü sayfasında, bütün sınavları ve paketleri Sınavlar ve paketler sayfasında görebilirsin.

Ölçümü Sınavbul kendi betiğiyle yaptı. Soru bazında sonuçlar (soru numarası, seçilen şık, resmî anahtar) bizde saklıdır. Aynı kitapçıkları ÖSYM'den indiren herkes aynı soruları kendi araçlarıyla sınayabilir. Ölçüm tarihi: 11 Ekim 2026.

Sık sorulanlar

Yapay zekâ öğretmen ÖSYM'nin yayımladığı TUS çıkmış sorularında kaç doğru yaptı?

Sınavbul'un yapay zekâ öğretmeni, ÖSYM'nin 2013'ten bu yana yayımladığı TUS sorularından görsel içermeyen 836 sorunun %98'ini doğru çözdü (823 doğru, üç turun en düşüğü). Formül, şekil ya da tablo görseli içeren sorular ölçüme girmedi.

Bu oran benim TUS puanım olacak demek mi?

Hayır. Bu, modelin test sonucudur. Öğretmenin bu soruları çözmesi, senin sınavda alacağın puan hakkında bir şey söylemez.

Yapay zekâ bu soruları daha önce görmüş olabilir mi?

Evet. Sorular ölçümden önce herkese açık yayımlandığı için modelin eğitiminde yer almış olabilir. Temiz sınama için ÖSYM'nin 2027-TUS 1. Dönem sınavından sonra yayımlayacağı yeni soruları aynı yöntemle ölçmeyi planlıyoruz.