Yapay zekâ öğretmenimiz ALES sorularında kaç doğru yaptı?
Sınavbul ALES paketindeki yapay zekâ öğretmeni, ÖSYM'nin 2018'den bu yana yayımladığı ALES sorularından görsel içermeyen 120 sorunun %96'sını doğru çözdü (en düşük turda 116 doğru). Aşağıda neyi, nasıl ölçtüğümüzü ve sonucun nerede geçerli olmadığını yazdık.
Ne ölçtük?
ÖSYM, ALES oturumlarında Sayısal ve Sözel testlerinden oluşan 100 soruluk temel soru kitapçığının yalnız yaklaşık %10'unu, resmî cevap anahtarıyla birlikte herkese açık yayımlıyor (her oturumda 10 soru). Ölçüm kümemiz, ÖSYM'nin 2018 ile 2026 arasındaki 24 oturumda yayımladığı bu sorulardır; sınavlarda sorulan soruların tamamı değildir.
- Yayımlanan soru: 240 (24 oturum).
- Ölçüme girmeyen: 120 soru formül, şekil, grafik ya da tablo görseli içeriyor. Ölçüm soruyu metin olarak verdiği için bu sorular dışarıda kaldı; 104'ü matematik ya da sayısal sorudur.
- Ölçülen: 120 soru (16'sı matematik ya da sayısal). Sonuç ağırlıkla sözel ve metin sorularını yansıtır.
Nasıl ölçtük?
- Gerçek model. Ölçüm günü Sınavbul ALES uygulamasında AI Öğretmen'in kullandığı model (OpenAI GPT-6.1 Sol).
- Kör çözüm. Modele yalnız kitapçıktaki yönerge, soru ve şıklar gitti; resmî cevap anahtarı gitmedi. Her soru ayrı bir istekle soruldu.
- Uygulamadaki gibi. Uygulamanın "Direkt çöz" istemi ve aynı ayarlar (akıl yürütme düzeyi düşük, yanıt başına en çok 2.500 belirteç) kullanıldı.
- Resmî anahtarla puanlama. Seçilen şık ÖSYM'nin resmî cevap anahtarıyla karşılaştırıldı. Şıkkı ayrıştırılamayan yanıt yanlış sayıldı (en düşük turda 1 yanıt).
- Üç tekrar, en düşüğü esas. Bütün sorular üç ayrı turda soruldu. Ana tabloda her satır için üç turun en düşüğü yazılıdır.
Sonuç
| Soru kümesi | Soru | Doğru | Oran |
|---|---|---|---|
| Tümü (2018'den bu yana ÖSYM'nin yayımladığı, görsel içermeyen, ölçülen) | 120 | 116 | %96,7 |
| Sayısal | 16 | 15 | yüzde yazılmaz |
| Sözel | 104 | 101 | %97,1 |
Tümü için %95 güven aralığı: %91,7 ile %98,7. Ders satırlarında üç turun en düşüğü yazılıdır; 20'den az sorulu satırlarda yüzde yazmıyoruz, çünkü bu kadar az soruyla oran yanıltıcı olur. Öğretmen de yanılabilir: en düşük turda 120 sorunun 4'ünü yanlış çözdü.
Üç tur ayrı ayrı
| Soru kümesi (soru) | Tur 1 | Tur 2 | Tur 3 |
|---|---|---|---|
| Tümü (120) | 118 | 116 | 117 |
Tablodaki sayılar doğru yanıt sayısıdır. Model her istekte yanıtını yeniden ürettiği için turlar arasında birkaç soruluk oynama olabilir. 120 sorunun 116'sı üç turda da doğru çözüldü, 2'si üç turda da yanlış; 2 soruda turlar farklı sonuç verdi.
Sınırlar
- Sorular ölçümden önce herkese açıktı. Model bu soruları eğitimi sırasında görmüş olabilir; ölçüm bunu dışlamaz. Temiz sınama için ÖSYM'nin 29 Kasım 2026 tarihli 2026-ALES/3 sınavından sonra yayımlayacağı yeni soruları aynı yöntemle ölçmeyi planlıyoruz.
- ÖSYM her oturumda kitapçığın yalnız yaklaşık %10'unu yayımlıyor. Bu ölçüm sınavların tamamını kapsamaz; "ÖSYM'nin yayımladığı sorular" demektir.
- Görselli sorular ölçülmedi. Formül, şekil ya da tablo görseli içeren 120 soru ölçüme girmedi; matematik ve sayısal soruların çoğu bu yüzden dışarıda kaldı. Sonucu matematik başarısı olarak okuma.
- Küçük örneklem. Toplam 120 soru; tek tek derslerde soru sayısı az. Oranı kesin değil, yön gösterici oku.
- Tek model, tek tarih. Sonuç yalnız 11 Ekim 2026 tarihindeki model ve istem için geçerlidir.
Kaynaklar ve açıklama
Sorular ve cevap anahtarları ÖSYM tarafından yayımlanmıştır; soru metinleri ÖSYM'ye aittir ve bu sayfada yer almaz, yalnız toplu sayılar yer alır. Sınavbul'un ÖSYM ile bağlantısı yoktur; bu ölçüm ÖSYM'nin herkese açık yayınlarıyla yapılmıştır.
ÖSYM'nin 24 yayın sayfası
- ÖSYM, 11 Mayıs 2018: 2018-ALES İlkbahar Dönemi: Temel Soru Kitapçığı ve Cevap Anahtarı (% 10)
- ÖSYM, 4 Ekim 2018: 2018-ALES/2: Temel Soru Kitapçığı ve Cevap Anahtarı (% 10)
- ÖSYM, 22 Kasım 2018: 2018-ALES/3(Sonbahar Dönemi) Temel Soru Kitapçığı ve Cevap Anahtarı (% 10)
- ÖSYM, 26 Eylül 2019: 2019-ALES/2: Temel Soru Kitapçığı ve Cevap Anahtarı (% 10)
- ÖSYM, 21 Kasım 2019: 2019-ALES/3: Temel Soru Kitapçığı ve Cevap Anahtarı (% 10)
- ÖSYM, 20 Ağustos 2020: 2020-ALES/1: Temel Soru Kitapçığı ve Cevap Anahtarı (% 10)
- ÖSYM, 25 Şubat 2021: 2020-ALES/2: Temel Soru Kitapçığı ve Cevap Anahtarı (% 10)
- ÖSYM, 6 Mayıs 2021: 2021-ALES/1: Temel Soru Kitapçığı ve Cevap Anahtarı (% 10)
- ÖSYM, 22 Eylül 2021: 2021-ALES/2: Temel Soru Kitapçığı ve Cevap Anahtarı (% 10)
- ÖSYM, 20 Kasım 2021: 2021-ALES/3: Temel Soru Kitapçığı ve Cevap Anahtarının Yayınlanması (% 10)
- ÖSYM, 20 Nisan 2022: 2022-ALES/1: Temel Soru Kitapçığı ve Cevap Anahtarı (% 10)
- ÖSYM, 21 Ağustos 2022: 2022-ALES/2: Temel Soru Kitapçığı ve Cevap Anahtarı (% 10)
- ÖSYM, 21 Kasım 2022: 2022-ALES/3: Temel Soru Kitapçığı ve Cevap Anahtarının Yayımlanması (% 10)
- ÖSYM, 17 Nisan 2023: 2023-ALES/1: Temel Soru Kitapçığı ve Cevap Anahtarı (% 10)
- ÖSYM, 20 Ağustos 2023: 2023-ALES/2: Temel Soru Kitapçığı ve Cevap Anahtarı (% 10)
- ÖSYM, 20 Kasım 2023: 2023-ALES/3: Temel Soru Kitapçığı ve Cevap Anahtarının Yayımlanması (% 10)
- ÖSYM, 21 Nisan 2024: 2024-ALES/1: Temel Soru Kitapçığı ve Cevap Anahtarı (% 10)
- ÖSYM, 29 Temmuz 2024: 2024-ALES/2: Temel Soru Kitapçığı ve Cevap Anahtarı (% 10)
- ÖSYM, 18 Kasım 2024: 2024-ALES/3: Temel Soru Kitapçığı ve Cevap Anahtarının Yayımlanması (% 10)
- ÖSYM, 14 Nisan 2025: 2025-ALES/1: Temel Soru Kitapçığı ve Cevap Anahtarı (% 10)
- ÖSYM, 9 Temmuz 2025: 2025-ALES/2: Temel Soru Kitapçığı ve Cevap Anahtarı (% 10)
- ÖSYM, 24 Kasım 2025: 2025-ALES/3: Temel Soru Kitapçığı ve Cevap Anahtarının Yayımlanması (% 10)
- ÖSYM, 10 Mayıs 2026: 2026-ALES/1: Temel Soru Kitapçığı ve Cevap Anahtarı (% 10)
- ÖSYM, 2 Ağustos 2026: 2026-ALES/2: Temel Soru Kitapçığı ve Cevap Anahtarı (% 10)
- ÖSYM 2026-ALES/3 başvuru kılavuzu
Aynı yöntemle yaptığımız ölçümü YDS yapay zekâ ölçümü sayfasında, bütün sınavları ve paketleri Sınavlar ve paketler sayfasında görebilirsin.
Ölçümü Sınavbul kendi betiğiyle yaptı. Soru bazında sonuçlar (soru numarası, seçilen şık, resmî anahtar) bizde saklıdır. Aynı kitapçıkları ÖSYM'den indiren herkes aynı soruları kendi araçlarıyla sınayabilir. Ölçüm tarihi: 11 Ekim 2026.
Sık sorulanlar
Yapay zekâ öğretmen ÖSYM'nin yayımladığı ALES çıkmış sorularında kaç doğru yaptı?
Sınavbul'un yapay zekâ öğretmeni, ÖSYM'nin 2018'den bu yana yayımladığı ALES sorularından görsel içermeyen 120 sorunun %96'sını doğru çözdü (116 doğru, üç turun en düşüğü). Formül, şekil ya da tablo görseli içeren sorular ölçüme girmedi.
Bu oran benim ALES puanım olacak demek mi?
Hayır. Bu, modelin test sonucudur. Öğretmenin bu soruları çözmesi, senin sınavda alacağın puan hakkında bir şey söylemez.
Yapay zekâ bu soruları daha önce görmüş olabilir mi?
Evet. Sorular ölçümden önce herkese açık yayımlandığı için modelin eğitiminde yer almış olabilir. Temiz sınama için ÖSYM'nin 29 Kasım 2026 tarihli 2026-ALES/3 sınavından sonra yayımlayacağı yeni soruları aynı yöntemle ölçmeyi planlıyoruz.