Araştırmacılar, GPT-3.5 tabanlı ChatGPT’nin soruların %69’una (150 sorudan 104’üne) doğru cevap verdiğini ve bu itibarla Kanada’daki Kraliyet Koleji’nin kullandığı %70’lik geçme notuna yaklaştığını keşfetmişler. Model, düşük düzey düşünme gerektiren sorularda görece iyi performans sergilerken (61 sorudan 51’i, %84), yüksek düzeyli düşünme gerektiren sorularda zorlanmış (89 sorudan 53’ü, %60).
Araştırmacı lar , GP T - 3.5 t a banlı Ch atGPT’nin so ruların %69’u na ( 1 50 so rudan 104’ ü ne) doğ ru cev ap v erdiğ i ni v e b u iti barl a Kanada’ daki Kral i yet Kolej i’nin k ullandığı % 70’lik geç me n otun a yakl aştığını keşfetmişl er. Mo de l, dü şü k düz ey düş ün me g erektiren s orularda gö rece iy i pe rform ans sergiler ken ( 61 soru dan- 5 1’i, % 84), y ük sek dü z ey li düşün m e gerekti ren sor u l arda zor l anmış ( 8 9 sor u da n 5 3’ü, %6 0 ).