Araştırmacılar, GPT-3.5 tabanlı ChatGPT’nin soruların %69’una (150 sorudan 104’üne) doğru cevap verdiğini ve bu itibarla Kanada’daki Kraliyet Koleji’nin kullandığı %70’lik geçme notuna yaklaştığını keşfetmişler. Model, düşük düzey düşünme gerektiren sorularda görece iyi performans sergilerken (61 sorudan 51’i, %84), yüksek düzeyli düşünme gerektiren sorularda zorlanmış (89 sorudan 53’ü, %60).
Araﬂt›rmac›lar, GPT-3.5 tabanl› ChatGPT’nin sorular›n %69’una (150 sorudan 104’üne) do¤ru cevap verdi¤inive bu itibarla Kanada’daki Kraliyet Koleji’nin kulland›¤› %70’lik geçme notuna yaklaﬂt›¤›n› keﬂfetmiﬂler. Model, düﬂük düzey düﬂünme gerektiren sorularda görece iyiperformanssergilerken (61 sorudan 51’i, %84), yüksek düzeyli düﬂünme gerektiren sorularda zorlanm›ﬂ( 89 sorudan 53’ü, %60).