Yakın zamanda ÖSYM Başkanı, “Sınav sorularını yapay zekâ oluşturacak.” şeklinde bir açıklama yapmıştı. Başkan, insan faktörünün arka plana atılmayacağını belirtmiş olsa da akıllarda pek çok soru işareti olacak üzere görünüyor.
Biz de sizler için günümüzdeki en tanınan yapay zekâ aracı olan ChatGPT 4’e ÖSYM usulü sorular hazırlattık ve cevaplarını istedik. Ardından da çıkan sonuçları bir öğretmenimize sorduk. Gelin bakalım ne tıp sonuçlar çıkmış birlikte tartışalım:
Öncelikle ÖSYM web sitesinden 2021-AYT/Fen Bilimleri sorusunun görselini ChatGPT’ye vererek kendisinden misal bir soru yapmasını istedik:
Not: ÖSYM, kendi hazırladığı soruyu hiçbir yerde paylaşmaya müsaade vermediği için sansürlemek durumundayız.
Ardından da ChatGPT bizlere şöyle bir soru hazırladı:
Aslında bakıldığında çok güzel hazırlanmış üzere duruyor, o denli değil mi? Örnek olarak attığımız soruyu, sansürlediğimiz için belki göremediniz fakat neredeyse ona çok benzeri bir soru hazırladı. Hatta tablosuna kadar dikkat edip özgün bir soru oluşturdu. Pekala hakikaten göründüğü kadar güzel mi?
Hazırladığı bu soruyu ayrıntılı bir şekilde çözmesini ve akabinde da cevabı istedik:
Özet geçecek olursak:”Birbirini işaret eden Spider-Man” diyebiliriz zira kendisi yanıtı “20” buldu. Hem de bir değil iki kez çözdü ve tekrar birebir sonuca ulaştı. İlkinde karşılığı bulduktan sonra bu karşılığın seçeneklerde olmadığını fark etti ve kendi kendine çelişkiye düşüp “Soruda bu seçenek yok, o yüzden tahlilde yanılgı olmalı.” dedi ve tekrar çözmeye başladı.
Uzunca bir müddet beynini yorduktan sonra yanıtı tekrardan “20” buldu ve “Soru yanılgılı yahut yazım yanlışı var.” deyip kendi kendine laf attı. İçimizden “Yahu soruyu sen hazırladın, nasıl soru yanılgılı olabilir?” dedik ve bayağı güldük. İşin komik bir tarafı daha var…
Bulduğu “20” cevabını teyit etmek maksadıyla Kimya Öğretmeni Muzaffer Baz hocamıza ulaştık ve kendisi bize şöyle bir karşılık verince daha da şaşırdık:
Yapay zekânın yanıtı yanlış bulmasının sebebi muhtemelen hocamızın da dediği gibi sorunun yanılgılı olmasından kaynaklı. Çünkü üst çıkıp birazcık okursanız kendisi de varsayım üzerinden çözmeye çalışmış ve başı karışmış. Ek olarak hocamız, yapay zekâ ile soru hazırlanmasına karşın şöyle karşılıklarda da bulundu:
Kendisine verdiği yanıtlardan ötürü teşekkür ediyoruz.
Belki kimileriniz “Siz soruyu görsel olarak attınız, bir de yazı olarak deneyin.” diyebileceği için bir baht daha verdik ve matematik sorusu hazırlattık:
Başlangıçta matematik sorusu olduğu için ümitliydik ancak sonuç tahmin ettiğimiz üzere olmadı. Soruyu yazıyla yazmamıza ve prompt’unu da değiştirmemize karşın bu sefer çok daha berbat bir sonuçla karşı karşıya kaldık. Hatta bu sefer sonuç o kadar berbattı ki kusur vermesine bile sebep oldu.
“Oluşturduğun sorunun cevabının şıklarda olmasına ihtimam göster.” dediğimiz için soruyu oluşturur oluşturmaz çözmeye başladı ve işin içinden çıkamadı.
Sonuç olarak, yapay zekâ şu an emniyetli bir kaynak olabilecek üzere durmuyor.
Evet, yapay zekâ günümüzde çok tanınan ve vakit geçtikçe akılalmaz düzeylere illaki ulaşacaktır ancak gelin görün ki bu hâli ile hocalarımızın hazırladığı soruları hazırlayabilecek yeterliliğe sahip değil.
Yapay zekâ, şu an daha 2-3 yaşında ve her şeyi yeni yeni öğrenen bir bebek üzere. Siz ona bir şey verirsiniz, eğitirsiniz ve öğretirsiniz. O da karşılığında size, öğrettiğiniz halde misal karşılıklar verir.
Biz burada ChatGPT 4 kullandık ve hiçbir biçimde bir eğitim vermeden misal sorular hazırlamasını istedik. Tahminen de ÖSYM’den birden fazla sorular atıp soru şekillerini ve yazılış biçimlerini öğrenmesini isteseydik sonuçlar farklı olabilirdi, bilemiyoruz.
Şu an kullandığımız sürüm, internetten bilgi çekebiliyor lakin kendi başına buyruk hareketler yapamıyor. Hatta internetten data çekse bile bazen bilgileri uydurup yanlış bilgiler verebiliyor. Vaktinde “Kim Milyoner Olmak İster?” yarışmasının birtakım sorularına da yanlış karşılıklar vermişti.
ÖSYM’nin bu mevzuyu nasıl ele alacağını tam olarak bilmiyoruz.
Tahmini olarak bu yaptığımız üzere bir şey yapmayacaklardır. Şayet ki bilmediğimiz, art planda düzgün bilgi setine sahip, eğitilen ve tasarlanan bir sistem varsa bu yaptığımız kolay örneklere karşı çok daha verimli sonuçlar da elde edebilirler. O yüzden başlıkta attığımız kanıya çabucak varmak da çok mantıklı olmayabilir.
Gün gelir de şayet bir gün yapay zekâ için önündeki pürüzler kalkıp düzgün bir öğrenme algoritması geliştirilip internetteki yahut dünya gündemindeki her bilgiyi süratli bir formda öğrenip kavrayabilirse işte o vakit tahminen de bu yazıları biz değil onlar yazıyor olacak.
Sizin bu mevzu hakkındaki görüşleriniz neler?
İlginizi çekebilecek öbür yapay zekâ içeriklerimiz: