Notlardan Test Oluşturucu: Doğru Aracı Nasıl Seçersin
Notlardan test oluşturucu, elinde zaten olan materyali alır ve ondan alıştırma sorusu yazar: hocanın dağıttığı föy, kitabın bir sayfası, derste karalanmış kendi notların. Hangisini seçeceğin dört şeye bakar. Hangi girdiyi kabul ediyor, hangi soru tiplerini üretiyor, kötü bir soruyu düzeltebiliyor musun ve materyalin nerede duruyor. Gerisi ambalaj.
Bu araçları kullanmaya değmesinin sebebi yapay zekayla ilgili değil. Sebep şu: soru cevaplamak, tekrar tekrar okumaktan daha iyi bir çalışma biçimi. Roediger ve Karpicke'nin 2006 deneylerinde, bir metinden test edilen öğrenciler bir hafta sonra metni, aynı süreyi yeniden okuyarak geçirenlerden belirgin biçimde daha fazla hatırladı. Üstelik kendini daha hazır hisseden grup, tekrar okuyanlardı. Dunlosky ve arkadaşlarının 2013 tarihli çalışma teknikleri derlemesi de alıştırma testini, dersler ve yaş grupları arasında yüksek fayda verdiği belirlenen yalnızca iki yöntemden biri olarak işaretledi. Bir üreticinin yaptığı bu etkiyi güçlendirmek değil. Sadece insanı alıştırmaya başlamadan durduran o bir saatlik yazma işini ortadan kaldırıyor.
Bu araçlar gerçekte ne yapıyor
Neredeyse her notlardan test oluşturucu aynı üç adımı işletiyor:
- Materyalini metne çevirir (görsel ve PDF için OCR, ses kaydı için konuşma tanıma, yapıştırdıysan hiçbir şey)
- Bu metni bir dil modeline "bu materyalden şu tiplerde 12 soru yaz" gibi bir talimatla gönderir
- Soruları, genelde cevap anahtarıyla birlikte önüne koyar
Fark, dikişlerde saklı. Amfide yan açıyla çekilmiş bir fotoğraftan metin çıkarma ne kadar iyi çalışıyor. Araç 40 sayfalık PDF'ini baştan sona okuyor mu, yoksa sessizce bir dilimini mi örnekliyor. Yanlış bir soruyu silebiliyor musun. Testi bitirdikten sonra bir şey oluyor mu, yoksa sorular buharlaşıyor mu?
Bu şemayı bilmek işe yarar, çünkü çıktı kötü olduğunda kimi suçlayacağını söyler. Ezber niteliğinde ıvır zıvırla dolu bir test, çoğu zaman metin çıkarma aşamasının modele yapısız bir metin duvarı uzattığı anlamına gelir. Modelin bu aşamada ne yaptığını merak ediyorsan, eğitim ile çıkarım arasındaki fark burada işine yarar: model senin notlarını öğrenmiyor, o an okuyup soru yazıyor.
Karar vermeden önce bakılacak dört şey
Girdi. Notların kağıttaysa, yalnız yapıştırılmış metin kabul eden bir araç her şeyi yeniden yazman demektir ve bu işin amacını baştan bitirir. Özellikle fotoğraf ve PDF içe aktarımı var mı diye bak, el yazısıyla ne yaptığını da kontrol et.
Soru tipleri. Çoktan seçmeli varsayılan, çünkü hem üretmesi hem değerlendirmesi en kolay olan o. Aynı zamanda hiçbir şey bilmeden geçilmesi en kolay olan da o: dört şık arasında doğruyu tanımak, doğruyu kendin üretmekten çok daha alçak bir eşik. Sadece çoktan seçmeli yazan bir üretici seni pohpohlar. Yanında boşluk doldurma, kısa yazılı cevap veya açık uçlu hatırlama arıyor ol. YKS ve KPSS çalışıyorsan çoktan seçmeli zaten senin formatın, ama iyi bir çoktan seçmeli soruyu kötüsünden ayıran şeyi bilmeden üretilmiş bir sete güvenme.
Düzenlenebilirlik. Üretilen sorular yeterince sık yanlış çıkıyor. Bir soruyu düzeltmene ya da silmene izin vermeyen araç, bu yüzden bir yük. Konu denetimini yapan sensin ve o kararı koyacak bir yere ihtiyacın var.
Materyalin nereye gittiği. Çoğu araç hesap açmanı ister ve yüklediklerini kendi sunucusunda tutar. Bir kimya föyü için sorun yok. Hasta notları, iş yerinin eğitim materyali veya gizlilik sözleşmesi altındaki bir şey için önemli. Birkaç araç metin çıkarmayı cihazda yapıp yalnız çıkarılmış metni ileri gönderiyor, bu da dosyanın kendisini yüklemekten anlamlı biçimde daha küçük bir iz bırakıyor.
Bakmaya değer kısa bir liste
| Araç | Girdi olarak aldığı | Soru tipleri | Gerçekten en iyi olduğu iş |
|---|---|---|---|
| Quizlet (Magic Notes) | Yapıştırılmış metin, belge | Çoktan seçmeli, yazılı, eşleştirme, bilgi kartı | Setleri sınıf arkadaşlarıyla paylaşmak ve başkasının hazırladığı materyalle çalışmak |
| Kahoot | Belge, konu başlığı | Çoktan seçmeli, doğru/yanlış | Grup tekrarı ve sınıf içi kullanım, canlı formatın kendisi asıl mesele olduğunda |
| Quizgecko | Metin, belge, URL | Çoktan seçmeli, kısa cevap, doğru/yanlış | Uzun kaynak belgelerden toplu soru üretimi |
| Knowt | Not, PDF, video | Bilgi kartı, deneme testi | Notları ve üretilen alıştırmaları ücretsiz olarak tek yerde tutmak |
| ChatGPT veya Claude | Yapıştırabildiğin ya da yükleyebildiğin her şey | Ne istersen | Talimat üzerinde tam denetim ve bir cevap kafanı karıştırdığında soru sorabilmek |
| Qora | Sayfa fotoğrafı, ses kaydı, yazılmış metin | Çoktan seçmeli, boşluk doldurma, yazılı cevap, açık uçlu hatırlama | Kağıt not ve ders kaydıyla, hesap açmadan çalışmak; metin çıkarma cihazda yapılır |
Bunların hiçbiri herkes için doğru cevap değil. Dersinin Quizlet setleri sınıfta zaten dolaşıyorsa, ağ etkisi her özellik karşılaştırmasını yener. İstediğin şey aylara yayılan kalıcı hatırlama ve aralıklı tekrarsa, üretici bu hattın yanlış ucudur; onun yerine notlarını bilgi kartına dönüştürmeye bakmalısın. Sorularla tartışmak, bir cevabın neden doğru olduğunu sormak istiyorsan, genel amaçlı bir sohbet botu bunu hiçbir özel test aracının yapamadığı kadar iyi yapar. Araçların yan yana karşılaştırması için notlardan yapay zekayla test üreten altı aracı da inceleyebilirsin.
Üreticiler nerede tökezliyor
En pahalıya patlayan hata sessiz olanı: bir üretici, notlarının doğru olup olmadığını bilemez. Üçüncü haftada yanlış enzimi yazdıysan, araç bunu güvenle ve düzgün biçimlendirilmiş bir soruya çevirir ve yanlış enzimi kafana çakar. Üretilen sorular kaynaktaki her hatayı miras alır, üstüne bir de otorite katmanı ekler. Cevaplamaya başlamadan önce soruları bir kez göz gezdirmenin en güçlü gerekçesi bu.
İki somut sınır daha var. Üretilen çoktan seçmeli soruların çeldiricileri çoğu zaman zayıf olur: yanlış şıklar bariz biçimde yanlıştır ya da doğru cevap sadece en uzun olandır, sen de bilgiyle değil örüntü tanıyarak geçersin. Ayrıca üreticiler tanımlara meyleder, çünkü bir sayfadan çıkarılması en kolay şey tanımdır. Bir mekanizmanın neden çalıştığını ya da iki kavramın nasıl ilişkilendiğini soran sorular, tam olarak sınavın ölçtüğü ve bu araçların en güvenilmez biçimde ürettiği sorulardır. Elinde 20 soru varsa ve hepsi "X şudur" kalıbındaysa, açıkça neden-sonuç ve karşılaştırma sorusu iste ya da o birkaç soruyu kendin yaz.
Metin çıkarmada zayıf halka hâlâ el yazısı. Düzgün matbu harf iyi taranır; bitişik yazı, kenar boşluğundaki notlar ve etiketleri etrafa dağılmış şemalar taranmaz. Bir sayfayı fotoğrafla ve 30 sayfayı beslemeden önce çıkan metne bak.
Sık sorulan sorular
El yazısı notlardan test üretilebilir mi?
Fotoğraf kabul ediyorsa ve OCR çalıştırıyorsa evet. Doğruluk büyük ölçüde el yazına ve fotoğrafa bağlı. Matbu harf güvenilir biçimde taranır, bitişik yazı değişken sonuç verir, şemalar genelde yapısız ve dağınık etiket metni olarak gelir. Bütün defterin sorunsuz aktarılacağını varsaymak yerine önce tek sayfa dene.
Yapay zekanın ürettiği sorular doğru mu?
Gerçeğe değil, senin notlarına göre doğrular. Model yalnız verdiğin metinden çalışır, dolayısıyla kaynağındaki bir hata kendinden emin bir soruya dönüşür. Ayrıca sayılarda, tarihlerde ve çalışma adlarında bilgi kayması olabiliyor. Çıktıyı cevap anahtarı değil, gözden geçireceğin bir taslak say.
Test mi daha iyi, bilgi kartı mı?
İkisi farklı iş yapar. Testler bir konuyu şu anda anlayıp anlamadığını, sınava yakın bir formatta ölçmek için daha iyi. Aralıklı tekrarla kullanılan bilgi kartları ise yüzlerce ayrık bilgiyi aylarca elde tutmak için daha iyi. Çoğu kişi hafta içinde üretici, sürekli kaçan konular için bilgi kartı kullanıyor.
Ücret ödemem gerekir mi?
Hayır. Knowt, Quizlet ve Kahoot'un ücretsiz katmanları ve herhangi bir sohbet botu notlarından bedelsiz soru üretir. Ücretli katmanlar çoğunlukla hacim, daha iyi girdi işleme (fotoğraf ve ses aktarımı gibi) ve neyi yanlış yaptığını hatırlayan takip katmanı satar. Ücretsiz başla, hangi sınıra gerçekten çarptığını gördükten sonra öde.
Aracı önce girdine göre seç, çünkü etrafından dolaşılamayan kısıt o: kağıt notlar fotoğraf aktarımı ister, kaydedilmiş dersler ses ister, gerisi pazarlığa açık. Sonra gerçek bir üniteyi baştan sona içinden geçir ve cevaplamadan önce soruları oku. Üretilen setin tamamı tanımlardan oluşuyorsa, bu sana araç hakkında değil notlarındaki boşluk hakkında bir şey söyler ve düzeltilmesi gereken yer orasıdır.