Bireysel araştırma projesi · 2025
Tablo tabanlı pekiştirmeli öğrenmede çevrim dışı tekrar
Küçük bir GridWorld ortamında, deneyim tekrarı ve değiştirilmiş (perturbed) deneyimlerle tablo tabanlı pekiştirmeli öğrenme.
Kavramsal görsel; deneysel bir sonuç değildir.
Araştırma sorusu
Hafifçe değiştirilmiş deneyimlerin tekrarlanması, bir pekiştirmeli öğrenme ajanının ortamı değiştiğinde uyum sağlamasına yardımcı olabilir mi? Bu çalışma, fikri bilerek küçük ve incelenebilir tutulmuş bir düzenekle ele alır.
Yöntem
Nihai rapor, 6 × 6 boyutlu bir GridWorld’de tablo tabanlı Q-learning’i anlatır. Deneyim tekrarı (experience replay) ve rüya benzeri değişiklikler (perturbation) bir referans (baseline) koşuluyla karşılaştırılarak edinim ve transfer davranışı incelenir.
Bulgular
Rapor, başlangıçtaki edinimin daha yavaş olduğunu ve transfer yararlarına ilişkin sınırlı işaretler bulunduğunu aktarır. Bu gözlemler bu küçük deneye özgüdür.
Sınırlılıklar
Bu, tablo tabanlı bir pekiştirmeli öğrenme çalışmasıdır. Elde edilen kanıtlar, öğrenilmiş dünya modelleri ya da büyük ölçekli ajanlar için genel bir üstünlük ortaya koymaz. Burada sunulan uygulama ve bulguların kaynağı rapordur.
Sıradaki araştırma
İşaret dili tanıma