Ekip araştırma projesi · Haziran 2026
SentenceBot: sosyal robotla uyarlanabilir cümle alıştırması
Dokunulabilir konu seçimini, uyarlanabilir zorluğu ve dil modeli geri bildirimini bir araya getiren bir Alpha Mini prototipi.
Kavramsal görsel; deneysel bir sonuç değildir.
Bireysel katkı
Rolüm
Uyarlanabilir zorluk motoru, QR entegrasyonu ve robotun kutlama jesti üzerindeki çalışmalara ben öncülük ettim. Daha kapsamlı entegrasyon çalışmasını ekipçe paylaştık; genel katkılar ekip üyeleri arasında eşitti.
Rapordaki katkı beyanıTasarım sorusu
Bir sosyal robot, basit bir arayüz ve öğrenene göre uyarlanan geri bildirimle yapılandırılmış cümle üretimi alıştırmalarını nasıl destekleyebilir? SentenceBot, Gelişimsel Dil Bozukluğu (GDB / DLD) olan çocuklar için tamamlayıcı bir araç olarak tasarlandı.
Uygulama
Alpha Mini robotu, fiziksel QR konu kartlarını OpenCV ile okur. Cümle üretimi oyunu; konuşma girdisini, dil modeliyle doğrulamayı, sesli geri bildirimi ve jestleri bir araya getirir. Üç uyarlanabilir tur, zorluk düzeyini verilen yanıtlara göre değiştirir. Uygulama, Ollama üzerinden yerel bir Gemma 3 modelini ve isteğe bağlı bir Gemini arka ucunu destekler.
Prototip ve katkı
Grup raporu katkıların eşit olduğunu kaydeder ve geliştirilen sistemi anlatır: Sistem fiziksel robot üzerinde gösterilmiştir ve yerel testler için bir terminal moduna da sahiptir. Çalışma; diyaloğu, algıyı ve geri bildirimi tek bir etkileşim döngüsünde birleştirir.
Sınırlılıklar
GDB tanısı almış çocuklarla resmî bir klinik değerlendirme, gelecekte yapılacak çalışmalara bırakılmıştır. Konuşma tanıma hataları, aslında geçerli olan cümlelerin yanlışlıkla reddedilmesine yol açabilir; yanıt zaman aşımları da etkileşimi kesintiye uğratabilir. Prototip sistem entegrasyonunu gösterir; terapötik etkililiği ortaya koymaz.
Sıradaki araştırma
Adillik ve açıklanabilirlik