Bilim insanları, görme engellilerle iletişim kuran ve seyahat sırasında anlık geri bildirim sağlayan bir robot rehber köpek geliştirdi. Kaynak: Jonathan Cohen, Binghamton Üniversitesi
Rehber köpekler, görme engellileri güvenli bir şekilde hedeflerine ulaştıran güçlü müttefiklerdir, ancak sahipleriyle konuşamazlar — ta ki şimdiye kadar.
Büyük dil modellerini (LLM'ler) kullanarak, New York Eyalet Üniversitesi'ne bağlı Binghamton Üniversitesi'nden bir araştırmacı ekibi, konuşan bir robot rehber köpek oluşturdu. Sistem, ideal bir rotayı belirleyebilir ve kullanıcıları güvenli bir şekilde yönlendirebilir, yol boyunca anlık geri bildirim sunar.
“Bu çalışmada, biyolojik rehber köpeklerden daha gelişmiş bir robot rehber köpek yönünü gösteriyoruz,” dedi Shiqi Zhang, Thomas J. Watson Mühendislik ve Uygulamalı Bilimler Koleji Bilgisayar Okulu'nda doçent profesör.
“Gerçek köpekler en iyi ihtimalle yaklaşık 20 komutu anlayabilir,” diye ekledi. “Ama robot rehber köpekler için, sadece sesli komutlarla GPT-4'ü kullanabilirsiniz. O zaman çok güçlü dil yeteneklerine sahip olur.”
Binghamton araştırmacıları robot köpeklere yeni numaralar öğretiyor
Zhang ve ekibi, önceki çalışmalarında, görme engellileri tasma çekişine yanıt vererek yönlendiren robot rehber köpekler eğitmişti. Bu yeni sistem, kullanıcı ile köpek arasında konuşulan bir alışveriş oluşturarak, kontrol ve durum farkındalığını artırıyor.
Binghamton Üniversitesi Bilgisayar Okulu'nda doçent profesör olan Shiqi Zhang, robot rehber köpek sistemini öğrencileriyle birlikte geliştirdi. Kredi: Jonathan Cohen
Bu dört ayaklı robot, hareket etmeden önce bir rota hakkında bilgi sunar — araştırmacıların “plan sözel anlatımı” dediği — ve seyahat sırasında bilgi sağlar, ya da “sahne sözel anlatımı.”
“Bu, görme engelli veya kör insanlar için çok önemlidir, çünkü durum ve sahne farkındalığı, görme olmadan oldukça sınırlıdır,” dedi Zhang.
Sistemi test etmek için, ekip, büyük, çok odalı bir ofis ortamında yön bulmaları için yasal olarak kör olan yedi katılımcıyı işe aldı. Robot, kullanıcıya nereye gitmek istediğini soracak (bu deneyde bir konferans odası) ve ardından odaya ulaşmak için olası rotaları ve ulaşım süresini sunacaktır.
Kullanıcı tercih ettiği rotayı seçtikten sonra, robot onları konferans odasına yönlendirecek, çevreyi ve yol boyunca karşılaşılacak engelleri sesli olarak ifade edecektir, örneğin “bu uzun bir koridor,” diyerek, hedefe ulaşana kadar.
Testin ardından, kullanıcılar deneyimleri hakkında bir anket doldurdu, sistemin yardımcı olma derecesini, iletişim kolaylığını ve faydasını değerlendirdi. Genel olarak, katılımcılar, planlama açıklamaları ve robotun anlık anlatımını içeren bir birleşik yaklaşımı tercih ettiklerini söylediler. Sistemin simüle edilmiş bir çalışması da bu yaklaşımın başarılı olduğunu göster
