211service.com
Widzenie umysłu robota w rozszerzonej rzeczywistości
Justin Saglio
Kiedy w zeszłym tygodniu przeprowadzki przyjechały do laboratorium robotycznego Uniwersytetu Browna Stefanie Tellex, jej uczniowie przyglądali się z zainteresowaniem. Zobacz, jak zręcznie połączyli siły, aby podnieść kanapę, używając mowy ciała, kontaktu wzrokowego i tylko kilku poleceń, takich jak 1-2-3 … winda.
Czy roboty i ludzie mogą ze sobą współpracować równie płynnie? Taki jest cel badań w laboratorium Tellex, które stara się zapewnić zarówno robotom, jak i ludziom narzędzia do lepszego zrozumienia się nawzajem i bardziej płynnej współpracy w rzeczywistych środowiskach.
Niektóre roboty, takie jak odkurzacz Roomba, naprawdę potrzebują tylko jednego polecenia — wyczyść lub zatrzymaj. To właściwy interfejs dla Roomby, ale widzimy, że roboty wykraczają poza jedną funkcję. Chcielibyśmy móc powiedzieć im wszystko, co mieści się w zakresie fizycznych możliwości robota, mówi Tellex. Pracuję nad systemem, w którym rozmawiasz z robotem jak osoba. Mówisz „Postaw tam skrzynkę”, a robot to rozgryza”.
To trudny problem, nie tylko dlatego, że istnieje wiele sposobów na opisanie tego, co chcesz zrobić. (Muszę tylko pomyśleć o tym, co się stanie, gdy moja żona i ja – bez ekspertów od przeprowadzek – spróbujemy zmienić pozycję naszej własnej kanapy.)
W pracy zaprezentowanej w zeszłym roku zespół Tellex wykorzystał interfejs głosowy, aby sprawdzić, czy osoba i robot chwytający mogą współpracować, aby wybrać z grupy podobnych przedmiotów na stole – w tym miski, markery i łyżki. Polecenie typu Czy mogę dostać tę miskę? może pozostawić robota w wątpliwość. Więc zaprogramowali robota, aby zadawał kilka pytań wyjaśniających, takich jak To?
Grupa Browna zaprosiła do laboratorium 16 ochotników i odkryła, że dzięki takiemu mini-dialogowi roboty wykonują pracę o około 25 procent szybciej i z większą dokładnością. Ludzie myśleli też, że robot jest o wiele mądrzejszy, niż jest w rzeczywistości. To było tak dobre, że ludzie myśleli, że system może zrozumieć zwroty takie jak „po lewej stronie”, nawet jeśli tak nie było. Ale zadałby pytanie, więc wydawało się, że zrozumiał, mówi Tellex.
Kolejnym etapem projektu, kierowanego przez doktoranta Davida Whitneya, jest połączenie poleceń werbalnych z zestawem słuchawkowym rzeczywistości rozszerzonej HoloLens.
Podczas Przegląd technologii MIT Konferencja EmTech Next Wypróbowałem konfigurację, która pokazuje użytkownikowi upiorne fioletowe wersje robota, przedstawiające działania, które planuje wykonać - dzięki czemu można je naprawić lub dostroić w razie potrzeby.
Tutaj celem jest dostanie się do umysłu robota, mówi Whitney. Dobrzy poruszający się używają dużo mowy ciała, ale roboty nie wyglądają jak my, mówi. Więc to jest sposób na wizualizację informacji o robocie — o czym on myśli?