Odsuń się od pilota

Salon Ketana Banjary nie jest zaśmiecony pilotami. Aby uciszyć muzykę, po prostu przykłada palec do ust. A kiedy wstaje z kanapy i wychodzi z pokoju, ekran jego telewizora automatycznie się zatrzymuje.

Banjara jest współzałożycielem Przewiduj spojrzenie , startup, który łączy wykrywanie spojrzeń, rozpoznawanie gestów i rozpoznawanie twarzy, aby tworzyć bardziej naturalne sposoby kontrolowania wszystkiego, od telewizora po samochód.

Podczas gdy wiele osób dopiero zdobywa swój pierwszy gadżet z ekranem dotykowym, PredictGaze jest jedną z wielu firm, które zakładają, że sterowanie bezdotykowe będzie kolejną wielką rzeczą. Nietrudno to sobie wyobrazić, ponieważ przednie kamery są wbudowane w różnego rodzaju gadżety.

Do tej pory oprogramowanie firmy zostało zintegrowane z Gra na iOS aby umożliwić użytkownikom kontrolowanie pożerającego żywność potwora z przerwami w zębach poprzez poruszanie głowami. Technologia jest również testowana w niektórych sklepach w Japonii, gdzie kamery śledzą płeć klienta, jego uśmiech i czas spędzony przed produktem w nadziei, że dane mogą zostać wykorzystane do zwiększenia sprzedaży poprzez oferowanie niezdecydowanemu klientowi kuponu we właściwym czasie lub poprzez poprawę lokowania produktu.

PredictGaze wyobraża sobie wszelkiego rodzaju zastosowania tej technologii, w tym zapobieganie oglądaniu przez pięciolatka treści dla dorosłych w telewizji i określanie, że zaczynasz zasypiać za kierownicą samochodu.

Technologia firmy łączy uczenie maszynowe i algorytmy widzenia komputerowego w oprogramowaniu, które może używać standardowej kamery VGA, aby dowiedzieć się, gdzie patrzysz, jaką masz płeć, czy się uśmiechasz i nie tylko. Potrafi również identyfikować gesty — wszystkie z nich można następnie przełożyć na działania podejmowane przez urządzenia.

Na przykład, aby zidentyfikować wiek danej osoby, PredictGaze przygotowało swoje oprogramowanie z obrazami osób w różnym wieku. Informacje te można następnie wykorzystać do określenia, ile masz lat na podstawie zdjęcia, na którym stoisz przed kamerą, która jest podłączona, na przykład, do iPada z jego oprogramowaniem.

Podobnie firma przeszkoliła swoje oprogramowanie za pomocą tysięcy obrazów działań wyciszających i nie wyciszających, aby zidentyfikować to działanie.

Aby wykonać śledzenie spojrzenia, kamera stale rejestruje ruchy oczu i wykorzystuje te dane do obliczania, gdzie patrzysz. Można to przełożyć, powiedzmy, na ruch postaci w grze.

Nie chodzi o to, że mamy różne technologie, które połączyliśmy. To jest różnica. To jedna z technologii, która jest w stanie poradzić sobie z twarzą, gestami i spojrzeniem, mówi Banjara.

Firma twierdzi, że przetwarza wszystkie dane na urządzeniu, na którym działa jej oprogramowanie, zamiast wysyłać je do zdalnych serwerów, a żaden z obrazów zarejestrowanych przez kamery nie jest zapisywany. Technologia działa nawet przy zmieniającym się świetle, mówi firma.

W skąpo udekorowanym salonie Banjary w Mountain View w Kalifornii zespół PredictGaze pokazał mi mnóstwo dem na telewizorze, laptopie, iPadzie, iPhonie i iPodzie Touch.

W jednym Banjara i ja usiedliśmy przed dużym płaskim telewizorem podłączonym do iPada z oprogramowaniem PredictGaze. Gdy w telewizji pojawił się teledysk Rihanny, Banjara wstał i odszedł; nic się nie stało. Ja też odszedłem, a wideo zatrzymało się, gdy przednia kamera iPada ustaliła, że ​​nikt nie został do oglądania.

W innym pokazie członek zespołu PredictGaze trzymający iPada przeglądał stronę internetową i przewracał wzrokiem strony e-booka.

W trzecim demo dwoje z nas siedziało przed iPadem, a oprogramowanie dokładnie określiło, ile osób tam było, jaka była płeć każdej osoby, czy się uśmiechali i nie tylko. Mogło to określać moją płeć nawet wtedy, gdy nosiłam okulary i zakrywałam włosy.

W tej chwili niektóre wysiłki PredictGaze są delikatne i wybredne: jeśli Banjara i ja pozostaliśmy na kanapie, ale odwróciliśmy się do siebie, Rihanna również przestała śpiewać. A kiedy grałem w grę na iPhone'a, która zawiera oprogramowanie PredictGaze, często się pauzował, powołując się na problemy ze śledzeniem ruchów głowy. Ale po odrobinie poprawek — i włączeniu kamer szerokokątnych na telewizorach i tabletach, które mogą uchwycić więcej akcji — mogę sobie wyobrazić użyteczność PredictGaze.

Firma chce sprzedawać swój zestaw programistyczny programistom do wykorzystania w ich aplikacjach. Planuje również sprzedawać swoją technologię firmom elektronicznym, które coraz częściej sprzedają gadżety zawierające kamery skierowane do przodu, dzięki czemu PredictGaze można wbudować bezpośrednio w urządzenia. W końcu PredictGaze może również zbudować własny sprzęt.

Ale Roel Vertegaal, profesor nadzwyczajny interakcji człowiek-komputer na Queen's University w Kingston w Ontario i dyrektor szkolnego Human Media Lab, nie jest pod wrażeniem technologii PredictGaze, która, jak twierdzi, nie jest nowa. On i inni od lat pracują nad takimi interfejsami – mówi.

Mimo to uważa, że ​​to dobrze, że taka technologia staje się komercyjnie opłacalna.

Myślę, że istnieje taka potrzeba, mówi.

W swoim salonie Banjara też tak myśli.

ukryć