Kamery wykrywające głębię kierują się na urządzenia mobilne

Nieco ponad dekadę od pojawienia się aparatów w telefonach komórkowych pozostają one jedną z najczęściej używanych funkcji urządzeń mobilnych, stanowiąc podstawę szalenie popularnych i cennych firm, takich jak Instagram i Snapchat. Teraz sprzęt, który zapewnia komputerom przenośnym wizję 3D, może otworzyć nowy wymiar dla aplikacji do obrazowania i umożliwić nowe sposoby korzystania z tych urządzeń. Wczesne aplikacje mobilne, które potrafią skanować świat w 3D, wykazują potencjał dla nowych form gier, handlu i fotografii.





Kopiuj i wklej: Tablet może być używany do wykonywania skanów 3D obiektu za pomocą czujnika struktury i innego nowego sprzętu, który trafia na urządzenia mobilne.

Prawdopodobnie pierwszą mobilną technologią wykrywania głębi, która trafi na rynek, będzie Czujnik struktury , akcesorium do iPada firmy Apple, które daje możliwości urządzenia podobne do kontrolera gier Kinect firmy Microsoft. Potyliczny , firma z San Francisco odpowiedzialna za urządzenie, twierdzi, że rozpocznie wysyłkę swojego produktu w lutym 2014 roku Kampania na Kickstarterze dla urządzenia zebrał prawie 750 000 dolarów, z ponad miesiąc do uruchomienia.

Occipital opracował aplikacje, które pozwalają ludziom skanować obiekty w 3D, chodząc wokół nich, oraz skanować całe pomieszczenia. Jeden pokazuje, w jaki sposób czujnik może umożliwić rozszerzoną rzeczywistość, w której wirtualne obrazy są nakładane na rzeczywisty świat widziany przez wizjer. W tej aplikacji osoba bawi się wirtualnym kotem, rzucając wirtualną piłkę, która realistycznie odbija się od rzeczywistych obiektów ( zobacz wideo ).



Jeff Powers, dyrektor generalny i współzałożyciel firmy Occipital, mówi, że obecnie koncentruje się na udostępnianiu programistom narzędzi do tworzenia atrakcyjnych aplikacji wykorzystujących wykrywanie 3D. Wśród osób zainteresowanych kupnem Structure Sensor, istnieje duże zainteresowanie grami i używaniem go do skanowania rzeczywistych obiektów, aby pomóc kopiować lub projektować obiekty do wydrukowania w 3D. Dostajemy również wiele osób pytających o użycie tego do pomiarów przestrzeni, aby zastąpić sposób, w jaki robią to dziś ludzie z branży budowlanej, mówi Powers.

Czujnik struktury działa, wyświetlając na świecie pstrokaty wzór światła podczerwonego, dzięki czemu jego kamera na podczerwień może obserwować, jak ten wzór jest zniekształcany przez obiekty, na które pada. Te informacje są wykorzystywane do rekonstrukcji obiektów w 3D. Proces ten opiera się na chipie, który Occipital kupuje od PrimeSense z siedzibą w Izraelu, który wytwarza sprzęt stanowiący podstawę Microsoft Kinect i podejmuje własne wysiłki, aby zapewnić wykrywanie głębi na urządzeniach mobilnych. W styczniu PrimeSense zademonstrował czujnik 3D o nazwie Capri, który jest wystarczająco mały dla laptopów lub tabletów (patrz producenci komputerów stawiają na spojrzenie, gesty, głos i dotyk); W tym miesiącu producent chipów mobilnych Qualcomm wykorzystał go do zademonstrowania gier w rozszerzonej rzeczywistości na tablecie z Androidem.



Ta gra wykorzystuje czujnik Capri do uchwycenia trójwymiarowego kształtu stołu i wszelkich znajdujących się na nim obiektów, a następnie buduje wirtualny świat walczących orków, skalistych wychodni i wież na nich. Postacie w grze mogą nawigować, zderzać się i przeskakiwać nad fizycznymi obiektami, mówi Jay Wright, wiceprezes ds. zarządzania produktami w Qualcomm. Osoba grająca w aplikację może dotknąć ekranu tabletu, aby wejść w interakcję z tym światem i chodzić po świecie rzeczywistym, aby uzyskać inną perspektywę na wirtualny ( zobacz wideo ).

Aplikacja została włączona przez dodanie obsługi wykrywania 3D do oprogramowania Vuforia firmy Qualcomm, które pomaga twórcom oprogramowania mobilnego w tworzeniu aplikacji rzeczywistości rozszerzonej, funkcji, którą firma nazywa Smart Terrain. Ale Wright przewiduje, że konsumenci w końcu będą używać aplikacji obsługujących głębię nie tylko w grach. Można na przykład użyć aplikacji opartej na technologii Smart Terrain, aby zobaczyć wirtualny podgląd nowego mebla w swoim salonie w prawdziwej skali.

Qualcomm udostępni Smart Terrain twórcom aplikacji na początku przyszłego roku, ale Wright nie oferuje żadnych domysłów, kiedy mogą pojawić się urządzenia z czujnikiem głębokości niezbędnym do ich użycia. Jednak Kartik Venkataraman, dyrektor ds. technologii i współzałożyciel firmy Obrazowanie pelikanów , startupowa firma z Mountain View w Kalifornii, twierdzi, że nie potrwa to dłużej niż kilka lat.



Firma Venkataraman opracowała czujnik aparatu z czujnikiem głębi, który ma ten sam rozmiar, co większość aparatów używanych obecnie w urządzeniach mobilnych. Mamy projekt referencyjny i rozmawiamy z producentami telefonów, którzy są zainteresowani wprowadzeniem go na rynek za pomocą telefonu komórkowego lub innego urządzenia mobilnego, mówi Venkataraman.

Technologia firmy Pelican wykorzystuje szereg 16 maleńkich kamer do rejestrowania pola światła przed urządzeniem, rejestrując nie tylko kolor i położenie wiązek światła, tak jak robi to kamera 2D, ale także kierunek, z którego pochodzą (patrz Fotografia w polu świetlnym). ). Pole światła można wykorzystać do rekonstrukcji stereofonicznych obrazów sceny w celu określenia głębi, a czujnik Pelikana może uchwycić kształt obiektów z dużą dokładnością w granicach około 50 centymetrów, mówi Venkataraman.

Pelican bada te same rodzaje rozszerzonej rzeczywistości i skanowania obiektów, co potylica i Qualcomm. Jednak z uwagi na to, że takie pomysły są dalekie od tego, jak ludzie obecnie korzystają z urządzeń mobilnych, prace Venkataraman nad wykorzystaniem wykrywania głębi do ulepszania istniejącej fotografii mobilnej mogą rozpocząć się jako pierwsze.



Instagram stosuje filtry do całej sceny, ale to pozwala na stosowanie filtrów do różnych warstw sceny, mówi Venkataraman. Daje to możliwość tworzenia znacznie ciekawszych filtrów.

Aplikacja demonstracyjna Pelican może sprawić, że wszystko na zdjęciu będzie nastrojowe czarno-białe, z wyjątkiem na przykład osoby na zdjęciu. Ta sama aplikacja może wykorzystywać dane z wykrywania głębi, aby bardzo dokładnie wycinać osoby na obrazie, aby można je było zmienić lub wyciąć i wkleić do innej sceny.

ukryć