Startup sprawia, że ​​komputery czytają twarze, szukając celu poza reklamami

W zeszłym roku ponad 1000 osób w czterech krajach usiadło i obejrzało 115 reklam telewizyjnych, w tym jedną z antropomorficznymi cukierkami M&M tańczącymi w barze. Przez cały czas kamery internetowe wskazywały ich twarze i przesyłały strumieniowo obrazy ich wyrazów twarzy na serwer w Waltham w stanie Massachusetts.

Kod twarzy : Wykorzystując obrazy zrobione z prostych kamer internetowych, oprogramowanie Affectiva śledzi ruch mięśni ust, brwi i innych części twarzy, aby określić stan emocjonalny osoby.

W Waltham algorytm opracowany przez firmę startową o nazwie Affectiva wykonywał tak zwane kodowanie twarzy: śledził uniesione brwi panelistów, zmarszczone brwi, uśmieszki, półuśmieszki, zmarszczone brwi i uśmiechy. (Obejrzyj film przedstawiający technologię w akcji poniżej tej historii lub tutaj). Kiedy te dane dotyczące twarzy zostały później połączone z danymi dotyczącymi sprzedaży w świecie rzeczywistym, okazało się, że pomiary twarzy można wykorzystać do przewidzenia z 75-procentową dokładnością, czy sprzedaż reklamowane produkty zwiększą się, zmniejszą lub pozostaną takie same po emisji reklam. Dla porównania, badania opinii panelistów na temat reklam mogą przewidywać sprzedaż produktów z 70-procentową dokładnością.

Chociaż statystycznie było to stopniowe ulepszenie, odzwierciedlało kamień milowy w dziedzinie obliczeń afektywnych. Podczas gdy ludzie notorycznie mają trudności z wyartykułowaniem swoich uczuć, teraz jasne jest, że maszyny mogą nie tylko odczytać niektóre z ich uczuć, ale także pójść o krok dalej i przewidzieć statystyczne prawdopodobieństwo późniejszego zachowania.

Biorąc pod uwagę, że rynek reklam telewizyjnych w samych Stanach Zjednoczonych przekracza 70 miliardów dolarów, spostrzeżenia z kodowania twarzy to wielka sprawa dla ludzi biznesu, mówi Rosalind Picard, która kieruje grupą zajmującą się przetwarzaniem afektywnym w Media Lab MIT i współzałożycielem firmy; opuściła firmę na początku tego roku, ale nadal jest inwestorem.

Mimo to kodowanie twarzy nie spełniło jeszcze szerszych, bardziej altruistycznych wizji jego twórców. Pomaganie w sprzedawaniu większej ilości czekolady jest świetne, ale kiedy kodowanie twarzy pomoże osobom z autyzmem odczytywać wskazówki społeczne, zwiększyć zdolność nauczycieli do dostrzegania, którzy uczniowie mają problemy, lub sprawić, by komputery stały się empatyczne?

Odpowiedzi mogą zacząć pojawiać się w przyszłym miesiącu, kiedy Affectiva uruchomi zestaw do tworzenia oprogramowania, który pozwoli wykorzystać swoją platformę do zatwierdzonych aplikacji. Nadzieją, mówi Rana el Kaliouby, dyrektor ds. nauki firmy i drugi współzałożyciel (patrz Innovators Under 35: Rana el Kaliouby), jest rozszerzenie technologii poza marketing. Chociaż nie wymienia rzeczywistych ani potencjalnych partnerów, powiedziała, że ​​firmy mogą wykorzystywać naszą technologię do wszystkiego, od gier i rozrywki po środowiska edukacyjne i edukacyjne.

Zastosowania, takie jak pomoc edukacyjna — informowanie nauczycieli, gdy uczniowie są zdezorientowani lub pomaganie dzieciom z autyzmem w odczytywaniu emocji na twarzach innych — miały duże znaczenie w koncepcji firmy. Affectiva, która wystartowała cztery lata temu, a teraz zatrudnia 35 pracowników i 20 milionów dolarów w funduszach venture, wyrosła z laboratorium Picarda. manifest deklarując, że komputery wyświadczyłyby społeczeństwu przysługę, gdyby potrafiły rozpoznawać ludzkie emocje i na nie reagować.

Przez lata laboratorium testowało prototypowe technologie. Należą do nich mysz z czujnikiem nacisku, która może wyczuć, gdy twoja ręka zaciśnie się w podnieceniu; robot o imieniu Kismet, który potrafił się uśmiechać i unosić brwi; Galvactivator, czujnik przewodnictwa skóry do pomiaru bicia serca i pocenia się; oraz system kodowania twarzy, opracowany i udoskonalony przez el Kaliouby.

Affectiva postawił na dwa początkowe produkty: noszony na nadgarstku gadżet zwany czujnikiem Q, który może mierzyć przewodnictwo skóry, temperaturę i poziomy aktywności (które mogą być wskaźnikami stresu, lęku, problemów ze snem, drgawek i niektórych innych schorzeń); i Affdex, oprogramowanie do kodowania twarzy. Ale chociaż czujnik Q wydawał się wcześnie obiecujący (patrz Czujnik na nadgarstek mówi Ci, jak bardzo jesteś zestresowany i Czujnik wykrywa emocje przez skórę), w kwietniu firma wycofała produkt, widząc niewielki potencjalny rynek poza badaczami pracującymi nad aplikacjami, takimi jak pomiary. objawy fizjologiczne zapowiadające drgawki. To pozostawia firmie Affdex, z której korzystają głównie firmy zajmujące się badaniem rynku, w tym Insight Express i Millward Brown, oraz firmy zajmujące się produktami konsumenckimi, takie jak Unilever i Mars.

Teraz, gdy firma przygotowuje swój zestaw rozwojowy, badania rynku mogą przynieść pośrednią korzyść. Po trzech latach zwoływania paneli opartych na kamerach internetowych na całym świecie, Affectiva zgromadziła bazę danych zawierającą ponad miliard reakcji twarzy. Dokładność systemu może utorować drogę aplikacjom odczytującym emocje z twarzy ludzi przy użyciu zwykłych komputerów domowych i urządzeń przenośnych. Affectiva zajmuje się niezwykle trudnym problemem, analizą mimiki twarzy w trudnych i nieskrępowanych środowiskach, której duża część społeczności akademickiej unika, mówi Tadas Baltrusaitis, doktorant na Uniwersytecie w Cambridge, który napisał kilka artykułów na temat kodowania twarzy .

Co więcej, korzystając z panelistów z 52 krajów, Affectiva prowadzi lekcje specyficzne dla płci, kultury i tematu. Kodowanie twarzy ma szczególną wartość, gdy ludzie nie chcą samodzielnie zgłaszać swoich uczuć. Na przykład, el Kaliouby mówi, że kiedy hinduskim kobietom pokazano reklamę balsamu do skóry, każda z nich uśmiechnęła się, gdy mąż dotknął brzucha żony – ale żadna z nich później nie przyznała się do tej sceny ani jej nie wspomniała, a tym bardziej nie przyznała, że ​​dobrze się bawiła. to.

Edukacja może dojrzała do technologii. Wiele badań wykazało potencjał; jeden przez naukowców z Uniwersytetu Kalifornijskiego w San Diego — którzy założyli konkurencyjny startup o nazwie emocjonalny — wykazał, że wyraz twarzy przewidywał postrzeganą trudność wykładu wideo i preferowaną prędkość oglądania przez ucznia. Inny pokazał, że kodowanie twarzy może mierzyć zaangażowanie uczniów podczas sesji korepetycji opartej na iPadzie, a te miary zaangażowania z kolei pozwalają przewidzieć, jak uczniowie będą później wykonywać testy.

Takie technologie mogą być szczególnie przydatne dla uczniów z trudnościami w uczeniu się, mówi Winslow Burleson, adiunkt na Arizona State University, autor publikacji papier opisując potencjalne zastosowania kodowania twarzy i innych technologii. Podobnie technologia może pomóc klinicystom stwierdzić, czy pacjent rozumie instrukcje. Lub może ulepszyć gry komputerowe, wykrywając emocje gracza i wykorzystując te informacje zwrotne, aby zmienić grę lub ulepszyć wirtualną postać.

Podsumowując, spostrzeżenia z wielu takich badań sugerują rolę Affdex w klasach internetowych, mówi Picard. W prawdziwej klasie masz poczucie, czy uczniowie są aktywnie uważni, mówi. Kiedy idziesz do nauki online, nawet nie wiesz, czy tam są. Teraz możesz zmierzyć nie tylko to, czy są obecni i uważni, ale jeśli mówisz — jeśli rzucisz dowcip, czy się uśmiechają, czy uśmiechają?

Niemniej jednak Baltrusaitis mówi, że pozostaje wiele pytań dotyczących tego, które stany emocjonalne uczniów są istotne i co należy zrobić, gdy te stany zostaną wykryte. Myślę, że dziedzina będzie musiała się nieco rozwinąć, zanim zobaczymy, jak zostanie to wprowadzone w salach lekcyjnych lub kursach online, mówi.

Nadchodzący rok powinien ujawnić wiele na temat tego, czy kodowanie twarzy może przynieść korzyści poza reklamami telewizyjnymi. Affdex zmaga się z konkurencją ze strony innych aplikacji i startupów, a nawet niektórych marketerów pozostań sceptyczny że kodowanie twarzy jest lepsze niż tradycyjne metody testowania reklam. Nie wszystkie reakcje są wyrażane na twarzy, a wiele innych narzędzi pomiarowych twierdzi, że odczytuje ludzkie emocje, mówi Ilya Vedrashko, która kieruje grupą badawczą wywiadu konsumenckiego w agencji reklamowej Hill Holliday w Bostonie.

Jednak z każdą nową twarzą technologia staje się coraz silniejsza. Dlatego el Kaliouby wierzy, że jest gotowy na podjęcie większych problemów. „Chcemy, aby technologia kodowania twarzy stała się wszechobecna”, mówi.

ukryć