Nowa sztuczna inteligencja tworzy oryginalne klipy wideo na podstawie wskazówek tekstowych

Kategoria: Sztuczna inteligencja Opublikowany 26 lutego

Wystarczy krótki, wpisany na klawiaturze opis sceny, aby ten program tworzył materiał filmowy.

Jak to działa: Nauka raporty sztuczna inteligencja wykorzystuje dwie sieci neuronowe — jedną do tworzenia wideo, a drugą do oceny, czy jest realistyczna, aby poprawić wydajność pierwszej. Nazwaliśmy tego rodzaju sztuczną inteligencję jedną z naszych 10 przełomowych technologii 2018 roku.

Co to robi: Po pierwsze, system jest szkolony na podstawie nagrań czynności oznaczonych opisami, takimi jak „gra w golfa na trawie”. Po otrzymaniu fragmentu tekstu może odtworzyć podobne sceny. Ponadto może tworzyć klipy łączące różne koncepcje z danych treningowych, takie jak „żeglowanie po śniegu”.

Dlaczego jest to ważne: Automatyczne generowanie wideo z tekstu może być niezwykle przydatne — na przykład przy tworzeniu ogromnych zestawów syntetycznych danych treningowych dla autonomicznych samochodów. Może to również prowadzić do niepokojących fałszywych treści.

Ale: Klipy mają tylko 32 klatki długości i rozmiar 64x64 pikseli. Nadal nie są do końca przekonujące, a jeśli są większe, dokładność spada. Wszystko to wymaga naprawy, aby zbudować użyteczny konwerter tekstu na wideo.