Cascadeur

Cascadeur - приложение для мобильного телефона, которое работает по принципу нейронной сети. Она может оживлять объекты, которые попадают в объектив камеры. Для этого используются внутренние алгоритмы, которые в режиме реального времени создают анимации для подобных объектов. 

Разработка

Для разработки нейронной сети были использованы данные персонажей игры Shadow Fight. Благодаря этому, удалось извлечь 2 миллиона поз, которые и легли в основу работы нейронной сети. Для наполнения внутренней базы были использованы 95 процентов от доступных материалов. Остальные 5 потребовались для того, чтобы правильным образом откалибровать нейросеть и научить её более корректно оживлять объекты. 

Для создания самой нейросети использовалась относительно простая технология Self Normalizing Neural Networks. Если вкратце, это функция активации и инициализация, которая требуется для предугадывания поведения объекта. За счёт этого и удаётся создавать контрольные точки, от которых отталкивается нейросеть во время построения своих анимаций. Сам ИИ был создан с использованием пятислойной модели. 

Возможности

Суть Cascadeur заключается в облегчении работы аниматорам. Им более не требуется расставлять все контрольные точки в скелетной анимации самостоятельно. Теперь это будет делать нейросеть, предоставляя черновой вариант движения объектов. И помимо реалистичности создаваемой модели, ИИ также использует данные о смоделированном окружении. Таким образом, все анимации получают достоверность не только в плане движений, но ещё и в плане физической модели. 

Помимо построения самих анимаций, можно также продумывать и редактировать траектории движений, что открывает доступ к созданию комплексных движений, во время которых будет производиться взаимодействие с объектами окружения. Кроме того, благодаря возможности копирования и повторной генерации, создать подходящий запрос становится намного проще.
Ну а чтобы улучшить имеющийся результат, стоит воспользоваться встроенным редактором. Он позволит слегка изменить позы, чтобы подогнать их под идеалы вашего проекта.

Основные особенности

• Программа нужна для создания скелетной анимации на основе нейросети;
• Выдаёт результат по простому запросу;
• Присутствует встроенный редактор для доработки анимаций.