Смотрите, как исследователи анимируют статические изображения с помощью гипнотизирующего машинного обучения.

Анимация прекрасна, но создание движущихся картинок невероятно трудоемко. Визуальные и художественные отделы, которые работали над фильмом Моана Согласно данным кредитных списков на IMBD, их было около 300 человек. Но новый процесс, разработанный исследователями из Принстона, может существенно упростить некоторые части процесса, что приведет к завораживающим результатам.

Этот инструмент в основном позволяет пользователям выбирать часть статического изображения, которое они хотят анимировать, например, капли дождя в штормовой сцене или частицы пара, движущиеся через двигатель внутреннего сгорания.

Затем пользователь манипулирует этой частью своего изображения, чтобы указать, насколько быстро он хочет, чтобы анимация двигалась, после чего алгоритм вступает во владение и экстраполирует свои инструкции на все другие подобные объекты на изображении. У него есть возможность сэкономить много времени аниматорам, а любителям гораздо проще делать такие вещи, как кинематографы - фотографии, на которых анимирована отдельная часть изображения.

«Этот человек дает подсказки о том, какие аспекты сцены они хотели бы оживить», - объясняет соавтор Адам Финкельштейн в своем заявлении. «Компьютер устраняет большую часть сложности и утомления, которые потребуются для создания анимации полностью вручную».

Эту технику было сложнее разработать, чем вы думаете. Машинное обучение очень хорошо помогает идентифицировать вещи на фотографиях, которые связаны природными правилами и относительно последовательны. Образы, нарисованные человеческой рукой, естественно, не последовательны: у каждого человека или художника свой особый стиль.

«Существует такой широкий диапазон стилей рисования», - объясняет Нора Уиллетт, аспирантка факультета компьютерных наук Принстона и ведущий автор газеты. «Просто недостаточно данных, чтобы обучить машину распознавать каждый фантастический рисунок».

Чтобы преодолеть это препятствие, исследователи разработали интерфейс, который облегчил совместную работу людей и машинного обучения. Они начали с приложения Autodesk SketchBook Motion, которое может создавать анимацию, но требует, чтобы пользователи делали их вручную или компилировали десятки слоев с помощью другого приложения, такого как Adobe Photoshop.

Чтобы проверить их интерфейс, команда Виллетта привлекла шесть человек с разным уровнем анимации, двое из которых были достаточно хороши, чтобы сами создавать свои собственные анимации. Они представили свой новый метод только на прошлой неделе на симпозиуме Ассоциации компьютерных машин по программному обеспечению и технологиям пользовательского интерфейса.