Компания Meta AI Research представила нейросеть, которая анимирует детские рисунки

Персонажи бегают, прыгают и даже боксируют.

Ксения Коростелева

Журналистка. Пишет новости про дизайн, а в свободное время курирует выставки и рассказывает про современное искусство.

Детские рисунки удивительно разнообразные. Поэтому они идеально подходят для того, чтобы научить нейросеть анимировать скетчи и наброски. Специалисты из центра исследований Meta AI Research создали сервис для анимации на основе Detectron2 (это платформа для обнаружения объектов, сегментации и других задач визуального распознавания) и AlphaPose (нейросеть для точной оценки и отслеживания поз нескольких персонажей в реальном времени).

Модель помогает родителям анимировать 2D-наброски детей, но, конечно, сервис можно использовать для анимации любых простых рисунков. При желании изображение можно добавить в общедоступную базу данных или поделиться в социальных сетях. Рисунки, которые пользователи передадут в базу данных, станут материалом для исследований. С их помощью модель будут обучать распознавать опорные точки на персонажах, нарисованных от руки. Кроме того, база изображений будет доступна специалистам, разрабатывающим инструменты для детского творчества.