Nvidia использовала искусственный интеллект, чтобы сделать slo-mo видео из обычного, путем добавления новых кадров.

Замедленное видео создается путем записи большего количества кадров в секунду. Если не записать достаточно кадров, то в замедлении все будет выглядеть дергано и неестественно. Но только если не использовать искусственный интеллект.

Исследование от производителя чипов для видеокарт Nvidia использует машинное обучение, чтобы превратить видео 30 кадров в секунду в замедленное видео на 240 кадров в секунду. По сути, ИИ смотрит на два соседних кадра, а потом создает промежуточные изображения между ними.

Технология еще нуждается в доработке для коммерческого использования. Но после этого можно будет использовать такой подход для добавления эффектов замедленного воспроизведения на смартфонов уже после записи видео. Об этом говорят авторы исследования:

Сейчас на смартфоны можно снимать видео со скоростью 240 кадров в секунду. Но запись с высокой частотой нецелесообразна, поскольку ролик занимает много места на накопителе и на это тратится много энергии

Ограничения технологии Nvidia

Одной из главных причин, почему технологию пока на стадии разработки — это необходимость обучать исскуственный интеллект каждый раз для определенных типов кадров. Чтобы замедлить видео с автомобилем и лужей, нужно было показать ИИ большое количество аналогичных видеороликов.

Также, система Nvidia не может добавлять бесконечное количество кадров между двух базовых, без дополнительных данных компьютеры не могут предугадывать движения объектов. Но рабочая версия может вставлять сюда еще 7 кадров, чего достаточно для потребительского slo-mo.

Tehnot.com ранее сообщал, что искусственный интеллект научился воссоздавать 3D-объект по нескольким фотографиям, самостоятельно заполнив «пробелы».