Нейронные сети могут творить настоящие чудеса с видео, записанным более 100 лет назад
Мы уже знакомили вас с видео Нью-Йорка 1911 года, которое Денис Ширяев раскрасил с помощью ИИ.
На этот раз он взялся за историческое видео улиц Токио, снятое в 1913-1915 годах.
В этих роликах показывается уличная суматоха начала прошлого века, привычная для столицы Японии
Некоторые сцены ролика были взяты из короткого документального фильма «Japan of Today», выпущенного в США компанией «Post Pictures» в 1915 году. В настоящий момент это видео можно посмотреть на YouTube-канале Eye Filmmuseum.
Для редактирования видео Денис использовал множество различных технологий на основе ИИ
Благодаря ИИ видео получило значительные улучшения, среди которых увеличение разрешения до 4K, повышения частоты кадров до 60 fps, исправление скорости воспроизведения, уменьшение шумов и повреждений кадров, ну и конечно цветокоррекция.
В отличие от других видео в этот раз использовался алгоритм, который также улучшал лица
Все это было сделано с использованием ИИ и нейронных сетей.
В своих работах Денис совмещает алгоритмы различных технологий, таких как: DAIN Depth-Aware Video Frame Interpolation, Gigapixel AI и др.
Благодаря этим кадрам мы можем получить более подробное представление о повседневной жизни жителей Токио в 1913–1915 годах
Важно понимать, что цветокоррекция видео осуществлялась автоматическим образом, и она может неправильно отображать цвета некоторых предметов.
Камеры тех лет также не имели возможности записывать звук, поэтому в оригинальном видео его нет. Звук был наложен позже для придания атмосферы.
Оригинальное видео, которое Денис использовал для редактирования
То же видео после того, как над ним поработал Денис и нейронные сети
Другие видео от Дениса Ширяева:
Тверская улица, Москва, 1896 год
Прибытие поезда на вокзал Ла-Сьота, 1896 год
Путешествие через Нью-Йорк, 1911 год
А этот режиссёр сериала о будущем показал закулисное видео, как снимается кино на зелёном экране.
