Почему это важно
Улучшение видео будет продолжать улучшаться, оказывая большое влияние на развлечения, правоохранительные органы и потребительское видео. Ускорение работы сети ИИ и ее уменьшение в размерах поможет всем нам сделать будущие инструменты улучшения видео, возможно, на наших личных устройствах.
Значительное улучшение разрешение видео в последнее время находится в центре внимания, с невероятными преобразованиями старого фильма в современное разрешение 4K. Технология для этого также быстро совершенствуется. Исследователи из Университета Пердью, Университета Рочестера и Северо-восточного университета придумали способ резко увеличить разрешение видео в три раза по сравнению с текущими методами, используя сеть ИИ, которая в четыре раза меньше.
Обширные эксперименты показывают, что наша одноэтапная структура более эффективна, чем существующие двухэтапные сети.
Современное состояние: Процесс, предложенный этими исследователями, пространственно-временное видео с суперразрешением (STVSR), использует одноэтапный проход обработки вместо двухэтапного. как и другие используемые сегодня методы (называемые сетями VFI).
Этот новый процесс вставляет «недостающие» видеокадры на основе существующих кадров, а затем объединяет их одновременно. Пока это происходит, сеть ИИ предсказывает кадры замедленного видео и также помещает их в видео.
Что они сказали: Исследователи провели несколько экспериментов, чтобы увидеть, будет ли их модель давать лучшие и более быстрые результаты, чем существующие сети VFI. Их система до сих пор продемонстрировала значительное улучшение скорости обработки и размера, необходимого для сети ИИ.
Зачем вам это?: Поскольку возможность резко улучшить разрешение старых видео и фильмов продолжает становиться быстрее и занимать меньше места, легко представить себе почти Будущая система на вашем собственном ноутбуке или смартфоне. Представьте себе все ваши домашние фильмы времен стандартного разрешения, документы, как личные, так и исторические, в формате 4K. Подумайте о документальных фильмах, которые привносят новый свет и понимание в старые кинодокументы, а также о потенциальных улучшениях в кадрах правоохранительных органов и наблюдения. Когда-нибудь скоро голливудская кнопка «улучшить» может стать реальной вещью, и она может быть даже на вашем iPhone.
