Видеокарты Nvidia RTX теперь улучшают качество видео с помощью нейросетей

26
Видеокарты Nvidia RTX теперь улучшают качество видео с помощью нейросетей
Аватар автора

Стас Зверянов

наслаждается мемами из нулевых в 4К

Страница автора

Старые утренники, концерты и ролики из нулевых теперь можно смотреть в 4К — но только в браузере.

1 марта производитель видеокарт Nvidia выпустил обновление для видеокарт 30-х и 40-х серий. Они открыли доступ к нейросети, которая увеличивает разрешение старых «мыльных» роликов вплоть до 4К с помощью искусственного интеллекта.

Функция появляется после установки драйвера 531.18 или более поздней версии. Пока что улучшение графики гарантированно работает только на компьютерах с Windows.

Для улучшения качества видео достаточно один раз включить функцию в настройках видеокарты. После этого ничего нажимать не нужно: технология Nvidia сама опознает и без задержки обработает видео, открытое в Chrome или Edge актуальной версии. Обычно браузер автоматически обновляется при запуске.

Видео с улучшенной картинкой можно смотреть на любом сайте без ограничений: на YouTube, Rutube, Twitch или в онлайн-кинотеатрах. Исходное разрешение должно быть не ниже 360р и не выше 1440р.

Для активации надо зайти в раздел «Панель управления Nvidia» и отметить пункт, выделенный на скриншоте
Для активации надо зайти в раздел «Панель управления Nvidia» и отметить пункт, выделенный на скриншоте

На выбор доступны четыре уровня улучшения картинки: первый потребляет меньше всего ресурса видеокарты, но лишь немного сглаживает картинку. А четвертый сильно нагружает компьютер, но и детализацию повышает лучше. Настроить итоговое разрешение апскейлинга нельзя.

Nvidia утверждает, что любые совместимые видеокарты без проблем справятся с первым уровнем, а для четвертого понадобится модель не ниже RTX 3070. Мы протестировали технологию: при максимальном уровне улучшения видео на YouTube компьютер задействовал около 40% мощности GeForce RTX 3070. Без улучшения проигрывание того же ролика загружает карту примерно на 10%.

Вот несколько примеров улучшения.

Оригинальный скриншот в качестве 480р
Оригинальный скриншот в качестве 480р
Скриншот с включенным повышением разрешения. В старых мультфильмах заметить разницу сложно
Скриншот с включенным повышением разрешения. В старых мультфильмах заметить разницу сложно
Первое видео, загруженное на YouTube в 2005 году в разрешении 240р, и его аналог с искусственно увеличенным разрешением. Стало четче, но на движущемся хвосте слона заметна «лесенка»
Первое видео, загруженное на YouTube в 2005 году в разрешении 240р, и его аналог с искусственно увеличенным разрешением. Стало четче, но на движущемся хвосте слона заметна «лесенка»

Для улучшения старых фильмов «сверхвысокое разрешение» подходит, но чудес ожидать не стоит. Ниже можно увидеть сравнения одного и того же момента «Операции „Ы“» в разном качестве.

Обработанные нейросетью скриншоты выглядят более четкими — это особенно заметно на белом помпоне с шапки Юрия Никулина. Но при этом алгоритм иногда ошибается: например, он размазал и сгладил легкую небритость Евгения Моргунова. В любом случае эти детали можно разглядеть только при сильном приближении на большом 4К-телевизоре.

Слева — оригинальный скриншот из «Операции „Ы“» в Full HD на YouTube. Справа — тот же момент, но с включенным улучшением
Слева — оригинальный скриншот из «Операции „Ы“» в Full HD на YouTube. Справа — тот же момент, но с включенным улучшением
Тот же эпизод, но в разрешении 360р. Оригинал слева гораздо более мутный, чем «восстановленный» вариант
Тот же эпизод, но в разрешении 360р. Оригинал слева гораздо более мутный, чем «восстановленный» вариант
Слева — оригинал в разрешении 1080р, справа — восстановленная из 360р версия в 4К. Разница небольшая, но в этом случае нейросети проигрывают
Слева — оригинал в разрешении 1080р, справа — восстановленная из 360р версия в 4К. Разница небольшая, но в этом случае нейросети проигрывают

С технологией совместимы следующие модели видеокарт:

  1. GeForce RTX 3050.
  2. GeForce RTX 3060.
  3. GeForce RTX 3060 Ti.
  4. GeForce RTX 3070.
  5. GeForce RTX 3070 Ti.
  6. GeForce RTX 3080.
  7. GeForce RTX 3080 Ti.
  8. GeForce RTX 3090.
  9. GeForce RTX 3090 Ti.
  10. GeForce RTX 4070 Ti.
  11. GeForce RTX 4080.
  12. GeForce RTX 4090.

Мы постим кружочки, красивые карточки и новости о технологиях и поп-культуре в нашем телеграм-канале. Подписывайтесь, там классно: @t_technocult.

Стас ЗверяновКакое видео в хорошем качестве собираетесь посмотреть первым?
  • d1mmmkДо введения на Ютубе платной подписки для открытия доступа к видео качеством выше 360р осталось 3... 2... 1...0
  • Стас ЗверяновПосмотрите с позитивной стороны: теперь нет нужды переплачивать за 4К на Нетфликсе0
  • Rex Coltразницы вообще не увидел принципиальной13
  • d1mmmkСтас, не стоит быть столь наивным, как только доступ к нейросеточным улучшайзерам будет у какой-либо значимой части пользователей, то обязательно введут ограничения, ведь это всё разрабатывается в первую очередь чтоб корпорации могли экономить: меньше нагрузки на сеть, меньше трафика, меньше устройств для хранения данных. Попробуйте включить онлайн видео на каком-нибудь устройстве десятилетней давности, раньше на них отлично всё работало, но сейчас всё дико лагает — потому что ради экономии давно перешли на vc-1 и h.265, эти форматы меньше и эффективнее, но требовательны к железу.0
  • Филипп Кругликовd1mmmk, вплоть до прошлого года имел макбук 2008 года. С тормозами, но он работал. Ютуб тоже был юзабельным, но конечно не выше чем 720р, а лучше 480.1
  • d1mmmkФилипп, вот вот, а когда-то мог без проблем 1080р вытягивать.1
  • Павел Толпежниковd1mmmk, отличная идея, кстати! Я куплю. Но они сейчас и Premium не продают0
  • Iwand1mmmk, мне это только кажется или ты против движения в сторону увеличения компрессии и уменьшения трафика? Кого, блин, волнует сегодня совместимость с устройствами десятилетней (!) давности?0
  • Павел, да вроде продают, только карта нужна заграничная0
  • Филипп КругликовIwan, технолуддитов0
  • Стас ЗверяновКажется, вы смешали кислое с пресным. Как между собой связана тяга корпораций экономить и методы шифрования онлайн-видео? С годами железо становится лучше и более продвинутым, на мой взгляд, логично, что часть вычислительной мощности можно переложить с серверов на устройства пользователей. Я, например, если вижу фильм в h.265 и h.264, то выбираю первый вариант. У вас не так?0
  • d1mmmkСтас, вообще-то связаны напрямую, эти самые корпорации и разрабатывают новые методы сжатия, чтобы уменьшить расходы на инфраструктуру. Мне не по душе то количество электронного мусора, который производится под флагом энергоэффективности и инноваций. Например, у C2D образца года 2007 производительность не сильно уступает i5 образца 2017, но нет виртуализации и аппаратной поддержки h265, следовательно — исправно работающее устройство идет в мусор, и туда же идет i5 6-го поколения образца 2015 года который отличается от 7-го только отсутствием h265. Нейросеточные улучшайзеры появились в широком доступе в 2020, с релизом apple A14 и M1, в них уже 16-core neural engine на 11 триллионов операций в секунду. Так что еще пара лет и все core i актуальных поколений — с вещами на выход. Видео — это не только ПК и мобильные устройства, это еще и куча бытовых устройств типа тв-приставок, телевизоров, проекторов и т.п. тоже ждет свалка.1
  • Iwand1mmmk, ерунда какая-то. В 2007 году люди не придумали современные кодеки. Это не мировой вселенский заговор, просто не придумали и все. Сейчас придумали и совершили большой шаг вперед. Кодек AV1 сделает еще больший шаг вперед. Так что теперь, отказываться от прогресса из-за того, что у кого-то там бомбит, что его десятилетний селерон не тянет видео?1
  • Сергей ВасильцовПавел, для Youtube Premium нужен iPhone/iPad и симкарта МТС - всё нормально оплачивается с российского счёта0
  • Sergey AveryanovRex, я новые драйвера еще не ставил, так что личного опыта нет, но подозреваю что проблема может быть в том, что сайт Т-Ж сам по себе качество изображений шакалит сильно. Тут размер картинок около 50кб при размерах около одного мегапикселя, что довольно мало даже для webp.0
  • Стас ЗверяновДа нет, картинки корректно отражают ситуацию — радикальных улучшений нет, а на экранах с разрешением ниже 4К они ещё менее заметны.0
  • Zod1
  • Павел ТолпежниковZod, ну а может на Маки тоже начали Nvidia чипы ставить0
  • Павел ТолпежниковСергей, оплачивается с МТС, да, однако про Premium я получил письмо, что в продлении отказано. Теперь сначала предлагает "1 месяц попробовать", а при попытке согласия отказывает. Ну не вопрос, я теперь Telegram Premium оплачиваю )0
  • Павел ТолпежниковАрсений, да как отказали вроде и не надо уже, рекламы же так и так нет0
  • Aironя на 3 браузерах одно и то же видео открыл, в опере гх,едж и гугл.Эта штука только в гугле работала и качество чутка лучше становилось0
  • Александр КузнецовУ меня 4060 ти данная настройка присутствует но разницы я не заметил и видеокарта не нагружается и вашем списке моей видеокарты тоже нету странно как то это все. Вот бы эту технологию добавили в программы для кодирования видео и конвертирования было бы вообще прекрасно0
  • Стас ЗверяновЯ — автор статьи, это указано сразу после заголовка. В первом абзаце после моего имени написано, что технологию поддерживают все видеокарты тридцатой и сороковой серии. Список в конце — для референса и на полноту не претендует. И напоследок: ребус от меня в двух картинках. Сможете догадаться, что в нём зашифровано?0
  • Стас Зверянов0
Вот что еще мы писали по этой теме