Новости про NVIDIA и видео

ИИ-масштабирование от NVIDIA теперь работает на веб-видео

Технология масштабирования на основе искусственного интеллекта от NVIDIA, доступная в картах серии RTX, позволяет заметно улучшить качество картинки в играх без влияния на производительность. Теперь же эта технология станет доступной и для веб-видео при использовании видеокарт Ampere и Ada Lovelace.

Так, начиная с февраля на PC, при использовании видеокарт серий RTX 40 и RTX 30, можно будет масштабирование видео разрешением 1080p до 4K. Работать это будет в браузере Google Chrome и Microsoft Edge. Пока не ясно, почему технология не будет работать с RTX 20, ведь функционал DLSS доступен и в этой серии ускорителей. Будем надеется, что в будущем перечень доступных моделей GPU расширится, как появится и поддержка браузера Firefox.

На CES 2023 NVIDIA представила короткое видео с демонстрацией работы RTX Video Super Resolution. В ролике сравнивается видео Apex Legends в разрешении 1080p с масштабированием до 4K. При увеличении картинки видно, что ИИ успешно сглаживал блочные артефакты возле объектов.

Демонстрация не показывает множество движений, а те что есть — медленные, так что как будет работать технология в динамичных сценах пока не понятно.

Introducing RTX Video Super Resolution - 4K AI Upscaling for Chrome & Edge Video

Сейчас NVIDIA предлагает лишь масштабирование от 1080p до 4K. Это интересный и грамотный подход, поскольку большинство стриминговых сервисов, кроме Netflix и YouTube, ограничивают PC-пользователей к доступу к контенту в разрешении 4K, и применение технологии Video Super Resolution позволит насладиться видео с Amazon Prime Video или Hulu в высочайшем качестве.

NVIDIA исправит видео в онлайн конференциях

Компания NVIDIA анонсировала новую платформу видеоконференций для разработчиков под названием NVIDIA Maxine, которая исправляет наиболее распространённые проблемы в видеосвязи.

Служба Maxine будет обрабатывать видео, используя облако с ИИ, основанным на GPU NVIDIA. Благодаря ему компания будет корректировать лицо и взгляд пользователей, чтобы они всегда смотрели в камеру, снижать требования в видео «до одной десятой от требований стандартного потока H.264», передавая лишь «ключевые лицевые точки», а также за счёт повышения разрешения видео. Другие функции, предлагаемые платформой, включают корректировку света, перевод в реальном времени и расшифровку речи, а также анимацию аватара.

Коррекция видео при помощи NVIDIA Maxine

И хотя все эти возможности наверняка согреют сердце фанатов NVIDIA, в данной услуге нет ничего особо нового. Ранее Microsoft и даже Apple внесли некоторые технологии в Surface Pro X и FaceTime, которые изменяют взгляд собеседника, а Skype давным-давно имеет возможность синхронного перевода.

В отличие от похожих решений, Maxine не является потребительским продуктом, он предлагается для других компаний. В NVIDIA уже объявили, что заключили партнёрское соглашение с Avaya, которая воспользуется некоторыми возможностями платформы.

NVIDIA предлагает искусственный интеллект для замедленного видео

Запись замедленного видео сопряжена с целым рядом трудностей, ведь для замедления в несколько раз нужно записать во столько же раз больше кадров. К счастью, у NVIDIA есть предложения для решения этой проблемы.

Новое исследование от NVIDIA демонстрирует превращение обычного 30 к/с видео в 240 к/с благодаря искусственному интеллекту. По сути, система оценивает соседние кадры и додумывает промежуточные, примерно так, как это делает человек. Пока это только концепт и для его реализации потребуется разрешить ряд проблем, однако в будущем каждый смартфон будет способен на такое.

NVIDIA и искусственный интеллект

«Хотя запись видео с 240 к/с на смартфон возможна, вести постоянную записи с высокой частотой кадров непрактично, поскольку это требует большого объёма памяти и весьма требовательно к энергии мобильного устройства», — сообщается в исследовании компании. «По этой и другим причинам существует интерес по генерации высококачественного замедленного видео из существующего».

Research at NVIDIA: Transforming Standard Video Into Slow Motion with AI

Необходимость доработки технологии связана с её ограничениями. Поскольку речь идёт об ИИ, то его нужно вначале обучить. И обучать нужно на аналогичной сцене. К примеру, если вы хотите получить замедленное видео брызг из-под колёс машины, то сначала искусственный интеллект и нужно обучить на этом примере. Для воспроизведения другой сцены потребуется новое обучение. Также эта техника не позволяет бесконечно замедлять видео, вставляя до 7 промежуточных кадров, поскольку для дальнейшего замедления потребуется больше данных.

Movavi предлагает скидки на «Конвертер Видео»

Российский разработчик Movavi, создатель комплекса программного обеспечения по работе с аудио и видео, предлагает принять участие в предстоящей акции — получении 50% скидки на одну из своих программ — «Конвертер Видео».

Данный продукт является одним из наиболее быстрых в своём классе и легко обрабатывает файлы мультимедиа практически во всех известных форматах.

Главная функция программы, разумеется, — это смена формата любого видео- или аудиофайла. Конвертер поддерживает: MP4, MKV, AVI, FLV, MPEG, MOV, WMV и другие видеоформаты. Что касается аудио, то вы можете загружать треки в форматах: MP3, APE, WAV, WMA, FLAC, OGG и других. При выборе формата доступен и выбор разрешения готового видео, а соответственно, его качества.

Пакет поддерживает готовые профили для мобильных устройств, которые будут подобраны автоматически, когда вы подсоедините телефон или планшет к компьютеру.
 

Встроенный редактор даёт возможность обработать конвертируемые файлы: повернуть или кадрировать клип, стабилизировать, улучшить качество картинки и звука, добавить субтитры или водяной знак, а также с точностью обрезать дорожку.

По сравнению с другими конвертерами, в этой программе используется режим SuperSpeed, который позволяет конвертировать файлы за считанные секунды без потери качества. При использовании этого режима, а также с учётом поддержки технологий Intel и NVIDIA, конвертация проходит до 79 раз быстрее.
 

Более того, вы можете настроить автоматическую конвертацию — выбрать папку и необходимые параметры, а потом просто загружать файлы в эту папку, и конвертации не потребуется ваше участие.

Другие способы использования программы:

  • Извлечение аудио. Экспортируйте отдельно аудиодорожку из видео — вырезайте диалоги или музыку.
  • Создание GIF. Обрезайте видео и сохраняйте их в виде анимированных картинок.
  • Перенос видео с DVD. Перекодируйте файлы и сохраняйте их на компьютере.
  • Создание скриншотов. Снимайте стоп-кадры одним кликом.
  • Загрузка музыки в iTunes. Настраивайте автоматический перенос сконвертированных файлов в библиотеку iTunes.

Movavi «Конвертер Видео» обладает всеми необходимыми инструментами и возможностями для простой и быстрой конвертации. Практически все функции автоматизируются, а программа сворачивается в системный трей. Это снижает нагрузку на ЦПУ, что позволяет вам спокойно продолжать работать на компьютере.

А теперь то, о чем мы обмолвились в начале новости. С 13 июня 2017 у вас появится шанс получить «Конвертер Видео» всего за полцены. Для этого вам нужно подписаться на регулярную рассылку компании Movavi внизу страницы https://www.movavi.ru/videoconverter/ с помощью специальной формы. В письмах вас ждут купоны на скидки, советы по использованию программ, интересные новости и многое другое.

20 нм Maxwell будут поддерживать H.265

Возможно, вы и не уделяете особо внимания видеокодекам, однако именно они определяют размер и качества конечного видео файла. Для профессионалов же важными являются и скорость кодирования/раскодирования видеоряда.

Именно поэтому продюсерам фильмов важно знать, какие кодеки будут поддерживать будущие GPU, чтобы подготовиться к их повсеместному использованию.

Согласно информации, опубликованной Softpedia, новое поколение графических процессоров NVIDIA, с кодовым именем Maxwell, которое будет изготовлено по 20 нм технологии, будет иметь аппаратную поддержку кодека H.265.

Этот формат является одним из двух потенциальных наследников для H.264, при этом оба будущих стандарта имеют вдвое большую эффективность, что колоссально влияет на размер конечного файла.

Кодек H.265 использует «суперблоки» размером 64х64 пикс. и обрабатывает 35 подпрогнозируемых направлений для их перестроения, увеличивая при этом битовый размер. Его главный конкурент — VP9, не использует блоки, и он имеет открытый исходный код.

Фильмы, которые будут закодированы этими кодеками, должны будут иметь соотношение сторон, кратное 4х8 или 64х32. И хотя Fudzilla и объявила первой о поддержке H.265 в 20 нм GPU Maxwell, это вовсе не означает, что VP9 разработчики оставят без внимания.

Однако всё это имеет одну проблему.  Как мы знаем, TSMC столкнулась с большими производственными трудностями. Поэтому NVIDIA (равно как и AMD), вынуждена перепроектировать свои новые чипы под нормы 32 нм техпроцесса, а значит, 20 нм GPU мы, скорее всего, в этом году не увидим.

Видео от NVIDIA, демонстрирующее преимущества тесселляции в игре H.A.W.X. 2

Компания доказывает, что тесселляция в H.A.W.X. 2 — не маркетинговый трюк.

В представленном видеоролике NVIDIA попыталась наглядно показать, что тесселляция в игре Tom Clancy`s H.A.W.X. 2 от Ubisoft, входящей в программу TWIMTBP, сделана для заметного невооружённым глазом улучшения качества изображения, а не просто «опускает» решения конкурента в бенчмарках.

Понятно, что появление данного видео является ответом на критику AMD ранней версии бенчмарка на базе игры. Действительно ли тесселляция улучшает качество изображения в игре, мы узнаем уже скоро — игра выходит на днях.

3D Vision Video Player 1.6.4

Небольшое обновление фирменного стереопроигрывателя NVIDIA 3D Vision.

Обновился фирменный видеопроигрыватель NVIDIA 3D Vision Video Player. В новой версии 1.6.4 сделаны следующие изменения:

  • добавлена опция воспроизведения потокового видео из командной строки;
  • добавлено сочетания клавиш Ctrl+Alt+M для проверочного вывода одинакового изображения в оба канала с сохранением прочих настроек;
  • обновлена поддержка формата QuickTime;
  • исправлено определение системной настройки разрешения шрифтов в Windows Vista и 7.

Загрузить последнюю версию проигрывателя можно с сайта NVIDIA (~4 Мб). Проигрыватель работает в Windows Vista и 7 (32- и 64-бит) при установленном драйвере 3D Vision stereo.

HQV Benchmark 2.0 — анализ качества видео в драйверах ATI, NVIDIA и Intel

Сайт KitGuru провёл масштабное тестирование новых драйверов от ведущих производителей GPU на предмет работы методик улучшения качества изображения в фильмах при помощи масштабного теста HQV Benchmark 2.0.

Компании тратят миллионы долларов на создание видео HD качества, но порой пользователь сталкивается с проблемами отображения из-за плохих драйверов.

Можно долго играться с настройками в контрольной панели драйвера, чтобы добиться высокого качества картинки. Это конечно занятная процедура, но сайт KitGuru решил подойти к этому вопросу с академической точки зрения и протестировать современные драйвера от ATI, NVIDIA и Intel в профессиональном тесте HQV 2.0.

Тест представляет собой обновленную версию оригинального инструмента и состоит из множества различных видеоклипов и видеотестов, которые предназначены для оценки коррекции движения, деинтерлейсинга, декодирования, уменьшения шума и других методик улучшения качества отображаемой картинки.

Существуют две версии программы, стандартной, идущей на DVD и высокой четкости, использующей Blu-ray диск. В тесте использована Blu-ray версия, чтобы сосредоточиться на HD контенте.

Для видеокарт NVIDIA использовался драйвер Forceware 257.15 бета, для ATI новейший WHQL драйвер Catalyst 10.6, который включает новые функции, такие как Mosquito, Noise Reduction и Deblocking. Графика Intel GMA X4500 использовала драйвер 8.15.10.1872, а Intel HD Graphics (i3) - 8.15.10.1952.

Результаты теста представлены ниже, а с подробным описанием и результатами каждого теста вы можете ознакомится здесь (на английском языке).

Краткие выводы :

Intel: Даже несмотря на отказ от выпуска дискретных Larrabee видно, что инженеры Intel уже сделали много для оптимизации обработки видео высокой чёткости и каждое новое поколение имеет определённый прогресс. Если же сравнивать интегрированный графический процессор с современными GPU от NVIDIA или ATI — то пока ещё Intel значительно им уступает. Но нужно снять шляпу перед Intel, если учесть, что последние чипы лучше предыдущих на 125%. Intel определенно движется в правильном направлении — и делает это быстрее, чем кто-либо.

NVIDIA: Опять же, был достигнут прогресс. Переход от NVIDIA G210/220 к нынешнему поколения процессоров Fermi является очень существенным. Кроме того, инженеры NVIDIA постоянно работают с результатами тестов KitGuru и стараются устранить замеченные проблемы, а так же собираются добавить новые функции на примере ATI, такие как Mosquito Noise Reduction и Deblocking.

ATI: Похоже, что ATI даёт преимущество опыт разработки микросхем для цифровых телевизоров. Даже бюджетные карты, такие как пассивно охлаждаемый Sapphire HD 5550, имеет аналогичное флагманской GTX480 от NVIDIA качества видео. Очевидно, что они много работают над улучшением драйверов. На настоящий момент можно с уверенностью заявить, что HD 5000 серия карт предлагает лучшее видео HD качества из доступных на рынке.

Результаты также показали, что Catalyst 10.6, без сомнения, лучший драйвер ATI на настоящий момент в отношении качества видео. Новые функции в Catalyst 10.6, такие, как Mosquito Noise Reduction и Deblocking реально способствуют повышению выходного качества изображения.

Не стоит беспокоиться о тепловыделении GTX 480

Ответ NVIDIA на критику и шутки сообщества.

Сотрудник NVIDIA Drew Henry в блоге компании прокомментировал критику огромного электропотребления и тепловыделения первых видеокарт на базе Fermi, выражающуюся в шуткахразличной степени безобидности. NVIDIA пришлось выбирать между тепловыделением и производительностью при разработке GF100, и выбор был сделан в пользу производительности. При этом сам GPU специально разрабатывался в расчёте на высокую эксплуатационную температуру, так что наблюдаемые на практике значения выше 80-90°С никак не повлияют на качество работы и срок службы графического процессора.

 Заодно Drew Henry выложил видеозапись презентации первых видеокарт Fermi на выставке PAX East 2010 26 марта:

PAX East: NVIDIA Keynote Presentation (Part 1)
PAX East: NVIDIA Keynote Presentation (Part 2)

Mercury Playback Engine от Adobe будет поддерживать GeForce

Но с рядом ограничений в сравнении с Quadro.

Согласно ответу, данному в форуме NVIDIA сотрудником департамента продуктов NVIDIA Quadro, Sean Kilbride, будущий движок Mercury Playback Engine, который станет «сердцем» следующей версии ПО работы с видео Adobe Premiere, будет поддерживать видеокарты GeForce. По имевшейся ранее информации, GPU-ускорение через CUDA должно было работать только для нескольких «топовых» видеокарт Quadro.

Согласно новой информации, на платформе Mac только видеокарты NVIDIA Quadro FX 4800 будут поддерживать полное ускорение работы с видео через операции CUDA. Для GeForce GTX 285 GPU будет обрабатывать лишь три первых «слоя» видео, последующие же достанутся CPU.

Пока неясна судьба GPU-ускорения для платформы Windows, как и для видеокарт GeForce GT 120, входящих в базовую комплектацию Mac Pro.