Новости про Tensor и искусственный интеллект

Технология NVIDIA RTX Voice использует возможности графических процессоров Turing для удаления фоновых шумов из трансляции, голосовых чатов и видеоконференций. Сейчас доступна бета версия этого плагина. В описании говорится, что в RTX Voice используются «функции ИИ», помогая увеличить качество звука.

Плагин RTX Voice поддерживает целый ряд приложений для общения, включая OBS Studio, XSplit Broadcaster, XSplit Gamecaster, Twitch Studio, Discord, Google Chrome, WebEx*, Skype*, Zoom* и Slack* (приложения, отмеченные «*» могут иметь некоторые проблемы с RTX Voice).

При включении плагина можно избавиться от фоновых звуков, включая щелчки от клавиатуры, шум от других геймеров, сидящих рядом и прочего окружения.

Чтобы воспользоваться плагином нужно иметь видеокарту NVIDIA GeForce RTX или Quadro RTX, драйвер версии 410.18 или новее, операционную систему Windows 10. После установки RTX Voice её нужно выбрать в качестве микрофона в приложении для конференции.

Несмотря на эти требования многие обозреватели уже отметили, что плагин прекрасно работает и на видеокартах без RTX.

Эта технология предлагает живую фильтрацию, виртуальный зелёный экран и прочие технологии, которые пригодятся игровым стримерам в Twitch. Суть технологии заключается в полном удалении фона за спиной комментатора игрового стрима. Этот фон можно заменить непосредственно игровым процессом, или любым другим изображением.

«Модель ИИ RTX Greenscreen понимает, какой частью изображения является человек, а какой — фон, так что геймеры смогут получить преимущества зелёного экрана, не приобретая таковой».

Также инструментарий RTX Broadcast Engine предлагает некоторый функционал дополненной реальности. Он использует вебкамеру для определения лица, а затем отслеживает мимику. Таким образом можно наложить речь и эмоции на 3D-персонажа, так же, как это умеют делать флагманские смартфоны.