Nvidia выпустила плагин RTX Voice, подавляющий фоновые шумы во время записи голоса

Он использует ИИ и выделенные вычислительные блоки видеокарт Nvidia RTX.

Nvidia выпустила плагин RTX Voice, подавляющий фоновые шумы во время записи голоса

С помощью RTX Voice можно избавиться от фоновых шумов вроде нажатия клавиш или шелеста пачки из-под чипсов во время аудиозвонков, видеоконференций или прямых трансляций. Для работы программы используется нейросеть, обученная выделять на любой записи только человеческий голос.

Чтобы использовать RTX Voice, необходима видеокарта Nvidia RTX или Quadro RTX, видеодрайвер 410.18 или новее и Windows 10.

Плагин можно использовать в следующих программах:

  • OBS Studio
  • XSplit Broadcaster
  • XSplit Gamecaster
  • Twitch Studio
  • Discord
  • Google Chrome
  • WebEx*
  • Skype*
  • Zoom*
  • Slack*

* - в этих приложения могут быть проблемы с работой плагина.

На сайте Nvidia есть официальный гайд по настройке.

Судя по первым тестам, RTX Voice полностью убирает звук шума кулеров ПК и клавиатуры, если человек не говорит. Во время разговора часть фоновых звуков всё-таки может пробиться в запись, однако речь идёт о нескольких миллисекундах.

Как отмечает автор YouTube-канала EposVox, Nvidia в данном случае «подрезала» Discord, недавно выпустивший схожее решение и продающий его за деньги. При этом RTX Voice почти не искажает человеческий голос, а платная Krisp значительно его приглушает.

Что примечательно, RTX Voice можно использовать и для того, чтобы приглушать неприятные фоновые звуки от собеседников — процесс происходит в реальном времени и с задержкой в несколько миллисекунд.

В будущем технологию можно будет использовать и для постобработки уже записанного аудио — например, для монтажа подкастов. Пока что RTX Voice находится в стадии бета-тестирования.

130130
134 комментария

Дискорд сейчас

76

Мех.клава моего друга в дискорде сейчас:

90

На первый взгляд в Steam Hardware Survey, карт 2000 серии где-то 5-10%. Так что пока дискорду ничего не грозит.

2

Не знаю как им удалось, но проверив данный плагин на разных программах, он реально глушит посторонние звуки, сохраняя при этом чистоту голоса.Наконец-то можно более расширенно пользоваться RTX видеокартами, не только для продвинутых графических настроек. Молодцы "зеленые", что сказать, жду развитие данной технологии

23
Автор

Но судя по видосу чувака это может жрать фпс в играх.

Rt-ядра уже давно не только для графики в играх. Они и в рендере помогают, например.

1

Вот тут можно посмотреть как оно работает и сравнение с ближайшим конкурентом Krisp

12