NVIDIA GeForce RTX Broadcast Engine рендерит крутые эффекты на основе искусственного интеллекта и зеленые экраны для стримеров


Сегодня на TwitchCon NVIDIA анонсировала несколько интересных новых технологий, которые могут быть весьма полезны для сообщества стримеров. Компания использует ядра RT и Tensor в своем нынешнем поколении графических карт GeForce RTX на основе Turing для включения таких функций, как трассировка лучей в реальном времени, но это же оборудование будет использоваться для работы нового RTX Broadcast Engine компании.

RTX Broadcast Engine будет использовать встроенные тензорные ядра, чтобы обеспечить широкий спектр эффектов в реальном времени, включая фильтры стилей, дополненную реальность и зеленые экраны. В случае с RTX Greenscreen NVIDIA использует искусственный интеллект для очистки фона в прямой трансляции, оставляя только ваше лицо и тело для наложения на игровой контент или любой другой фон по вашему выбору. Большим преимуществом использования GeForce RTX для включения функции виртуального зеленого экрана является то, что для настройки и обслуживания не требуется дополнительное оборудование, что помогает снизить стоимость входа для стримеров, желающих оживить свой канал.

Конечно, эффект зеленого экрана выглядит почти идеально в приведенной выше демонстрации NVIDIA, но нам придется подождать, чтобы увидеть, как все будет работать в реальном мире после обновления программного обеспечения, чтобы использовать преимущества SDK.

RTX AR использует технологию отслеживания лица на кадрах с вашей веб-камеры для переноса движений вашего лица (губ, глаз и т. д.) на 3D-модель. Подумайте об Apple Memoji , и у вас будет общее представление о том, чего ожидать. Наконец, RTX Style может изменить внешний вид вашей ленты на основе выбранного вами фильтра. Это выглядит немного бесполезно, но может оказаться популярным среди сегмента аудитории прямых трансляций.

движок вещания rtx 2

Аудитория прямых трансляций огромна: NVIDIA заявляет, что 750 миллионов человек по всему миру выбирают свою потоковую платформу, чтобы посмотреть, как лучшие геймеры мира сражаются с конкурентами. У RTX Broadcast Engine определенно есть потенциал, но разработчикам приложений придется добавить поддержку в свое программное обеспечение. В случае с RTX Greenscreen уже запланирована поддержка OBS , ориентированной на Twitch . И StreamLabs, и XSplit также добавили поддержку RTX Broadcast Engine и сопутствующих SDK.

Источник (англ.)

Поставить оценку
Кофебрейкер | Интернет-журнал