Во время презентации NVIDIA на выставке CES 2025 Inworld AI объявила о партнёрстве с производителем видеокарт GeForce и подразделением Streamlabs компании Logitech, чтобы представить то, что они называют первым в мире интеллектуальным помощником для стриминга.
Это сотрудничество объединяет опыт Streamlabs в области прямых трансляций, технологию ACE от NVIDIA и модели машинного зрения, а также возможности восприятия и когнитивных функций Inworld AI. Используя мультимодальный ИИ, Inworld управляет «мозгом» интеллектуального помощника по стримингу, превращая его в интерактивного соведущего, продюсера-эксперта и технического ассистента.
Вот более подробный обзор того, как всё устроено:
- Интерактивный соведущий: Используя возможности компьютерного зрения NVIDIA для обнаружения событий в режиме реального времени, а также способность Inworld управлять поведением агентов в режиме реального времени на основе состояния игры и контекстного понимания игр, интеллектуальный помощник для потоковой передачи может предлагать контекстуально релевантные комментарии по запросу создателя. Благодаря такой осведомленности помощник может делать такие вещи, как выделять удачно собранную сборку, комментировать драматическую «Королевскую битву» или даже благодарить зрителей за советы.
- Продюсер трансляции: Интеллектуальный помощник по трансляции может активировать аудио- и визуальные эффекты, чтобы улучшить игровой процесс или записать лучшие моменты для повторного просмотра. Inworld обрабатывает мультимодальные данные от создателя трансляции, чата и игры, чтобы выполнять эти действия продюсера через Streamlabs API, предоставляя создателю трансляции полный контроль над тем, как проходит трансляция.
- Технический помощник: Интеллектуальный помощник по потоковой передаче также помогает с настройкой Streamlabs Desktop и устранением неполадок. Inworld обрабатывает ввод данных от создателя для выполнения переходов между сценами или анимаций с помощью Streamlabs API, обеспечивая бесперебойную работу трансляции.
Создатели контента смогут выбирать из числа ассистентов, которые хорошо сочетаются с тоном их трансляции, независимо от того, нужна ли им ненавязчивая поддержка за кулисами или энергичный соведущий. Посмотрите короткое демонстрационное видео ниже.
Кайлан Гиббс, генеральный директор Inworld AI, заявил в своём заявлении:
Темпы инноваций в области генеративного ИИ просто невероятны, они выводят нас за пределы приложений первого поколения в новую эру сложного агентского поведения. Наше сотрудничество с Streamlabs и NVIDIA является примером того, как ИИ-агенты Inworld обеспечивают взаимодействие в реальном времени с учётом контекста. Что ещё более важно, это демонстрирует реальный потенциал ИИ для дополнения игр и развлечений, позволяя создателям повышать вовлечённость и радовать свою аудиторию.
Ашрей Урс, глава Streamlabs, добавил:
Мы надеемся, что благодаря этой революционной технологии создатели контента теперь смогут использовать ИИ так, чтобы это соответствовало их бренду и позволяло им расширять границы инноваций. Первый интеллектуальный помощник для стриминга — это ещё один шаг вперёд для этой сферы, дающий создателям контента возможность использовать эту технологию, чтобы сделать стриминг проще и увлекательнее, сохраняя при этом уровень аутентичности, необходимый для развития и роста их сообщества.
Интеллектуальный помощник для потоковой передачи будет доступен в магазине приложений Streamlabs в конце 2025 года.