nestormedia.com nestorexpo.com nestormarket.com nestorclub.com
на главнуюновостио проекте, реклама получить rss-ленту

NVIDIA Omniverse Avatar позволяет создавать в реальном времени умных помощников для общения

NVIDIA Omniverse Avatar позволяет создавать в реальном времени умных помощников для общения  Omniverse Avatar объединяет технологии компании в области речевого ИИ, компьютерного зрения, понимания естественного языка, систем рекомендаций и технологий моделирования. Аватары, созданные на платформе, представляют собой интерактивные персонажи с 3D графикой на базе трассировки лучей, которые могут видеть, говорить, разговаривать на самые разные темы и понимать высказанные намерения собеседника.

Omniverse Avatar открывает двери для создания умных помощников, которых легко настраивать практически для любой отрасли. Это может помочь в миллиардах ежедневных взаимодействий с клиентами - заказами в ресторане, банковскими операциями, назначением личных встреч, бронированием и т. д., что ведет к расширению деловых возможностей и повышению удовлетворенности клиентов.

«Наступило время умных виртуальных помощников, - говорит Дженсен Хуанг, основатель и генеральный директор NVIDIA. - Omniverse Avatar сочетает в себе основные технологии графики, моделирования и искусственного интеллекта от NVIDIA, позволяя создавать сложнейшие приложения, работающие в реальном времени. Сценарии использования готовых к сотрудничеству роботов и виртуальных помощников невероятны и перспективны».

Omniverse Avatar является частью NVIDIA Omniverse™, платформы для совместной работы в виртуальной среде и моделирования для рабочих процессов 3D. В своем выступлении на конференции NVIDIA GTC Дженсен поделился различными примерами Omniverse Avatar: Project Tokkio для поддержки клиентов, NVIDIA DRIVE Concierge для умных сервисов в транспорте и Project Maxine для видеоконференцсвязи.

На первой демонстрации Project Tokkio Дженсен показал коллег, беседующих на такие темы, как биология и изучение климата, с аватаром Toy Jensen, созданным как игрушечная копия его самого.

Во второй демонстрации Project Tokkio он показал аватар службы поддержки клиентов в ресторане, который мог видеть, разговаривать и понимать двух клиентов, когда они заказывали вегетарианские гамбургеры, картофель фри и напитки. Демонстрации проводились на базе программного обеспечения NVIDIA для ИИ и Megatron 530B - крупнейшей в мире настраиваемой языковой модели.

В демонстрации платформы DRIVE Concierge AI цифровой помощник на экране центральной приборной панели помогает водителю выбрать режим вождения, чтобы вовремя добраться до пункта назначения, а затем следует его запросу, чтобы установить напоминание, когда до цели останется менее 100 миль.

Дженсен также продемонстрировал способность Project Maxine добавлять современные видео и аудио функции в приложения для виртуального сотрудничества и создания контента. Во время видеовызова женщина находится в шумном кафе, но ее слышно четко, без фонового шума. Ее слова транскрибируются и переводятся в реальном времени на немецкий, французский и испанский языки с тем же голосом и интонацией.

Ключевые элементы Omniverse Avatar

Omniverse Avatar использует элементы речевого ИИ, компьютерного зрения, понимания естественного языка, механизмов рекомендаций, лицевой анимации и графики, получаемые с помощью следующих технологий:

  • Распознавание речи основано на пакете разработки программного обеспечения NVIDIA Riva, который распознает речь на нескольких языках. Riva также используется для генерации речевых ответов с использованием возможностей преобразования текста в речь.
  • Понимание естественного языка основано на большой языковой модели Megatron 530B, которая может распознавать, понимать и генерировать человеческий язык. Megatron 530B - это предварительно обученная модель, которая может при небольшом обучении или без него составлять полные предложения, отвечать на вопросы большой предметной области, резюмировать длинные сложные истории, переводить на другие языки и работать во многих других областях, для которых она специально не обучена.
  • Механизм рекомендаций основан на фреймворке NVIDIA Merlin™, который позволяет компаниям создавать рекомендательные системы глубокого обучения, способные обрабатывать большие объемы данных, чтобы делать более подходящие предложения.
  • Возможности восприятия базируются на фреймворке компьютерного зрения для видеоаналитики NVIDIA Metropolis.
  • В основе анимации аватара лежат технологии 2D и 3D лицевой анимации и рендеринга на основе искусственного интеллекта NVIDIA Video2Face и Audio2Face™.
Эти технологии объединены в приложение и обрабатываются в реальном времени с помощью фреймворка NVIDIA Unified Compute Framework. Упакованные в виде масштабируемых настраиваемых микросервисов эти навыки можно разворачивать и ими можно управлять в разных локациях с помощью NVIDIA Fleet Command™.

Зарегистрируйтесь бесплатно, чтобы узнать больше на конференции NVIDIA GTC, которая продолжится до 11 ноября. Смотрите выступление основателя и генерального директора NVIDIA Дженсена Хуанга 9 ноября в прямом эфире и в записи.





Ещё из раздела технологии

    NVIDIA продолжает совершенствовать платформу для геймеров и создателей контента, представив более 160 игровых и Studio ноутбуков GeForce, а также новые графические процессоры и технологии GeForce RTX для настольных ПК и ноутбуков. Компания также ...
    • авторы: Игорь Грень
    Новый мощный инструмент наблюдения принимается на вооружение в полицейских департаментах по всей территории Соединенных Штатов, но оборудование поставляется с одним необычным условием: сотрудники правоохранительных органов должны подписать ...
    • авторы: Faina
    Новаторская, чрезвычайно гибкая батарейка, которая больше напоминает обычный лист бумаги, совершенно не боится никаких деформаций, производится южнокорейской компанией Jenax. Впервые она была показана на выставке Wearable Expo в Японии. Этот ...
    • авторы: Антон Платов
    Нынешней осенью ведущие мировые IT-компании развили неожиданно высокую активность в рыночном сегменте облачных сервисов и технологий. Наибольшую активность здесь развили такие корпорации, как Dell, Microsoft, VМware, EMC и Cisco. А вот ...
    • авторы: Samael
    Еще один интересный стартап, о котором стоит рассказать в наших новостях, носит название Umbrela. Главная особенность проекта – по сути, это тоже «система умного дома», однако с тем отличием, что смонтировать ее пользователь сможет своими силами. ...
      Более трех лет Bosch совместно с другими представителями среднего и крупного бизнеса, а также исследовательскими институтами работали над проектом 5G NetMobil и наконец представили его первые результаты. Уже в ближайшем будущем водители смогут ...
      • авторы: Faina
      Этой новой камере аккумулятор не понадобится. Многим знакома такая ситуация. Только мы собрались запечатлеть невероятно красивый пейзаж или архитектурный шедевр, достаем из сумки камеру... но снимка не получается - батарея разряжена. Или во время ...
      • авторы: Faina
      Брюки превращаются... в элегантные шорты... Рюкзак на солнечных батареях превращается в столик и прекрасно оборудованное место для пикника. Холодная, отливающая серебристым металлом и пластиком рука высоких технологий достигла новых рубежей, ...
      • компании и бренды: NVIDIA
      Автономные беспилотные автомобили – это сложные компьютеры на колесах. Чтобы в будущем они автоматически справлялись с городским движением, им потребуется еще больше вычислительной мощности из‑за большого количества данных, поступающих с ...
        Bosch и Mercedes-Benz начали тестировать совместный проект для каршерингового сервиса с использованием беспилотных автомобилей S-класса. Пока услуга предоставляется на дорогах калифорнийского города Сан-Хосе в Силиконовой долине. Для безопасности на ...
          Сразу три новых продукта для вселенной Metaverse представила на международной выставке CES 2022 компания Shiftall Inc., принадлежащая Panasonic. Уже весной поклонники виртуальной реальности смогут приобрести полный комплект для полного погружения в ...
          • авторы: Faina
          В Нью-Йорке стреляют все чаще. В этом году уже зарегистрировано 185 случаев применения огнестрельного оружия на улицах города, это почти на 22 процента больше по сравнению с аналогичным периодом прошлого года. Природа наделила людей силой очень ...
          © 2024 PressEnter
                                                      

          Сайт работает на платформе Nestorclub.com