Новости

Nov 28, 2023

Стэнфорд и Brilliant Labs создают умные очки ChatGPT

Умные очки rizzGPT объединяют дополненный контент с генеративным искусственным интеллектом

Умные очки rizzGPT объединяют дополненный контент с генеративными технологиями искусственного интеллекта.

Последнее редактирование: 5 июня 2023 г.

Демонд Кюртон

Студенты-исследователи из Стэнфордского университета создали пару умных очков дополненной реальности (AR), способных использовать чат-бот OpenAI ChatGPT-4.

Добавленный плагин позволяет студентам напрямую общаться с ChatGPT через умные очки, объединяя генеративный искусственный интеллект (ИИ) с наложениями AR.

попрощайтесь с неловкими свиданиями и собеседованиями ☹️

мы создали rizzGPT — «Харизма как услуга» (CaaS) в реальном времени.

он слушает ваш разговор и точно подсказывает, что сказать дальше 😱

построен с использованием GPT-4, Whisper и очков Monocle AR.

с @C51Alix @varunshenoy_ pic.twitter.com/HycQGGXT6N

– Брайан Хау-Пинг Чан (@bryanhpchiang), 26 марта 2023 г.

Брайан Хау-Пин Чан, Аликс Куи, Варун Шеной и Адриано Эрнандес , среди прочих, возглавил эксперимент, создав RizzGPT. Инструмент сочетает в себе AI, AR и инструмент обнаружения речи Whisper от OpenAI, чтобы предоставлять ответы на разговоры. Студенты давали ответы с помощью очков и моноклей AR.

Чан написал в Твиттере

«Попрощайтесь с неловкими свиданиями и собеседованиями. Мы создали rizzGPT — харизму как услугу в реальном времени (CaaS). Она слушает ваш разговор и точно подсказывает, что сказать дальше. Создано с использованием GPT-4, Whisiper и Monocle AR. очки"

Чан также похвалил Brilliant Labs за их AR-решение, которое «можно прикрепить к любой паре очков и имеет камеру, микрофон и дисплей с высоким разрешением».

Он объяснил, как программа генеративного искусственного интеллекта использует возможности мультимодального восприятия, используя аудио, текст и изображения, чтобы «помочь искусственному интеллекту понять, что происходит в вашей жизни».

Чан добавил: «Этот контекст является ключевым для ИИ, чтобы обеспечить [гиперперсонализированную] поддержку».

забыл отметить @Adriano34554795, самого мемлорда

Спасибо @brilliantlabsAR за предоставленный гаджет Monocle AR — его очень легко прикрепить к любой паре очков + есть камера, микрофон и дисплей с высоким разрешением.

пожалуй, лучше всего этот проект выразил @varunshenoy_😎 + 🧐+ 🤖 +… pic.twitter.com/97rVVnVC8I

– Брайан Хау-Пинг Чан (@bryanhpchiang), 26 марта 2023 г.

Исследовательская группа Стэнфорда заявила, что их харизма как услуга (CaaS) имеет множество вариантов использования. Они могут охватывать различные приложения, такие как помощь людям с социальной тревогой, собеседование, публичные выступления и другие.

Инструмент использует инструменты распознавания речи Whisper и реагирует на разговоры на основе контекста и семантики. Brilliant Labs, создатели технологий AR-моноклей, также внесли свой вклад в исследование.

Эта новость появилась в связи с тем, что несколько компаний интегрировали варианты ChatGPT в свои продукты, чтобы оптимизировать взаимодействие с пользователем.

ChatGPT использует машинное обучение (ML) для агрегирования данных из Интернета, генерируя такой контент, как изображения, звук, документы и тексты чата.

Решение OpenAI основано на семействе приложений искусственного интеллекта Generative Pretrained Transformer (GPT). Многие компании, такие как NVIDIA, Meta, Microsoft, Google, Unity и многие другие, включили версии GPT в свои собственные решения, чтобы значительно ускорить разработку контента.

Другие компании, такие как Moth and Flame, ARuVR, VirtualSpeech и другие, использовали интерфейсы генеративного искусственного интеллекта для оперативной доставки модулей виртуальной реальности (VR).