Noticias

Nov 28, 2023

Stanford y Brilliant Labs crean gafas inteligentes ChatGPT

Las gafas inteligentes rizzGPT fusionan contenido aumentado con IA generativa

Las gafas inteligentes rizzGPT fusionan contenido aumentado con tecnologías de IA generativa

Última edición: 5 de junio de 2023

Demonio Cureton

Estudiantes investigadores de la Universidad de Stanford han creado un par de gafas inteligentes de realidad aumentada (AR) capaces de aprovechar el chatbot ChatGPT-4 de OpenAI.

El complemento agregado permite a los estudiantes hablar directamente con ChatGPT a través de lentes inteligentes, fusionando inteligencia artificial generativa (AI) con superposiciones AR.

Di adiós a las citas incómodas y las entrevistas de trabajo ☹️

creamos rizzGPT: carisma como servicio en tiempo real (CaaS)

escucha tu conversación y te dice exactamente qué decir a continuación 😱

construido con GPT-4, Whisper y las gafas Monocle AR

con @C51Alix @varunshenoy_ pic.twitter.com/HycQGGXT6N

—Bryan Hau-Ping Chiang (@bryanhpchiang) 26 de marzo de 2023

Bryan Hau-Ping Chiang, Alix Cui, Varun Shenoy y Adriano Hernández , entre otros, lideró el experimento creando RizzGPT. La herramienta combina AI, AR y la herramienta de detección de voz Whisper de OpenAI para proporcionar respuestas para las conversaciones. Los estudiantes generaron respuestas con lentes AR y monóculos.

Chiang tuiteó

"Dígale adiós a las citas incómodas y las entrevistas de trabajo. Hicimos rizzGPT: Carisma como servicio (CaaS) en tiempo real. Escucha su conversación y le dice exactamente qué decir a continuación. Creado con GPT-4, Whisiper y Monocle AR anteojos"

Chiang también elogió a Brilliant Labs por su solución de RA, que podría "ajustarse a cualquier par de anteojos [y] tiene una cámara, un micrófono y una pantalla de alta resolución".

Explicó cómo el programa de IA generativa aprovechó las capacidades de percepción multimodal mediante el uso de audio, texto e imágenes para "ayudar a la IA a comprender lo que sucede en su vida".

Chiang agregó: "Este contexto es clave para que la IA brinde soporte [hiperpersonalizado]".

olvidé etiquetar a @Adriano34554795, el mismísimo memelord

gracias a @brilliantlabsAR por proporcionar el dispositivo Monocle AR: súper fácil de colocar en cualquier par de anteojos + tiene una cámara, un micrófono y una pantalla de alta resolución

este proyecto quizás sea mejor presentado por @varunshenoy_😎 + 🧐+ 🤖 +… pic.twitter.com/97rVVnVC8I

—Bryan Hau-Ping Chiang (@bryanhpchiang) 26 de marzo de 2023

El equipo de investigación de Stanford afirmó que su Charisma-as-a-Service (CaaS) tenía numerosos casos de uso. Estos podrían cubrir diversas aplicaciones, como ayudar a las personas con ansiedad social, entrevistas de trabajo, hablar en público y otras.

La herramienta utiliza las herramientas de reconocimiento de voz de Whisper y responde a las conversaciones según el contexto y la semántica. Brilliant Labs, creadores de tecnologías de monóculos AR, también han contribuido a la investigación.

La noticia llega cuando varias empresas integran variantes de ChatGPT en su familia de productos para optimizar las experiencias de los usuarios.

ChatGPT utiliza el aprendizaje automático (ML) para agregar datos de Internet, generando contenido como imágenes, sonido, documentos y textos de chat.

La solución de OpenAI proviene de la familia de aplicaciones de IA Generative Pretrained Transformer (GPT). Numerosas empresas como NVIDIA, Meta, Microsoft, Google, Unity y muchas otras han incorporado versiones de GPT en sus propias soluciones para aumentar drásticamente el desarrollo de contenido.

Otras empresas, como Moth and Flame, ARuVR, VirtualSpeech y otras, han utilizado interfaces de IA generativa para ofrecer módulos de realidad virtual (VR) sobre la marcha.