Notizia

Nov 28, 2023

Stanford e Brilliant Labs creano gli occhiali intelligenti ChatGPT

The rizzGPT smart glasses merge augmented content with generative AI

Gli occhiali intelligenti rizzGPT uniscono contenuti aumentati con tecnologie di intelligenza artificiale generativa

Ultima modifica: 5 giugno 2023

Demond Cureton

Studenti ricercatori della Stanford University hanno creato un paio di occhiali intelligenti per realtà aumentata (AR) in grado di sfruttare il chatbot ChatGPT-4 di OpenAI.

Il plug-in aggiunto consente agli studenti di parlare direttamente a ChatGPT tramite occhiali intelligenti, unendo l'intelligenza artificiale generativa (AI) con sovrapposizioni AR.

dì addio agli appuntamenti imbarazzanti e ai colloqui di lavoro ☹️

abbiamo realizzato rizzGPT: Charisma as a Service (CaaS) in tempo reale

ascolta la tua conversazione e ti dice esattamente cosa dire dopo 😱

costruito utilizzando gli occhiali GPT-4, Whisper e Monocle AR

con @C51Alix @varunshenoy_ pic.twitter.com/HycQGGXT6N

– Bryan Hau-Ping Chiang (@bryanhpchiang) 26 marzo 2023

Bryan Hau-Ping Chiang, Alix Cui, Varun Shenoy e Adriano Hernandez , tra gli altri, ha guidato l'esperimento creando RizzGPT. Lo strumento combina AI, AR e lo strumento di rilevamento vocale Whisper di OpenAI per fornire risposte alle conversazioni. Gli studenti hanno generato risposte con occhiali AR e monocoli.

Chiang ha twittato

"Dì addio alle date imbarazzanti e ai colloqui di lavoro. Abbiamo creato rizzGPT: Charisma as a Service (CaaS) in tempo reale. Ascolta la tua conversazione e ti dice esattamente cosa dire dopo. Costruito utilizzando GPT-4, Whisiper e Monocle AR occhiali"

Chiang ha anche lodato Brilliant Labs per la sua soluzione AR, che potrebbe "agganciarsi a qualsiasi paio di occhiali [e] ha una fotocamera, un microfono e un display ad alta risoluzione".

Ha spiegato come il programma di intelligenza artificiale generativa ha sfruttato le capacità di percezione multimodale utilizzando audio, testo e immagini per "aiutare l'intelligenza artificiale a capire cosa sta succedendo nella tua vita".

Chiang ha aggiunto: "Questo contesto è fondamentale affinché l'intelligenza artificiale possa fornire supporto [iper-personalizzato]".

ho dimenticato di taggare @Adriano34554795, lo stesso memelord

grazie a @brilliantlabsAR per aver fornito il gadget Monocle AR: facilissimo da agganciare a qualsiasi paio di occhiali e dotato di fotocamera, microfono e display ad alta risoluzione

questo progetto è forse meglio presentato da @varunshenoy_😎 + 🧐+ 🤖 +… pic.twitter.com/97rVVnVC8I

– Bryan Hau-Ping Chiang (@bryanhpchiang) 26 marzo 2023

Il gruppo di ricerca di Stanford ha affermato che il loro Charisma-as-a-Service (CaaS) aveva numerosi casi d'uso. Questi potrebbero coprire diverse applicazioni come aiutare le persone con ansia sociale, colloqui di lavoro, parlare in pubblico e altro.

Lo strumento utilizza gli strumenti di riconoscimento vocale di Whisper e risponde alle conversazioni in base al contesto e alla semantica. Alla ricerca hanno contribuito anche Brilliant Labs, creatori di tecnologie AR monoculari.

La notizia arriva quando diverse aziende integrano varianti ChatGPT nella loro famiglia di prodotti per semplificare l'esperienza degli utenti.

ChatGPT utilizza l'apprendimento automatico (ML) per aggregare dati da Internet, generando contenuti come immagini, suoni, documenti e testi di chat.

La soluzione di OpenAI proviene dalla famiglia di app AI Generative Pretrained Transformer (GPT). Numerose aziende come NVIDIA, Meta, Microsoft, Google, Unity e molte altre hanno incorporato versioni di GPT nelle proprie soluzioni per aumentare notevolmente lo sviluppo dei contenuti.

Altre aziende come Moth and Flame, ARuVR, VirtualSpeech e altre hanno utilizzato interfacce di intelligenza artificiale generativa per fornire moduli di realtà virtuale (VR) al volo.