Pinocchio

Il primo puppet AI al mondo

Un connubio perfetto tra avanguardia tecnologica e tradizione letteraria

Tipologia

Web App, Chatbot

Settore

AI

Anno

2024

La Sfida

Creare un’AI interattiva per adulti e bambini

Lux è una holding specializzata nell’organizzazione di eventi di caratura nazionale e internazionale. In occasione dell’esposizione “Pinocchio, Back to Wood”, favola dal vivo firmata This is Wonderland, ha lanciato ai team di Humans.tech e PiCampus una sfida ambiziosa: creare, in soli tre mesi, il primo puppet AI al mondo.

Di cosa si tratta? Una straordinaria installazione del burattino di legno, animato stavolta dall’Intelligenza Artificiale, in grado di sostenere conversazioni coerenti con i visitatori.

La Soluzione
L’elemento magico: l’AI

Nella storia senza tempo di Collodi, è Geppetto che dà vita a Pinocchio partendo da un modesto pezzo di legno, che misteriosamente si anima. Oggi è l’intelligenza artificiale a prendere il timone e sostituire l’artigiano.

Insieme a Pi Campus, attraverso tecniche avanzate di prompt engineering, abbiamo educato un modello linguistico di base, ChatGpt, per catturare l’essenza giocosa e curiosa di Pinocchio. La sua voce naturale e vivida è stata creata utilizzando tecniche di deep learning per il voice cloning, a partire dalla registrazione in studio di Flora Canto, attrice italiana.

Per rendere le conversazioni più coinvolgenti, abbiamo integrato il modello AI Whisper per il riconoscimento vocale automatico (ASR), assicurando risposte audio precise e coinvolgenti anche in contesti rumorosi. Abbiamo inoltre adattato il prompt e affidato all’algoritmo la decisione tra verità e menzogna, risparmiando preziosi secondi di reazione.

1. Traduzione multilingua instantanea

Pinocchio è accessibile e multilingua, offrendo traduzioni istantanee in diverse lingue, per una comunicazione senza barriere con bambini da tutto il mondo.

2. Risoluzione degli errori

Se il riconoscimento vocale non funziona o l’AI interpreta male la domanda, l’audio di risposta recita: “Oops, una farfalla mi ha distratto, potresti ripetere la domanda?”. Abbiamo appreso da Pinocchio che dagli errori si può sempre trarre insegnamento.

3. Riconoscimento dell’interlocutore

L’IA può distinguere se l’interlocutore è un bambino o una bambina (in base ad un input), ricordarne il nome e registrare le conversazioni per un breve lasso di tempo. Ogni volta che l’interlocutore cambia, l’IA riavvia la conversazione.

4. Coordinamento Interfaccia

Abbiamo fornito ai puppeteer un’interfaccia front-end (una chat che tiene traccia di ogni interazione) che permettesse di gestire la gestualità di Pinocchio (il burattino dal naso estensibile, frutto della genialità combinata di Imaginary Factory e Dari Automazioni).

Il risultato? I tempi di risposta si sono ristretti a 3 secondi, e abbiamo dato vita a un Pinocchio tanto realistico quanto innovativo, che stupisce e affascina il pubblico di tutte le età.

Impatto generato

50%

Riduzione tempo medio di risposta di Pinocchio

50%

interazioni con i visitatori solo nella prima settimana

+ Awareness

attorno all’evento e alla tecnologia innovativa impiegata

+ Retention

misurabile nella felicità negli occhi dei bambini e degli adulti

Team

Luca Denni

Product Lead

Marco Ciotoli

Director of Operation

Marco Iacobelli

Success Manager

Francesco Sangiovanni

Backend Developer

“È stato bello lavorare su questo prodotto innovativo, che ci ha spinto a pensare fuori dagli schemi. Ogni dettaglio, dalla velocità delle risposte alla gestione degli errori, dalle domande più imprevedibili fino alla coerenza del personaggio, ha richiesto una precisione meticolosa.

Pinocchio suscita curiosità e un pizzico di meraviglia per una tecnologia ancora da esplorare, dimostrata dallo stupore negli occhi di adulti e bambini. Successo che non sarebbe stato possibile senza la collaborazione con Lux Holding, veri e propri partner, pronti a discutere insieme idee e prospettive per un obiettivo comune.”

Luca Denni

Product Lead – Humans

Creare esperienze umane usando l’AI in modo creativo e divertente

Insieme a Lux Holding e PiCampus, abbiamo spostato i confini dell’immaginario all’interno di uno scenario interattivo, che stupisce e restituisce a ogni età la capacità di meravigliarsi.

Vi invitiamo a esplorare la mostra presso il suggestivo scenario del Giardino delle Cascate del Laghetto dell’Eur (Roma), e a porre a Pinocchio tutte le domande che volete!

Hai una sfida simile?

Scopri altri progetti