Google sta cercando di ricreare il fenomeno della sinestesia utilizzando l'intelligenza artificiale

Un nuovo progetto di Google chiamato "Play a Kandinsky", che è in corso di attuazione in collaborazione con il Centro nazionale per l'arte e la cultura Georges Pompidou di Parigi, mira a ricreare un fenomeno così complesso come la sinestesia utilizzando l'intelligenza artificiale. In una forma semplificata, questo è un fenomeno in cui un tipo di sensazione genera sensazioni in un altro, ad esempio, un'immagine visiva inizia a "suonare". L'artista Wassily Kandinsky è considerato uno dei visionari più importanti in questo campo, il suo lavoro si basa sulla combinazione di immagine e suono.

Solo poche persone possono comprendere e sentire la sinestesia attraverso l'esperienza personale, quindi insegnare a una rete neurale la tecnologia della sua creazione è per molti versi un esperimento. Non ci sono standard e regole, non è possibile tracciare paralleli e rivelare schemi, ma questo è esattamente ciò che dovrebbe cercare di fare una nuova rete neurale. Come base è stato preso il sistema Google Transformer, alla cui formazione hanno preso parte il musicista Antoine Bertin e il gruppo NSDOS.

La rete neurale analizza i dipinti originali di Kandinsky, come la tela "Giallo, rosso, blu" del 1925, che l'artista dipinse sotto l'effetto della sinestesia. E cerca di selezionare il suono dei singoli elementi in modo che lo spettatore si trasformi in un ascoltatore e, come intendeva l'artista, ascolti la musica nell'intreccio di linee e sfumature dell'immagine. In particolare, il colore rosso per Kandinsky suonava come un violino, ma quello giallo echeggiava con il ruggito di una tromba, ma ciò che gli altri spettatori vedono e sentono dipende dall'IA.