Google forsøger at genskabe fænomenet synæstesi ved hjælp af kunstig intelligens

Et nyt Google-projekt kaldet "Play a Kandinsky", der implementeres sammen med Georges Pompidou National Center for Art and Culture i Paris, har til formål at genskabe et så komplekst fænomen som synæstesi ved hjælp af kunstig intelligens. I en forenklet form er dette et fænomen, hvor en slags følelse genererer fornemmelser i en anden, for eksempel begynder et visuelt billede at "lyde". Kunstneren Wassily Kandinsky betragtes som en af ​​de vigtigste visionærer på dette område, hans arbejde er baseret på kombinationen af ​​billede og lyd.

Kun få mennesker kan forstå og føle synæstesi gennem personlig erfaring, så det er på mange måder et eksperiment at lære et neuralt netværk om teknologien til dets oprettelse. Der er ingen standarder og regler, du kan ikke tegne paralleller og afsløre mønstre, men det er netop, hvad et nyt neuralt netværk skal forsøge at gøre. Google Transformer-systemet blev taget som basis, i den uddannelse som musiker Antoine Bertin og NSDOS-gruppen deltog i.

Det neurale netværk analyserer de originale malerier af Kandinsky, såsom lærredet "Gul, Rød, Blå" i 1925, som kunstneren malede under indflydelse af synestesiens effekt. Og han forsøger at vælge lyden fra individuelle elementer, så seeren forvandles til en lytter og, som kunstneren havde til hensigt, hører musik i vævning af linjer og nuancer i billedet. Især den røde farve for Kandinsky lød som en violin, men den gule ekko med trompetens brøl, men hvad andre seere ser og hører, afhænger af AI.