TEDGlobal 2012
Neil Harbisson: I listen to color
Neil Harbisson: Ascolto i colori
Filmed:
Readability: 3.8
2,994,716 views
L'artista Neil Harbisson è nato senza poter vedere i colori, ma oggi un apparecchio attaccato alla testa trasforma i colori in frequenze udibili. Invece di vedere un mondo in scala di grigi, Harbisson può sentire una sinfonia di colori -- e sì, anche sentire visi e dipinti.
Neil Harbisson - Sonochromatic Cyborg Artist
Neil Harbisson's "eyeborg" allows him to hear colors, even those beyond the range of sight. Full bio
Neil Harbisson's "eyeborg" allows him to hear colors, even those beyond the range of sight. Full bio
Double-click the English transcript below to play the video.
00:16
Well, I was born with a rare visual condition
0
1012
3179
Sono nato con una rara condizione visiva,
00:20
called achromatopsia, which is total color blindness,
1
4191
3713
l'acromatopsia, ossia l'incapacità totale di vedere i colori,
00:23
so I've never seen color,
2
7904
1870
quindi non ho mai visto i colori,
00:25
and I don't know what color looks like,
3
9774
2523
e non ho idea di che aspetto abbiano,
00:28
because I come from a grayscale world.
4
12297
2975
perché vivo in un mondo in scala di grigi.
00:31
To me, the sky is always gray,
5
15272
2660
Per me, il cielo è sempre grigio,
00:33
flowers are always gray,
6
17932
1852
i fiori sono sempre grigi,
00:35
and television is still in black and white.
7
19784
2202
e la televisione è ancora in bianco e nero.
00:37
But, since the age of 21,
8
21986
2293
Ma da quando ho 21 anni,
00:40
instead of seeing color, I can hear color.
9
24279
4129
invece di vedere i colori, posso "sentire" i colori.
00:44
In 2003, I started a project
10
28408
2976
Nel 2003 ho dato il via a un progetto
00:47
with computer scientist Adam Montandon,
11
31384
2688
con l'informatico Adam Montandon,
00:49
and the result, with further collaborations
12
34072
3167
e il risultato, con l'ulteriore collaborazione
00:53
with Peter Kese from Slovenia
13
37239
2848
di Peter Kese dalla Slovenia
00:55
and Matias Lizana from Barcelona,
14
40087
2033
e Matias Lizana di Barcellona,
00:58
is this electronic eye.
15
42120
2365
è questo occhio elettronico.
01:00
It's a color sensor that detects
16
44485
2356
È un sensore di colore che rileva
01:02
the color frequency in front of me — (Frequency sounds) —
17
46841
3583
la frequenza di colore davanti a me -- (Suoni di frequenze) --
01:06
and sends this frequency to a chip installed
18
50424
2352
e invia questa frequenza a un chip installato
01:08
at the back of my head, and I hear the color in front of me
19
52776
2991
dietro la mia testa così sento i colori che ho di fronte
01:11
through the bone, through bone conduction.
20
55767
2896
attraverso le ossa, tramite la conduzione ossea.
01:14
(Frequency sounds) So, for example, if I have, like —
21
58663
3508
(Suoni di frequenze) Per esempio, se di fronte ho --
01:21
This is the sound of purple. (Frequency sounds)
22
65724
2967
Questo è il suono del viola. (Suoni di frequenze)
01:24
For example, this is the sound of grass. (Frequency sounds)
23
68691
7418
E questo è il suono dell'erba. (Suoni di frequenze)
01:32
This is red, like TED. (Frequency sounds)
24
76109
2125
Questo è il rosso, come TED. (Suoni di frequenze)
01:34
This is the sound of a dirty sock. (Laughter)
25
78234
4369
Questo è il suono di un calzino sporco. (Risate)
01:38
Which is like yellow, this one.
26
82603
1877
Ed è come il giallo.
01:40
So I've been hearing color all the time for eight years,
27
84480
4057
È da 8 anni che sento i colori,
01:44
since 2004, so I find it completely normal now
28
88537
2635
dal 2004, e trovo assolutamente naturale
01:47
to hear color all the time.
29
91172
2479
sentire i colori in continuazione.
01:49
At the start, though, I had to memorize the names you give
30
93651
4374
All'inizio ho dovuto memorizzare i nomi che date
01:53
for each color, so I had to memorize the notes,
31
98025
2406
a ogni colore, quindi ho dovuto memorizzare le note,
01:56
but after some time, all this information
32
100431
1936
ma dopo un po', tutte queste informazioni
01:58
became a perception.
33
102367
1993
sono diventate percezione.
02:00
I didn't have to think about the notes.
34
104360
1759
Non dovevo pensare alle note.
02:02
And after some time, this perception became a feeling.
35
106119
2625
Poi questa percezione è diventata una sensazione.
02:04
I started to have favorite colors,
36
108744
2006
Ho cominciato ad avere dei colori preferiti,
02:06
and I started to dream in colors.
37
110750
1774
e ho cominciato a sognare a colori.
02:08
So, when I started to dream in color is when I felt
38
112524
4275
Ho cominciato a sognare a colori quando ho sentito
02:12
that the software and my brain had united,
39
116799
2887
che il software e il mio cervello si erano uniti,
02:15
because in my dreams, it was my brain creating
40
119686
2956
perché nei miei sogni era il mio cervello che creava
02:18
electronic sounds. It wasn't the software,
41
122642
2361
suoni elettronici. Non era il software,
02:20
so that's when I started to feel like a cyborg.
42
125003
3519
ed è allora che ho cominciato a sentirmi un cyborg.
02:24
It's when I started to feel that the cybernetic device
43
128522
3050
È stato quando ho cominciato a sentire che l'apparecchio cibernetico
02:27
was no longer a device.
44
131572
2190
non era più solo un apparecchio.
02:29
It had become a part of my body,
45
133762
2415
Era diventato parte del mio corpo,
02:32
an extension of my senses,
46
136177
2465
un'estensione dei miei sensi,
02:34
and after some time, it even became a part
47
138642
2626
e dopo un po', è anche diventato
02:37
of my official image.
48
141268
3527
parte della mia immagine ufficiale.
02:40
This is my passport from 2004.
49
144795
2346
Questo è il mio passaporto del 2004.
02:43
You're not allowed to appear on U.K. passports
50
147141
3085
Nei passaporti britannici non sono ammesse foto
02:46
with electronic equipment, but I insisted
51
150226
2812
con apparecchiature elettroniche, ma ho insistito
02:48
to the passport office that what they were seeing
52
153038
2401
all'ufficio passaporti che quello che vedevano
02:51
was actually a new part of my body,
53
155439
2504
era di fatto una nuova parte del mio corpo,
02:53
an extension of my brain, and they finally accepted me
54
157943
3520
un'estensione del mio cervello, e alla fine hanno accettato
02:57
to appear with the passport photo.
55
161463
2511
che comparissi con quella foto sul passaporto.
02:59
So, life has changed dramatically since I hear color,
56
163974
3457
La mia vita è cambiata radicalmente da allora,
03:03
because color is almost everywhere,
57
167431
2594
perché i colori sono dappertutto,
03:05
so the biggest change for example is
58
170025
2877
per esempio il più grande cambiamento
03:08
going to an art gallery, I can listen to a Picasso,
59
172902
4538
è stato andare in una galleria d'arte e ascoltare Picasso,
03:13
for example. So it's like I'm going to a concert hall,
60
177440
2854
È come andare a un concerto,
03:16
because I can listen to the paintings.
61
180294
2211
perché posso ascoltare i dipinti.
03:18
And supermarkets, I find this is very shocking,
62
182505
2461
I supermercati, per me, sono sconvolgenti,
03:20
it's very, very attractive to walk along a supermarket.
63
184966
2950
è davvero affascinante andare in giro in un supermercato.
03:23
It's like going to a nightclub.
64
187916
1488
È come andare in discoteca.
03:25
It's full of different melodies. (Laughter) Yeah.
65
189404
3256
È pieno di melodie diverse. (Risate) Sì!
03:28
Especially the aisle with cleaning products.
66
192660
2075
Soprattutto il reparto detersivi.
03:30
It's just fabulous. (Laughter)
67
194735
3351
È fantastico. (Risate)
03:33
Also, the way I dress has changed.
68
198086
2472
Anche il modo in cui mi vesto è cambiato.
03:36
Before, I used to dress in a way that it looked good.
69
200558
2408
Prima mi vestivo per "stare" bene,
03:38
Now I dress in a way that it sounds good. (Laughter)
70
202966
4577
Ora mi vesto per "suonare" bene. (Risate)
03:43
(Applause)
71
207543
5131
(Applausi)
03:48
So today I'm dressed in C major,
72
212674
2509
Oggi sono vestito in Do maggiore,
03:51
so it's quite a happy chord. (Laughter)
73
215183
3309
è un accordo abbastanza felice. (Risate)
03:54
If I had to go to a funeral, though,
74
218492
1874
Se dovessi andare a un funerale, invece,
03:56
I would dress in B minor, which would be
75
220366
2567
mi vestirei in Si minore, che sarebbe
03:58
turquoise, purple and orange. (Laughter)
76
222933
8759
turchese, viola e arancione. (Risate)
04:07
Also, food, the way I look at food has changed,
77
231692
4345
Anche il modo in cui vedo il cibo è cambiato,
04:11
because now I can display the food on a plate,
78
236037
3456
perché ora vedo il cibo che ho nel piatto
04:15
so I can eat my favorite song. (Laughter)
79
239493
2952
e posso mangiare la mia canzone preferita. (Risate)
04:18
So depending on how I display it,
80
242445
1229
A seconda di come lo vedo,
04:19
I can hear and I can compose music with food.
81
243674
2750
posso sentire e posso comporre musica con il cibo.
04:22
So imagine a restaurant where we can have, like,
82
246424
2725
Immaginate un ristorante in cui si possa ordinare
04:25
Lady Gaga salads as starters. (Laughter) I mean,
83
249149
2984
un'insalata Lady Gaga come antipasto. (Risate)
04:28
this would get teenagers to eat their vegetables, probably.
84
252133
3017
Forse si convincerebbero gli adolescenti a mangiare verdura.
04:31
And also, some Rachmaninov piano concertos
85
255150
3439
Oppure, un concerto per pianoforte di Rachmaninov
04:34
as main dishes, and some Bjork or Madonna desserts,
86
258589
3234
come piatto principale e Bjork o Madonna per dolce,
04:37
that would be a very exciting restaurant
87
261823
3109
sarebbero un menu fantastico in un ristorante
04:40
where you can actually eat songs.
88
264932
2760
in cui si possono mangiare canzoni per davvero.
04:43
Also, the way I perceive beauty has changed,
89
267692
4450
Anche il modo in cui percepisco la bellezza è cambiato,
04:48
because when I look at someone, I hear their face,
90
272142
4680
perché quando guardo qualcuno, ne sento il viso,
04:52
so someone might look very beautiful but sound terrible.
91
276822
5002
e qualcuno potrebbe sembrare molto bello ma suonare malissimo.
04:57
(Laughter) And it might happen the opposite,
92
281824
1761
(Risate) O potrebbe succedere il contrario.
04:59
the other way around. So I really enjoy creating, like,
93
283585
2248
Mi piace molto creare
05:01
sound portraits of people.
94
285833
1729
ritratti sonori delle persone.
05:03
Instead of drawing someone's face, like drawing the shape,
95
287562
3640
Anziché ritrarre il viso di una persona, disegnarne la forma,
05:07
I point at them with the eye and I write down
96
291202
2431
li guardo con gli occhi e scrivo
05:09
the different notes I hear, and then I create sound portraits.
97
293633
3271
le note che sento e poi creo ritratti sonori.
05:12
Here's some faces.
98
296904
1737
Ecco alcuni visi.
05:14
(Musical chords)
99
298641
14527
(Accordi musicali)
05:29
Yeah, Nicole Kidman sounds good. (Laughter)
100
313168
3433
Sì, Nicole Kidman suona bene. (Risate)
05:32
Some people, I would never relate, but they sound similar.
101
316601
3049
Alcune persone che mai collegherei hanno suoni simili.
05:35
Prince Charles has some similarities with Nicole Kidman.
102
319650
2798
Il Principe Carlo ha qualche somiglianza con Nicole Kidman.
05:38
They have similar sound of eyes.
103
322448
2137
Hanno un suono degli occhi simile.
05:40
So you relate people that you wouldn't relate,
104
324585
2048
Si collegano persone che altrimenti non si collegherebbero,
05:42
and you can actually also create concerts
105
326633
3513
e si possono anche creare concerti
05:46
by looking at the audience faces.
106
330146
2640
guardando le facce di un pubblico.
05:48
So I connect the eye, and then I play the audience's faces.
107
332786
3096
Collego l'occhio e poi suono le facce del pubblico.
05:51
The good thing about this is,
108
335882
1504
La cosa bella è che,
05:53
if the concert doesn't sound good, it's their fault.
109
337386
2967
se il concerto non è bello, è colpa loro.
05:56
It's not my fault, because — (Laughter)
110
340353
2271
Non è colpa mia, perché -- (Risate)
05:58
And so another thing that happens is that
111
342624
4307
Un'altra cosa che mi capita
06:02
I started having this secondary effect
112
346931
2877
è che comincio ad avere un effetto secondario
06:05
that normal sounds started to become color.
113
349808
3330
e cioè i suoni normali stanno diventando colore.
06:09
I heard a telephone tone, and it felt green
114
353138
3761
Ho sentito il telefono squillare e ho sentito il verde
06:12
because it sounded just like the color green.
115
356899
2326
perché ha lo stesso suono del colore verde.
06:15
The BBC beeps, they sound turquoise,
116
359225
3298
I rintocchi della BBC sono turchesi,
06:18
and listening to Mozart became a yellow experience,
117
362523
3127
e ascoltare Mozart è diventata un'esperienza gialla,
06:21
so I started to paint music and paint people's voices,
118
365650
4760
così ho cominciato a dipingere la musica e le voci delle persone,
06:26
because people's voices have frequencies
119
370410
1943
perché le voci delle persone hanno delle frequenze
06:28
that I relate to color.
120
372353
1543
che collego ai colori.
06:29
And here's some music translated into color.
121
373896
5119
Ed ecco della musica trasformata in colore.
06:34
For example, Mozart, "Queen of the Night," looks like this.
122
379015
5200
Per esempio, "Regina della Notte" di Mozart è così.
06:40
(Music) Very yellow and very colorful,
123
384215
1812
(Musica) Molto gialla e colorata,
06:41
because there's many different frequencies.
124
386027
2190
perché ci sono molte frequenze diverse.
06:44
(Music)
125
388217
2910
(Musica)
06:48
And this is a completely different song.
126
392143
2314
Questa è una canzone completamente diversa.
06:50
(Music) It's Justin Bieber's "Baby." (Laughter)
127
394457
3931
(Musica) È "Baby" di Justin Bieber. (Risate)
06:54
(Music)
128
398388
1731
(Musica)
06:56
It is very pink and very yellow.
129
400119
3570
È molto rosa e molto gialla.
06:59
So, also voices, I can transform speeches into color,
130
403689
7167
E poi le voci, posso trasformare i discorsi in colore,
07:06
for example, these are two very well-known speeches.
131
410856
3544
per esempio, questi sono due discorsi molto famosi.
07:10
One of them is Martin Luther King's "I Have A Dream,"
132
414400
3737
Uno è quello di Martin Luther King "I Have A Dream",
07:14
and the other one is Hitler.
133
418137
1452
e l'altro è di Hitler.
07:15
And I like to exhibit these paintings in the exhibition halls
134
419589
3476
Mi piace esporre questi dipinti nelle mostre
07:18
without labels, and then I ask people,
135
423065
2576
senza targhetta, e poi chiedo alla gente,
07:21
"Which one do you prefer?"
136
425641
1847
"Quale preferisci?"
07:23
And most people change their preference
137
427488
2265
Molti cambiano opinione
07:25
when I tell them that the one on the left is Hitler
138
429753
2911
quando dico loro che quello sulla sinistra è Hitler
07:28
and the one on the right is Martin Luther King.
139
432664
3120
e quello sulla destra è Martin Luther King.
07:31
So I got to a point when I was able to perceive 360 colors,
140
435784
5739
Sono arrivato a percepire 360 colori,
07:37
just like human vision.
141
441523
1585
come nella visione umana.
07:39
I was able to differentiate all the degrees of the color wheel.
142
443108
3595
Ero in grado di differenziare tutti i gradi del cerchio cromatico.
07:42
But then, I just thought that
143
446703
2082
Ma poi ho pensato
07:44
this human vision wasn't good enough.
144
448785
3239
che questa visione umana non era sufficiente.
07:47
There's many, many more colors around us
145
452024
2211
Ci sono molti più colori intorno a noi
07:50
that we cannot perceive,
146
454235
1837
che non riusciamo a percepire,
07:51
but that electronic eyes can perceive.
147
456072
1756
ma che l'occhio elettronico può percepire.
07:53
So I decided to continue extending my color senses,
148
457828
3729
Così ho deciso di continuare ad ampliare la percezione dei colori,
07:57
and I added infrared and I added ultraviolet
149
461557
4250
e ho aggiunto gli infrarossi e gli ultravioletti
08:01
to the color-to-sound scale, so now I can hear colors
150
465807
3358
alla scala colore-suono, così ora sento colori
08:05
that the human eye cannot perceive.
151
469165
2224
che l'occhio umano non percepisce.
08:07
For example, perceiving infrared is good because you can
152
471389
3447
Per esempio, percepire gli infrarossi è utile perché si possono
08:10
actually detect if there's movement detectors in a room.
153
474836
4068
identificare i rilevatori di movimento in una stanza.
08:14
I can hear if someone points at me with a remote control.
154
478904
3453
Posso sentire se qualcuno mi punta addosso un telecomando.
08:18
And the good thing about perceiving ultraviolet is that
155
482357
3150
E il bello della percezione degli ultravioletti è che
08:21
you can hear if it's a good day or a bad day to sunbathe,
156
485507
4965
si può sentire se è una buona giornata per prendere il sole,
08:26
because ultraviolet is a dangerous color,
157
490472
2157
perché gli ultravioletti sono un colore pericoloso,
08:28
a color that can actually kill us, so I think we should all have this wish
158
492629
3984
un colore che può ucciderci, quindi credo che dovremmo tutti
08:32
to perceive things that we cannot perceive.
159
496613
2961
percepire le cose che non riusciamo a percepire.
08:35
That's why, two years ago,
160
499574
1735
Ecco perché, due anni fa,
08:37
I created the Cyborg Foundation,
161
501309
1681
ho creato la Cyborg Foundation,
08:38
which is a foundation that tries to help people
162
502990
2442
che è una fondazione che cerca di aiutare le persone
08:41
become a cyborg, tries to encourage people
163
505432
2697
a diventare dei cyborg e le incoraggia
08:44
to extend their senses
164
508129
1377
ad ampliare i propri sensi
08:45
by using technology as part of the body.
165
509506
3071
utilizzando la tecnologia come parte del corpo.
08:48
We should all think that knowledge comes from our senses,
166
512577
3903
Dovremmo tutti pensare che la conoscenza viene dai nostri sensi,
08:52
so if we extend our senses,
167
516480
1976
quindi se ampliamo i nostri sensi,
08:54
we will consequently extend our knowledge.
168
518456
3088
amplieremo di conseguenza le nostre conoscenze.
08:57
I think life will be much more exciting
169
521544
2793
Credo che la vita sarà molto più emozionante
09:00
when we stop creating applications for mobile phones
170
524337
3224
se smettiamo di creare applicazioni per cellulari
09:03
and we start creating applications for our own body.
171
527561
3401
e iniziamo a creare applicazioni per il nostro corpo.
09:06
I think this will be a big, big change
172
530962
1816
Credo che sarà un grande cambiamento
09:08
that we will see during this century.
173
532778
2078
quello che vedremo in questo secolo.
09:10
So I do encourage you all to think about which senses
174
534856
3915
Quindi vi incoraggio tutti a pensare a quali sensi
09:14
you'd like to extend.
175
538771
1419
vorreste ampliare.
09:16
I would encourage you to become a cyborg.
176
540190
3173
Vi incoraggio a diventare dei cyborg.
09:19
You won't be alone. Thank you. (Applause)
177
543363
4648
Non sarete soli. Grazie. (Applausi)
09:23
(Applause)
178
548011
6520
(Applausi)
ABOUT THE SPEAKER
Neil Harbisson - Sonochromatic Cyborg ArtistNeil Harbisson's "eyeborg" allows him to hear colors, even those beyond the range of sight.
Why you should listen
Born with the inability to see color, Neil Harbisson wears a prosthetic device — he calls it an "eyeborg" — that allows him to hear the spectrum, even those colors beyond the range of human sight. His unique experience of color informs his artwork — which, until he met cyberneticist Adam Montandon at a college lecture, was strictly black-and-white. By working with Montandon, and later with Peter Kese, Harbisson helped design a lightweight eyepiece that he wears on his forehead that transposes the light frequencies of color hues into sound frequencies.
Harbisson's artwork blurs the boundaries between sight and sound. In his Sound Portraits series, he listens to the colors of faces to create a microtonal chord. In the City Colours project, he expresses the capital cities of Europe in two colors (Monaco is azure and salmon pink; Bratislava yellow and turquoise).
Neil Harbisson | Speaker | TED.com