TEDGlobal 2012
Neil Harbisson: I listen to color
Neil Harbisson: Escolto el color
Filmed:
Readability: 3.8
2,994,716 views
L'artista Neil Harbisson va néixer sense la capacitat de veure els colors, però actualment, un dispositiu annex al seu cap converteix el color en freqüències audibles. En lloc de veure el món en escala de grisos, Harbisson pot sentir una simfonia de colors, i sí, fins i tot escoltar les cares i les pintures.
Neil Harbisson - Sonochromatic Cyborg Artist
Neil Harbisson's "eyeborg" allows him to hear colors, even those beyond the range of sight. Full bio
Neil Harbisson's "eyeborg" allows him to hear colors, even those beyond the range of sight. Full bio
Double-click the English transcript below to play the video.
00:16
Well, I was born with a rare visual condition
0
1012
3179
Vaig néixer
amb una condició visual estranya
amb una condició visual estranya
00:20
called achromatopsia, which is total color blindness,
1
4191
3713
anomenada acromatòpsia,
que anul·la el color,
que anul·la el color,
00:23
so I've never seen color,
2
7904
1870
així que mai he distingit els colors,
00:25
and I don't know what color looks like,
3
9774
2523
no sé com són,
00:28
because I come from a grayscale world.
4
12297
2975
perquè vinc d'un món
en escala de grisos.
en escala de grisos.
00:31
To me, the sky is always gray,
5
15272
2660
Per a mi, el cel és sempre gris,
00:33
flowers are always gray,
6
17932
1852
les flors, sempre grises,
00:35
and television is still in black and white.
7
19784
2202
i la meva televisió
encara és en blanc i negre.
encara és en blanc i negre.
00:37
But, since the age of 21,
8
21986
2293
Però des dels 21,
00:40
instead of seeing color, I can hear color.
9
24279
4129
en lloc de veure colors, els sento.
00:44
In 2003, I started a project
10
28408
2976
L'any 2003 vaig començar un projecte
00:47
with computer scientist Adam Montandon,
11
31384
2688
amb l'informàtic teòric Adam Montandon
00:49
and the result, with further collaborations
12
34072
3167
i el resultat, amb la col·laboració
00:53
with Peter Kese from Slovenia
13
37239
2848
de Peter Kese, d'Eslovènia,
00:55
and Matias Lizana from Barcelona,
14
40087
2033
i Matías Lizana, de Barcelona,
00:58
is this electronic eye.
15
42120
2365
és aquest ull electrònic.
01:00
It's a color sensor that detects
16
44485
2356
És un sensor de color que detecta
01:02
the color frequency in front of me — (Frequency sounds) —
17
46841
3583
la freqüència del color de davant meu
(So de freqüències)
(So de freqüències)
01:06
and sends this frequency to a chip installed
18
50424
2352
i envia aquesta freqüència a un xip
01:08
at the back of my head, and I hear the color in front of me
19
52776
2991
localitzat al darrere del meu cap,
i així puc sentir el color
i així puc sentir el color
01:11
through the bone, through bone conduction.
20
55767
2896
a través de la conducció òssia.
01:14
(Frequency sounds) So, for example, if I have, like —
21
58663
3508
(So de freqüències)
Així, per exemple, si tinc...
Així, per exemple, si tinc...
01:21
This is the sound of purple. (Frequency sounds)
22
65724
2967
Aquest és el so del morat.
(So de freqüències)
(So de freqüències)
01:24
For example, this is the sound of grass. (Frequency sounds)
23
68691
7418
Per exemple, aquest és
el so de la gespa. (So de freqüències)
el so de la gespa. (So de freqüències)
01:32
This is red, like TED. (Frequency sounds)
24
76109
2125
Aquest és el vermell, com TED.
(So de freqüències)
(So de freqüències)
01:34
This is the sound of a dirty sock. (Laughter)
25
78234
4369
Aquest és el so d'un mitjó brut.
(Riures)
(Riures)
01:38
Which is like yellow, this one.
26
82603
1877
Que és com el groc, aquest.
01:40
So I've been hearing color all the time for eight years,
27
84480
4057
Fa vuit anys que sento constantment
el so dels colors,
el so dels colors,
01:44
since 2004, so I find it completely normal now
28
88537
2635
des de 2004, per això
ara em sembla totalment normal
ara em sembla totalment normal
01:47
to hear color all the time.
29
91172
2479
sentir els colors tota l'estona.
01:49
At the start, though, I had to memorize the names you give
30
93651
4374
Al començament, però,
vaig haver de memoritzar els noms
vaig haver de memoritzar els noms
01:53
for each color, so I had to memorize the notes,
31
98025
2406
que doneu a cada color,
vaig haver de memoritzar les notes,
vaig haver de memoritzar les notes,
01:56
but after some time, all this information
32
100431
1936
però al cap d'un temps,
tota aquesta informació
tota aquesta informació
01:58
became a perception.
33
102367
1993
va convertir-se en una percepció.
02:00
I didn't have to think about the notes.
34
104360
1759
No havia de pensar en les notes.
02:02
And after some time, this perception became a feeling.
35
106119
2625
I al cap d'un temps, aquesta percepció
va convertir-se en una sensació.
va convertir-se en una sensació.
02:04
I started to have favorite colors,
36
108744
2006
Vaig començar a tenir colors preferits,
02:06
and I started to dream in colors.
37
110750
1774
i a somiar en color.
02:08
So, when I started to dream in color is when I felt
38
112524
4275
Quan vaig començar a somiar en color,
és quan vaig sentir
és quan vaig sentir
02:12
that the software and my brain had united,
39
116799
2887
que el programari i el meu cervell
s'havien unit,
s'havien unit,
02:15
because in my dreams, it was my brain creating
40
119686
2956
perquè, en somnis,
era el meu cervell qui creava
era el meu cervell qui creava
02:18
electronic sounds. It wasn't the software,
41
122642
2361
sons electrònics.
No era pas el programari,
No era pas el programari,
02:20
so that's when I started to feel like a cyborg.
42
125003
3519
de manera que vaig començar
a sentir-me com un ciborg.
a sentir-me com un ciborg.
02:24
It's when I started to feel that the cybernetic device
43
128522
3050
Llavors vaig començar a notar que
el dispositiu cibernètic
el dispositiu cibernètic
02:27
was no longer a device.
44
131572
2190
ja no era un dispositiu.
02:29
It had become a part of my body,
45
133762
2415
Havia esdevingut part del meu cos,
02:32
an extension of my senses,
46
136177
2465
una ampliació dels meus sentits,
02:34
and after some time, it even became a part
47
138642
2626
i al cap d'un temps,
fins i tot havia esdevingut
fins i tot havia esdevingut
02:37
of my official image.
48
141268
3527
part de la meva imatge oficial.
02:40
This is my passport from 2004.
49
144795
2346
Aquest és el meu passaport del 2004.
02:43
You're not allowed to appear on U.K. passports
50
147141
3085
En els passaports del Regne Unit
no està permès
no està permès
02:46
with electronic equipment, but I insisted
51
150226
2812
aparèixer amb equips electrònics,
però a l'oficina de passaports
però a l'oficina de passaports
02:48
to the passport office that what they were seeing
52
153038
2401
vaig insistir en què allò que veien
02:51
was actually a new part of my body,
53
155439
2504
en realitat era una nova part
del meu cos,
del meu cos,
02:53
an extension of my brain, and they finally accepted me
54
157943
3520
una ampliació del meu cervell,
i finalment van acceptar
i finalment van acceptar
02:57
to appear with the passport photo.
55
161463
2511
que aparegués a la foto del passaport.
02:59
So, life has changed dramatically since I hear color,
56
163974
3457
La vida m'ha canviat dràsticament
des que sento els colors,
des que sento els colors,
03:03
because color is almost everywhere,
57
167431
2594
perquè els colors
són quasi a tot arreu,
són quasi a tot arreu,
03:05
so the biggest change for example is
58
170025
2877
el canvi més gran és, per exemple,
03:08
going to an art gallery, I can listen to a Picasso,
59
172902
4538
anar a una galeria d'art
i ser capaç de sentir un Picasso,
i ser capaç de sentir un Picasso,
03:13
for example. So it's like I'm going to a concert hall,
60
177440
2854
És com si anés a una sala de concerts,
03:16
because I can listen to the paintings.
61
180294
2211
perquè puc sentir les pintures.
03:18
And supermarkets, I find this is very shocking,
62
182505
2461
I els supermercats,
em semblen molt impactants.
em semblen molt impactants.
03:20
it's very, very attractive to walk along a supermarket.
63
184966
2950
Passejar per un supermercat
és molt atractiu.
és molt atractiu.
03:23
It's like going to a nightclub.
64
187916
1488
És com anar a una sala de festes.
03:25
It's full of different melodies. (Laughter) Yeah.
65
189404
3256
És ple de melodies diferents.
(Riures) Oi, i tant.
(Riures) Oi, i tant.
03:28
Especially the aisle with cleaning products.
66
192660
2075
Concretament el passadís
amb els productes de neteja.
amb els productes de neteja.
03:30
It's just fabulous. (Laughter)
67
194735
3351
Són simplement increïbles.
(Riures)
(Riures)
03:33
Also, the way I dress has changed.
68
198086
2472
També ha canviat
la manera com vesteixo.
la manera com vesteixo.
03:36
Before, I used to dress in a way that it looked good.
69
200558
2408
Abans, intentava vestir-me
d'una manera agradable a la vista.
d'una manera agradable a la vista.
03:38
Now I dress in a way that it sounds good. (Laughter)
70
202966
4577
Ara, em vesteixo
d'una manera agradable a l'oïda.
d'una manera agradable a l'oïda.
03:43
(Applause)
71
207543
5131
(Aplaudiments)
03:48
So today I'm dressed in C major,
72
212674
2509
Avui vaig vestit en do major,
03:51
so it's quite a happy chord. (Laughter)
73
215183
3309
que és un acord bastant alegre.
(Riures)
(Riures)
03:54
If I had to go to a funeral, though,
74
218492
1874
Si hagués d'anar a un enterrament,
03:56
I would dress in B minor, which would be
75
220366
2567
em vestiria en si menor,
que vindria a ser
que vindria a ser
03:58
turquoise, purple and orange. (Laughter)
76
222933
8759
turquesa, morat i taronja. (Riures)
04:07
Also, food, the way I look at food has changed,
77
231692
4345
La manera en què miro el menjar
també ha canviat,
també ha canviat,
04:11
because now I can display the food on a plate,
78
236037
3456
perquè ara puc disposar
el menjar en un plat,
el menjar en un plat,
04:15
so I can eat my favorite song. (Laughter)
79
239493
2952
de manera que em pugui menjar
la meva cançó preferida. (Riures)
la meva cançó preferida. (Riures)
04:18
So depending on how I display it,
80
242445
1229
Per tant, depenent de com la disposo,
04:19
I can hear and I can compose music with food.
81
243674
2750
puc escoltar i composar música
amb el menjar.
amb el menjar.
04:22
So imagine a restaurant where we can have, like,
82
246424
2725
Imagineu-vos un restaurant
on tinguessin plats com
on tinguessin plats com
04:25
Lady Gaga salads as starters. (Laughter) I mean,
83
249149
2984
amanides i entrants de Lady Gaga.
(Riures)
(Riures)
04:28
this would get teenagers to eat their vegetables, probably.
84
252133
3017
Probablement això faria que
els adolescents s'acabessin la verdura.
els adolescents s'acabessin la verdura.
04:31
And also, some Rachmaninov piano concertos
85
255150
3439
Alguns concerts per a piano
de Rakhmaninov
de Rakhmaninov
04:34
as main dishes, and some Bjork or Madonna desserts,
86
258589
3234
com a plats principals
i algunes postres de Björk o Madonna.
i algunes postres de Björk o Madonna.
04:37
that would be a very exciting restaurant
87
261823
3109
Seria un restaurant molt estimulant
04:40
where you can actually eat songs.
88
264932
2760
en el que podries menjar cançons.
04:43
Also, the way I perceive beauty has changed,
89
267692
4450
La manera en què percebia la bellesa
també ha canviat,
també ha canviat,
04:48
because when I look at someone, I hear their face,
90
272142
4680
ja que quan miro algú,
sento la seva cara,
sento la seva cara,
04:52
so someone might look very beautiful but sound terrible.
91
276822
5002
així, algú pot semblar molt atractiu
però sonar horrible.
però sonar horrible.
04:57
(Laughter) And it might happen the opposite,
92
281824
1761
(Riures) I també pot passar
el cas contrari.
el cas contrari.
04:59
the other way around. So I really enjoy creating, like,
93
283585
2248
M'encanta crear coses com
05:01
sound portraits of people.
94
285833
1729
retrats sonors de gent.
05:03
Instead of drawing someone's face, like drawing the shape,
95
287562
3640
En lloc de dibuixar la cara d'algú,
dibuixar-ne la forma,
dibuixar-ne la forma,
05:07
I point at them with the eye and I write down
96
291202
2431
l'observo amb l'ull i apunto
05:09
the different notes I hear, and then I create sound portraits.
97
293633
3271
les diferents notes que sento,
i llavors creo els retrats sonors.
i llavors creo els retrats sonors.
05:12
Here's some faces.
98
296904
1737
Aquí tenim algunes cares.
05:14
(Musical chords)
99
298641
14527
(Acords musicals)
05:29
Yeah, Nicole Kidman sounds good. (Laughter)
100
313168
3433
Sí, Nicole Kidman sona bé. (Riures)
05:32
Some people, I would never relate, but they sound similar.
101
316601
3049
Algunes persones que mai relacionaria
sonen de manera semblant.
sonen de manera semblant.
05:35
Prince Charles has some similarities with Nicole Kidman.
102
319650
2798
El Príncep Carles de Gal·les
sona similar a Nicole Kidman.
sona similar a Nicole Kidman.
05:38
They have similar sound of eyes.
103
322448
2137
Tenen un so d'ulls similar.
05:40
So you relate people that you wouldn't relate,
104
324585
2048
Llavors relaciones persones
que abans no relacionaves,
que abans no relacionaves,
05:42
and you can actually also create concerts
105
326633
3513
pots crear concerts
05:46
by looking at the audience faces.
106
330146
2640
mirant la cara del públic.
05:48
So I connect the eye, and then I play the audience's faces.
107
332786
3096
Encenc l'ull
i interpreto les cares del públic.
i interpreto les cares del públic.
05:51
The good thing about this is,
108
335882
1504
Això té de bo que,
05:53
if the concert doesn't sound good, it's their fault.
109
337386
2967
si el concert no sona bé,
és culpa seva.
és culpa seva.
05:56
It's not my fault, because — (Laughter)
110
340353
2271
No és culpa meva. (Riures)
05:58
And so another thing that happens is that
111
342624
4307
Una altra cosa que em passa és que
06:02
I started having this secondary effect
112
346931
2877
he començat a experimentar
un efecte secundari,
un efecte secundari,
06:05
that normal sounds started to become color.
113
349808
3330
els sons normals
han començat a convertir-se en colors.
han començat a convertir-se en colors.
06:09
I heard a telephone tone, and it felt green
114
353138
3761
Sento el so del telèfon i veig el verd,
06:12
because it sounded just like the color green.
115
356899
2326
perquè sona igual que el color verd.
06:15
The BBC beeps, they sound turquoise,
116
359225
3298
Els "pips" que emet la BBC
sonen turquesa
sonen turquesa
06:18
and listening to Mozart became a yellow experience,
117
362523
3127
i escoltar Mozart
es torna una experiència groga.
es torna una experiència groga.
06:21
so I started to paint music and paint people's voices,
118
365650
4760
Per això he començat a pintar
la música i la veu de la gent,
la música i la veu de la gent,
06:26
because people's voices have frequencies
119
370410
1943
perquè la veu de la gent té freqüències
06:28
that I relate to color.
120
372353
1543
que relaciono amb el color.
06:29
And here's some music translated into color.
121
373896
5119
Aquí tenim alguna música
traduïda al color.
traduïda al color.
06:34
For example, Mozart, "Queen of the Night," looks like this.
122
379015
5200
Per exemple, Mozart,
"La reina de la nit", sona així.
"La reina de la nit", sona així.
06:40
(Music) Very yellow and very colorful,
123
384215
1812
(Ària per a soprano)
molt groga i colorida,
molt groga i colorida,
06:41
because there's many different frequencies.
124
386027
2190
perquè té moltes freqüències diferents.
06:44
(Music)
125
388217
2910
(Continua l'ària per a soprano)
06:48
And this is a completely different song.
126
392143
2314
I aquesta és una cançó
completament diferent.
completament diferent.
06:50
(Music) It's Justin Bieber's "Baby." (Laughter)
127
394457
3931
(Música pop) És "Baby",
de Justin Bieber. (Riures)
de Justin Bieber. (Riures)
06:54
(Music)
128
398388
1731
(Música pop)
06:56
It is very pink and very yellow.
129
400119
3570
És molt rosa i groga.
06:59
So, also voices, I can transform speeches into color,
130
403689
7167
I també les veus,
puc transformar els discursos en color,
puc transformar els discursos en color,
07:06
for example, these are two very well-known speeches.
131
410856
3544
per exemple, aquests són
dos discursos molt famosos.
dos discursos molt famosos.
07:10
One of them is Martin Luther King's "I Have A Dream,"
132
414400
3737
Un és "Tinc un somni",
de Martin Luther King,
de Martin Luther King,
07:14
and the other one is Hitler.
133
418137
1452
i l'altre és de Hitler.
07:15
And I like to exhibit these paintings in the exhibition halls
134
419589
3476
M'agrada exposar aquestes pintures
a les sales d'exposicions
a les sales d'exposicions
07:18
without labels, and then I ask people,
135
423065
2576
sense etiquetes i preguntar a la gent:
07:21
"Which one do you prefer?"
136
425641
1847
"Quina t'agrada més?"
07:23
And most people change their preference
137
427488
2265
I la majoria canvia d'opinió
07:25
when I tell them that the one on the left is Hitler
138
429753
2911
quan li dic
que la de l'esquerra és de Hitler
que la de l'esquerra és de Hitler
07:28
and the one on the right is Martin Luther King.
139
432664
3120
i la de la dreta,
de Martin Luther King.
de Martin Luther King.
07:31
So I got to a point when I was able to perceive 360 colors,
140
435784
5739
Vaig arribar a un punt en què
era capaç de percebre 360 colors,
era capaç de percebre 360 colors,
07:37
just like human vision.
141
441523
1585
com la visió humana.
07:39
I was able to differentiate all the degrees of the color wheel.
142
443108
3595
Podia diferenciar
tots els graus del cercle cromàtic.
tots els graus del cercle cromàtic.
07:42
But then, I just thought that
143
446703
2082
Però llavors, vaig pensar que
07:44
this human vision wasn't good enough.
144
448785
3239
amb aquesta visió humana
no n'hi havia prou.
no n'hi havia prou.
07:47
There's many, many more colors around us
145
452024
2211
Hi ha molts,
moltíssim més colors al nostre voltant
moltíssim més colors al nostre voltant
07:50
that we cannot perceive,
146
454235
1837
que no distingim,
07:51
but that electronic eyes can perceive.
147
456072
1756
però els ulls electrònics sí.
07:53
So I decided to continue extending my color senses,
148
457828
3729
Així que vaig decidir continuar ampliant
el meu sentit dels colors,
el meu sentit dels colors,
07:57
and I added infrared and I added ultraviolet
149
461557
4250
i he afegit ultrarojos i ultraviolats
08:01
to the color-to-sound scale, so now I can hear colors
150
465807
3358
a l'escala de color-so,
de manera que puc sentir colors
de manera que puc sentir colors
08:05
that the human eye cannot perceive.
151
469165
2224
que l'ull humà no pot percebre.
08:07
For example, perceiving infrared is good because you can
152
471389
3447
Per exemple, distingir els infrarojos
està bé, perquè pots
està bé, perquè pots
08:10
actually detect if there's movement detectors in a room.
153
474836
4068
saber si hi ha
sensors de moviment a l'habitació.
sensors de moviment a l'habitació.
08:14
I can hear if someone points at me with a remote control.
154
478904
3453
Puc sentir si algú em senyala
amb un comandament a distància.
amb un comandament a distància.
08:18
And the good thing about perceiving ultraviolet is that
155
482357
3150
I el millor de percebre
l'ultraviolat és que
l'ultraviolat és que
08:21
you can hear if it's a good day or a bad day to sunbathe,
156
485507
4965
pots sentir si és un dia bo o dolent
per prendre el sol,
per prendre el sol,
08:26
because ultraviolet is a dangerous color,
157
490472
2157
perquè l'ultraviolat
és un color perillós,
és un color perillós,
08:28
a color that can actually kill us, so I think we should all have this wish
158
492629
3984
un color que pot matar-nos,
per això crec que tots
per això crec que tots
08:32
to perceive things that we cannot perceive.
159
496613
2961
hauríem de desitjar
percebre coses que no percebem.
percebre coses que no percebem.
08:35
That's why, two years ago,
160
499574
1735
Per aquest motiu, fa dos anys
08:37
I created the Cyborg Foundation,
161
501309
1681
vaig crear la Cyborg Foundation,
08:38
which is a foundation that tries to help people
162
502990
2442
que és una fundació
que intenta ajudar la gent
que intenta ajudar la gent
08:41
become a cyborg, tries to encourage people
163
505432
2697
a convertir-se en un ciborg,
intenta animar-la
intenta animar-la
08:44
to extend their senses
164
508129
1377
a ampliar els seus sentits
08:45
by using technology as part of the body.
165
509506
3071
utilitzant la tecnologia
com a part del cos.
com a part del cos.
08:48
We should all think that knowledge comes from our senses,
166
512577
3903
Si pensem que el coneixement
prové del nostres sentits
prové del nostres sentits
08:52
so if we extend our senses,
167
516480
1976
i els ampliem,
08:54
we will consequently extend our knowledge.
168
518456
3088
com a conseqüència,
hauríem d'ampliar el nostre coneixement.
hauríem d'ampliar el nostre coneixement.
08:57
I think life will be much more exciting
169
521544
2793
Crec que la vida
seria molt més emocionant
seria molt més emocionant
09:00
when we stop creating applications for mobile phones
170
524337
3224
si deixéssim de crear
aplicacions per al mòbil
aplicacions per al mòbil
09:03
and we start creating applications for our own body.
171
527561
3401
i comencéssim a crear
aplicacions per al nostre cos.
aplicacions per al nostre cos.
09:06
I think this will be a big, big change
172
530962
1816
Penso que seria un gran,
grandíssim canvi
grandíssim canvi
09:08
that we will see during this century.
173
532778
2078
que veurem durant aquest segle.
09:10
So I do encourage you all to think about which senses
174
534856
3915
Per això us animo
a pensar sobre quins sentits
a pensar sobre quins sentits
09:14
you'd like to extend.
175
538771
1419
us agradaria ampliar.
09:16
I would encourage you to become a cyborg.
176
540190
3173
M'agradaria animar-vos
a convertir-vos en cíborgs.
a convertir-vos en cíborgs.
09:19
You won't be alone. Thank you. (Applause)
177
543363
4648
No estareu sols. Gràcies.
(Aplaudiments)
(Aplaudiments)
09:23
(Applause)
178
548011
6520
(Aplaudiments)
ABOUT THE SPEAKER
Neil Harbisson - Sonochromatic Cyborg ArtistNeil Harbisson's "eyeborg" allows him to hear colors, even those beyond the range of sight.
Why you should listen
Born with the inability to see color, Neil Harbisson wears a prosthetic device — he calls it an "eyeborg" — that allows him to hear the spectrum, even those colors beyond the range of human sight. His unique experience of color informs his artwork — which, until he met cyberneticist Adam Montandon at a college lecture, was strictly black-and-white. By working with Montandon, and later with Peter Kese, Harbisson helped design a lightweight eyepiece that he wears on his forehead that transposes the light frequencies of color hues into sound frequencies.
Harbisson's artwork blurs the boundaries between sight and sound. In his Sound Portraits series, he listens to the colors of faces to create a microtonal chord. In the City Colours project, he expresses the capital cities of Europe in two colors (Monaco is azure and salmon pink; Bratislava yellow and turquoise).
Neil Harbisson | Speaker | TED.com