TEDGlobal 2012
Neil Harbisson: I listen to color
Neil Harbisson: Eu oiço a cores
Filmed:
Readability: 3.8
2,994,716 views
O artista Neil Harbisson nasceu a ver apenas a preto e branco, mas, hoje, um aparelho preso à sua cabeça transforma as cores em frequências audíveis. Em vez de ver o mundo numa escala de cinzentos, Harbisson consegue "ouvir" uma sinfonia de cores -- sim, e até mesmo ouvir caras e quadros.
Neil Harbisson - Sonochromatic Cyborg Artist
Neil Harbisson's "eyeborg" allows him to hear colors, even those beyond the range of sight. Full bio
Neil Harbisson's "eyeborg" allows him to hear colors, even those beyond the range of sight. Full bio
Double-click the English transcript below to play the video.
00:16
Well, I was born with a rare visual condition
0
1012
3179
Bem, eu nasci com uma doença rara
da visão
da visão
00:20
called achromatopsia, which is total color blindness,
1
4191
3713
chamada acromatopsia, que é
o daltonismo total.
o daltonismo total.
00:23
so I've never seen color,
2
7904
1870
Portanto, nunca vi a cores,
00:25
and I don't know what color looks like,
3
9774
2523
e não sei qual é o aspecto das cores,
00:28
because I come from a grayscale world.
4
12297
2975
porque venho de um mundo em
escala de cinzentos.
escala de cinzentos.
00:31
To me, the sky is always gray,
5
15272
2660
Para mim, o céu é sempre cinzento,
00:33
flowers are always gray,
6
17932
1852
as flores são sempre cinzentas,
00:35
and television is still in black and white.
7
19784
2202
e a televisão ainda é a preto e branco.
00:37
But, since the age of 21,
8
21986
2293
Mas, desde os 21 anos,
00:40
instead of seeing color, I can hear color.
9
24279
4129
em vez de ver a cores, eu oiço a cores.
00:44
In 2003, I started a project
10
28408
2976
Em 2003, comecei um projecto
00:47
with computer scientist Adam Montandon,
11
31384
2688
com o cientista computacional
Adam Montandon,
Adam Montandon,
00:49
and the result, with further collaborations
12
34072
3167
e o resultado, com colaborações adicionais
00:53
with Peter Kese from Slovenia
13
37239
2848
de Peter Kese, da Eslovénia,
00:55
and Matias Lizana from Barcelona,
14
40087
2033
e Matias Lizana, de Barcelona,
00:58
is this electronic eye.
15
42120
2365
é este olho electrónico.
01:00
It's a color sensor that detects
16
44485
2356
É um sensor de cores que detecta
01:02
the color frequency in front of me — (Frequency sounds) —
17
46841
3583
a frequência da cor à minha frente
-- (sons) --
-- (sons) --
01:06
and sends this frequency to a chip installed
18
50424
2352
e envia essa frequência para
um chip instalado
um chip instalado
01:08
at the back of my head, and I hear the color in front of me
19
52776
2991
na parte de trás da minha cabeça,
e eu oiço a cor à minha frente
e eu oiço a cor à minha frente
01:11
through the bone, through bone conduction.
20
55767
2896
através dos ossos, através de condução óssea.
01:14
(Frequency sounds) So, for example, if I have, like —
21
58663
3508
(Sons) Então, se eu tiver, por exemplo, isto --
01:21
This is the sound of purple. (Frequency sounds)
22
65724
2967
este é o som do violeta. (sons da frequência)
01:24
For example, this is the sound of grass. (Frequency sounds)
23
68691
7418
Por exemplo, este é o som das ervas.
(sons da frequência)
(sons da frequência)
01:32
This is red, like TED. (Frequency sounds)
24
76109
2125
Isto é vermelho, como "TED".
(sons da frequência)
(sons da frequência)
01:34
This is the sound of a dirty sock. (Laughter)
25
78234
4369
Este é o som de uma meia suja. (Risos)
01:38
Which is like yellow, this one.
26
82603
1877
Que é como o amarelo, esta.
01:40
So I've been hearing color all the time for eight years,
27
84480
4057
Portanto, tenho andado sempre a ouvir cores,
há oito anos, desde 2004.
há oito anos, desde 2004.
01:44
since 2004, so I find it completely normal now
28
88537
2635
Por isso, para mim agora,
é completamente natural
é completamente natural
01:47
to hear color all the time.
29
91172
2479
ouvir cores o tempo todo.
01:49
At the start, though, I had to memorize the names you give
30
93651
4374
No início, contudo, tive de memorizar
os nomes que vocês dão
os nomes que vocês dão
01:53
for each color, so I had to memorize the notes,
31
98025
2406
a cada cor, tive de memorizar as notas,
01:56
but after some time, all this information
32
100431
1936
mas passado algum tempo,
toda esta informação
toda esta informação
01:58
became a perception.
33
102367
1993
se tornou uma percepção.
02:00
I didn't have to think about the notes.
34
104360
1759
Não tinha de pensar nas notas.
02:02
And after some time, this perception became a feeling.
35
106119
2625
E, passado algum tempo, esta percepção
tornou-se uma sensação.
tornou-se uma sensação.
02:04
I started to have favorite colors,
36
108744
2006
Comecei a ter cores preferidas,
02:06
and I started to dream in colors.
37
110750
1774
e comecei a sonhar a cores.
02:08
So, when I started to dream in color is when I felt
38
112524
4275
Foi quando eu comecei a sonhar a cores
que senti
que senti
02:12
that the software and my brain had united,
39
116799
2887
que o software e o meu cérebro
se tinham unido,
se tinham unido,
02:15
because in my dreams, it was my brain creating
40
119686
2956
porque, nos meus sonhos,
era o meu cérebro que criava
era o meu cérebro que criava
02:18
electronic sounds. It wasn't the software,
41
122642
2361
sons electrónicos. Não era o software,
02:20
so that's when I started to feel like a cyborg.
42
125003
3519
e foi então que me comecei a sentir
como um ciborgue.
como um ciborgue.
02:24
It's when I started to feel that the cybernetic device
43
128522
3050
Foi quando eu comecei a sentir que
o aparelho cibernético
o aparelho cibernético
02:27
was no longer a device.
44
131572
2190
já não era um aparelho.
02:29
It had become a part of my body,
45
133762
2415
Tinha-se tornado parte do meu corpo,
02:32
an extension of my senses,
46
136177
2465
uma extensão dos meus sentidos,
02:34
and after some time, it even became a part
47
138642
2626
e, passado algum tempo, até se tornou parte
02:37
of my official image.
48
141268
3527
da minha imagem oficial.
02:40
This is my passport from 2004.
49
144795
2346
Este é o meu passaporte de 2004.
02:43
You're not allowed to appear on U.K. passports
50
147141
3085
Não é permitido aparecer nos passaportes
do Reino Unido
do Reino Unido
02:46
with electronic equipment, but I insisted
51
150226
2812
com equipamento electrónico,
mas eu insisti
mas eu insisti
02:48
to the passport office that what they were seeing
52
153038
2401
com os serviços que emitem os passaportes,
que o que estavam a ver
que o que estavam a ver
02:51
was actually a new part of my body,
53
155439
2504
era, na verdade, uma nova parte do meu corpo,
02:53
an extension of my brain, and they finally accepted me
54
157943
3520
uma extensão do meu cérebro,
e finalmente aceitaram
e finalmente aceitaram
02:57
to appear with the passport photo.
55
161463
2511
que eu aparecesse assim
na foto do passaporte.
na foto do passaporte.
02:59
So, life has changed dramatically since I hear color,
56
163974
3457
A minha vida mudou drasticamente
desde que eu oiço a cores,
desde que eu oiço a cores,
03:03
because color is almost everywhere,
57
167431
2594
porque a cor está praticamente
em todo o lado.
em todo o lado.
03:05
so the biggest change for example is
58
170025
2877
A maior diferença é, por exemplo,
03:08
going to an art gallery, I can listen to a Picasso,
59
172902
4538
ir a uma galeria de arte e poder
ouvir um Picasso.
ouvir um Picasso.
03:13
for example. So it's like I'm going to a concert hall,
60
177440
2854
É como se estivesse num concerto,
03:16
because I can listen to the paintings.
61
180294
2211
porque posso ouvir os quadros.
03:18
And supermarkets, I find this is very shocking,
62
182505
2461
E nos supermercados, acho isto
muito chocante,
muito chocante,
03:20
it's very, very attractive to walk along a supermarket.
63
184966
2950
mas é muito, muito atraente passear
num supermercado.
num supermercado.
03:23
It's like going to a nightclub.
64
187916
1488
É como ir a uma discoteca.
03:25
It's full of different melodies. (Laughter) Yeah.
65
189404
3256
Está cheio de diferentes melodias.
(Risos) Sim.
(Risos) Sim.
03:28
Especially the aisle with cleaning products.
66
192660
2075
Especialmente o corredor dos
produtos de limpeza.
produtos de limpeza.
03:30
It's just fabulous. (Laughter)
67
194735
3351
É simplesmente fabuloso. (Risos)
03:33
Also, the way I dress has changed.
68
198086
2472
Também a maneira como me visto mudou.
03:36
Before, I used to dress in a way that it looked good.
69
200558
2408
Antes, costumava vestir-me de maneira
a que parecesse bem.
a que parecesse bem.
03:38
Now I dress in a way that it sounds good. (Laughter)
70
202966
4577
Agora visto-me de maneira a que soe bem!
(Risos)
(Risos)
03:43
(Applause)
71
207543
5131
(Aplausos)
03:48
So today I'm dressed in C major,
72
212674
2509
Portanto, hoje estou vestido em dó maior,
03:51
so it's quite a happy chord. (Laughter)
73
215183
3309
que é um acorde muito feliz. (Risos)
03:54
If I had to go to a funeral, though,
74
218492
1874
Se eu tivesse de ir a um funeral, contudo,
03:56
I would dress in B minor, which would be
75
220366
2567
vestir-me-ia em si menor, que seria
03:58
turquoise, purple and orange. (Laughter)
76
222933
8759
turquesa, violeta e laranja. (Risos)
04:07
Also, food, the way I look at food has changed,
77
231692
4345
Também a comida, a maneira como olho
para a comida mudou,
para a comida mudou,
04:11
because now I can display the food on a plate,
78
236037
3456
porque agora posso distribuir a comida no prato
04:15
so I can eat my favorite song. (Laughter)
79
239493
2952
de maneira a comer a minha canção preferida.
(Risos)
(Risos)
04:18
So depending on how I display it,
80
242445
1229
Dependendo de como a distribuo,
04:19
I can hear and I can compose music with food.
81
243674
2750
posso ouvir e compôr música com comida.
04:22
So imagine a restaurant where we can have, like,
82
246424
2725
Imaginem, então, um restaurante
onde podem ter, por exemplo,
onde podem ter, por exemplo,
04:25
Lady Gaga salads as starters. (Laughter) I mean,
83
249149
2984
saladas Lady Gaga para entrada. (Risos)
04:28
this would get teenagers to eat their vegetables, probably.
84
252133
3017
Talvez isto fizesse os adolescentes
comer legumes!
comer legumes!
04:31
And also, some Rachmaninov piano concertos
85
255150
3439
E também alguns concertos de piano
de Rachmaninov,
de Rachmaninov,
04:34
as main dishes, and some Bjork or Madonna desserts,
86
258589
3234
como pratos principais, e algumas
sobremesas Madonna ou Björk.
sobremesas Madonna ou Björk.
04:37
that would be a very exciting restaurant
87
261823
3109
Seria um restaurante muito empolgante,
04:40
where you can actually eat songs.
88
264932
2760
onde na verdade podemos comer canções.
04:43
Also, the way I perceive beauty has changed,
89
267692
4450
Também a maneira como entendo
a beleza mudou,
a beleza mudou,
04:48
because when I look at someone, I hear their face,
90
272142
4680
porque quando olho para alguém,
oiço a sua cara.
oiço a sua cara.
04:52
so someone might look very beautiful but sound terrible.
91
276822
5002
Portanto, uma pessoa pode parecer lindíssima
e soar terrível.
e soar terrível.
04:57
(Laughter) And it might happen the opposite,
92
281824
1761
(Risos) E pode acontecer o contrário,
04:59
the other way around. So I really enjoy creating, like,
93
283585
2248
vice-versa. Adoro realmente criar, por exemplo,
05:01
sound portraits of people.
94
285833
1729
retratos sonoros das pessoas.
05:03
Instead of drawing someone's face, like drawing the shape,
95
287562
3640
Em vez de desenhar a cara de alguém,
de desenhar a forma,
de desenhar a forma,
05:07
I point at them with the eye and I write down
96
291202
2431
aponto-lhes o olho e escrevo
05:09
the different notes I hear, and then I create sound portraits.
97
293633
3271
as diferentes notas que oiço, e depois
crio retratos sonoros.
crio retratos sonoros.
05:12
Here's some faces.
98
296904
1737
Aqui estão algumas caras.
05:14
(Musical chords)
99
298641
14527
(Acordes musicais)
05:29
Yeah, Nicole Kidman sounds good. (Laughter)
100
313168
3433
É verdade, a Nicole Kidman soa bem.
(Risos)
(Risos)
05:32
Some people, I would never relate, but they sound similar.
101
316601
3049
Algumas pessoas, que eu nunca relacionaria,
soam de forma parecida.
soam de forma parecida.
05:35
Prince Charles has some similarities with Nicole Kidman.
102
319650
2798
O Príncipe Carlos tem algumas semelhanças
com a Nicole Kidman.
com a Nicole Kidman.
05:38
They have similar sound of eyes.
103
322448
2137
Os sons dos olhos são semelhantes.
05:40
So you relate people that you wouldn't relate,
104
324585
2048
Relacionamos então pessoas que nunca
relacionaríamos,
relacionaríamos,
05:42
and you can actually also create concerts
105
326633
3513
e também podemos mesmo criar concertos
05:46
by looking at the audience faces.
106
330146
2640
olhando para as caras do público.
05:48
So I connect the eye, and then I play the audience's faces.
107
332786
3096
Conecto o olho, e depois toco as caras do público.
05:51
The good thing about this is,
108
335882
1504
A coisa boa nisto é que,
05:53
if the concert doesn't sound good, it's their fault.
109
337386
2967
se o concerto não soar bem, é culpa deles.
05:56
It's not my fault, because — (Laughter)
110
340353
2271
Não é culpa minha, porque... (Risos)
05:58
And so another thing that happens is that
111
342624
4307
E uma outra coisa que acontece é que
06:02
I started having this secondary effect
112
346931
2877
comecei a ter este efeito secundário
06:05
that normal sounds started to become color.
113
349808
3330
de os sons normais começarem a tornar-se cores.
06:09
I heard a telephone tone, and it felt green
114
353138
3761
Ouvi o som de um telefone, e pareceu-me verde
06:12
because it sounded just like the color green.
115
356899
2326
porque soava exactamente igual à cor verde.
06:15
The BBC beeps, they sound turquoise,
116
359225
3298
Os bipes da BBC soam turquesa,
06:18
and listening to Mozart became a yellow experience,
117
362523
3127
e ouvir Mozart tornou-se uma experiência amarela,
06:21
so I started to paint music and paint people's voices,
118
365650
4760
por isso comecei a pintar música e
a pintar vozes de pessoas,
a pintar vozes de pessoas,
06:26
because people's voices have frequencies
119
370410
1943
porque as vozes das pessoas têm frequências
06:28
that I relate to color.
120
372353
1543
que eu posso relacionar com cores.
06:29
And here's some music translated into color.
121
373896
5119
E aqui está, música traduzida em cores.
06:34
For example, Mozart, "Queen of the Night," looks like this.
122
379015
5200
Por exemplo, Mozart, "Rainha da Noite",
parece-se com isto.
parece-se com isto.
06:40
(Music) Very yellow and very colorful,
123
384215
1812
(Música) Muito amarela e muito colorida,
06:41
because there's many different frequencies.
124
386027
2190
porque há muitas frequências diferentes.
06:44
(Music)
125
388217
2910
(Música)
06:48
And this is a completely different song.
126
392143
2314
E esta é uma música completamente diferente.
06:50
(Music) It's Justin Bieber's "Baby." (Laughter)
127
394457
3931
(Música) É a "Baby", do Justin Bieber. (Risos)
06:54
(Music)
128
398388
1731
(Música)
06:56
It is very pink and very yellow.
129
400119
3570
É muito cor-de-rosa e muito amarela.
06:59
So, also voices, I can transform speeches into color,
130
403689
7167
E também vozes, consigo transformar
discursos em cor.
discursos em cor.
07:06
for example, these are two very well-known speeches.
131
410856
3544
Por exemplo, estes são dois discursos
muito famosos.
muito famosos.
07:10
One of them is Martin Luther King's "I Have A Dream,"
132
414400
3737
Um deles é de Martin Luther King,
"I Have a Dream",
"I Have a Dream",
07:14
and the other one is Hitler.
133
418137
1452
e o outro é de Hitler.
07:15
And I like to exhibit these paintings in the exhibition halls
134
419589
3476
E gosto de expor estes quadros nas
salas de exposição
salas de exposição
07:18
without labels, and then I ask people,
135
423065
2576
sem legendas, e depois pergunto às pessoas:
07:21
"Which one do you prefer?"
136
425641
1847
"Qual deles é que prefere?"
07:23
And most people change their preference
137
427488
2265
E a maioria das pessoas muda a preferência
07:25
when I tell them that the one on the left is Hitler
138
429753
2911
quando lhes digo que o que está à esquerda
é Hitler
é Hitler
07:28
and the one on the right is Martin Luther King.
139
432664
3120
e o outro à direita é Martin Luther King.
07:31
So I got to a point when I was able to perceive 360 colors,
140
435784
5739
Cheguei então a um ponto em que era capaz
de distinguir 360 cores,
de distinguir 360 cores,
07:37
just like human vision.
141
441523
1585
tal e qual como a visão humana.
07:39
I was able to differentiate all the degrees of the color wheel.
142
443108
3595
Era capaz de diferenciar todos os tons
do círculo cromático.
do círculo cromático.
07:42
But then, I just thought that
143
446703
2082
Mas foi então que pensei
07:44
this human vision wasn't good enough.
144
448785
3239
que esta visão humana não era
suficientemente boa.
suficientemente boa.
07:47
There's many, many more colors around us
145
452024
2211
Há muitas, muitas mais cores à nossa volta
07:50
that we cannot perceive,
146
454235
1837
que não conseguimos detectar,
07:51
but that electronic eyes can perceive.
147
456072
1756
mas que olhos electrónicos conseguem.
07:53
So I decided to continue extending my color senses,
148
457828
3729
Por isso decidi continuar a expandir
os meus sentidos cromáticos,
os meus sentidos cromáticos,
07:57
and I added infrared and I added ultraviolet
149
461557
4250
e incluí os infravermelhos e os ultravioleta
08:01
to the color-to-sound scale, so now I can hear colors
150
465807
3358
na minha escala cor-passa-a-som e, portanto,
agora consigo ouvir cores
agora consigo ouvir cores
08:05
that the human eye cannot perceive.
151
469165
2224
que o olho humano não consegue detectar.
08:07
For example, perceiving infrared is good because you can
152
471389
3447
Por exemplo, distinguir infravermelhos é bom
porque podemos
porque podemos
08:10
actually detect if there's movement detectors in a room.
153
474836
4068
detectar se há detectores de movimento
numa sala.
numa sala.
08:14
I can hear if someone points at me with a remote control.
154
478904
3453
Consigo ouvir se alguém me aponta um
comando da televisão.
comando da televisão.
08:18
And the good thing about perceiving ultraviolet is that
155
482357
3150
E o que há de bom em detectar
ultravioletas é que
ultravioletas é que
08:21
you can hear if it's a good day or a bad day to sunbathe,
156
485507
4965
podemos ouvir se o dia é bom ou mau
para o bronze,
para o bronze,
08:26
because ultraviolet is a dangerous color,
157
490472
2157
porque o ultravioleta é uma cor perigosa,
08:28
a color that can actually kill us, so I think we should all have this wish
158
492629
3984
uma cor que nos pode efectivamente matar, por isso
acho que todos nós deveríamos ter este desejo
acho que todos nós deveríamos ter este desejo
08:32
to perceive things that we cannot perceive.
159
496613
2961
de detectar coisas que não conseguimos detectar.
08:35
That's why, two years ago,
160
499574
1735
Foi por isso que, há dois anos,
08:37
I created the Cyborg Foundation,
161
501309
1681
criei a Fundação Ciborgue,
08:38
which is a foundation that tries to help people
162
502990
2442
que é uma fundação que tenta ajudar
as pessoas
as pessoas
08:41
become a cyborg, tries to encourage people
163
505432
2697
a tornarem-se ciborgues, que tenta
incentivar as pessoas
incentivar as pessoas
08:44
to extend their senses
164
508129
1377
a expandir os seus sentidos
08:45
by using technology as part of the body.
165
509506
3071
utilizando tecnologia como parte do corpo.
08:48
We should all think that knowledge comes from our senses,
166
512577
3903
Devemos todos pensar que o conhecimento
provém dos nossos sentidos,
provém dos nossos sentidos,
08:52
so if we extend our senses,
167
516480
1976
portanto, se expandirmos os nossos sentidos,
08:54
we will consequently extend our knowledge.
168
518456
3088
vamos consequentemente expandir
o nosso conhecimento.
o nosso conhecimento.
08:57
I think life will be much more exciting
169
521544
2793
Acho que a vida será muito mais excitante
09:00
when we stop creating applications for mobile phones
170
524337
3224
quando pararmos de criar aplicações
para os telemóveis
para os telemóveis
09:03
and we start creating applications for our own body.
171
527561
3401
e começarmos a criar aplicações para
os nossos próprios corpos.
os nossos próprios corpos.
09:06
I think this will be a big, big change
172
530962
1816
Acho que esta será uma grande,
grande mudança
grande mudança
09:08
that we will see during this century.
173
532778
2078
a que assistiremos durante este século.
09:10
So I do encourage you all to think about which senses
174
534856
3915
Portanto, encorajo-vos a todos a pensar
que sentidos
que sentidos
09:14
you'd like to extend.
175
538771
1419
gostariam de expandir.
09:16
I would encourage you to become a cyborg.
176
540190
3173
Encorajo-vos a tornarem-se ciborgues.
09:19
You won't be alone. Thank you. (Applause)
177
543363
4648
Não estarão sozinhos. Obrigado. (Aplausos)
09:23
(Applause)
178
548011
6520
(Aplausos)
ABOUT THE SPEAKER
Neil Harbisson - Sonochromatic Cyborg ArtistNeil Harbisson's "eyeborg" allows him to hear colors, even those beyond the range of sight.
Why you should listen
Born with the inability to see color, Neil Harbisson wears a prosthetic device — he calls it an "eyeborg" — that allows him to hear the spectrum, even those colors beyond the range of human sight. His unique experience of color informs his artwork — which, until he met cyberneticist Adam Montandon at a college lecture, was strictly black-and-white. By working with Montandon, and later with Peter Kese, Harbisson helped design a lightweight eyepiece that he wears on his forehead that transposes the light frequencies of color hues into sound frequencies.
Harbisson's artwork blurs the boundaries between sight and sound. In his Sound Portraits series, he listens to the colors of faces to create a microtonal chord. In the City Colours project, he expresses the capital cities of Europe in two colors (Monaco is azure and salmon pink; Bratislava yellow and turquoise).
Neil Harbisson | Speaker | TED.com