TEDGlobal 2012
Neil Harbisson: I listen to color
Neil Harbisson : J'écoute les couleurs
Filmed:
Readability: 3.8
2,994,716 views
L'artiste Neil Harbisson est né avec un daltonisme absolu, mais aujourdhui un appareil fixé sur sa tête transforme les couleurs en fréquences audibles. Au lieu de voir un monde en dégradé de gris, Harbisson peut "entendre" une symphonie de couleur, et oui, il peut même écouter les visages et les tableaux.
Neil Harbisson - Sonochromatic Cyborg Artist
Neil Harbisson's "eyeborg" allows him to hear colors, even those beyond the range of sight. Full bio
Neil Harbisson's "eyeborg" allows him to hear colors, even those beyond the range of sight. Full bio
Double-click the English transcript below to play the video.
00:16
Well, I was born with a rare visual condition
0
1012
3179
Je suis né avec une pathologie visuelle rare
00:20
called achromatopsia, which is total color blindness,
1
4191
3713
appelée achromatopsie, qui est un daltonisme total,
00:23
so I've never seen color,
2
7904
1870
donc je n'ai jamais vu de couleur,
00:25
and I don't know what color looks like,
3
9774
2523
et je ne sais pas à quoi la couleur ressemble,
00:28
because I come from a grayscale world.
4
12297
2975
parce que je viens d'un monde en nuances de gris.
00:31
To me, the sky is always gray,
5
15272
2660
Pour moi, le ciel est toujours gris,
00:33
flowers are always gray,
6
17932
1852
les fleurs sont toujours grises,
00:35
and television is still in black and white.
7
19784
2202
et la télévision est toujours en noir et blanc.
00:37
But, since the age of 21,
8
21986
2293
Mais, depuis l'âge de 21,
00:40
instead of seeing color, I can hear color.
9
24279
4129
au lieu de voir la couleur, je peux entendre la couleur.
00:44
In 2003, I started a project
10
28408
2976
En 2003, j'ai commencé un projet
00:47
with computer scientist Adam Montandon,
11
31384
2688
avec Adam Montandon, chercheur en informatique
00:49
and the result, with further collaborations
12
34072
3167
et le résultat, avec les collaborations supplémentaires
00:53
with Peter Kese from Slovenia
13
37239
2848
de Peter Kese de Slovénie
00:55
and Matias Lizana from Barcelona,
14
40087
2033
et Matias Lizana de Barcelone,
00:58
is this electronic eye.
15
42120
2365
est cet œil électronique.
01:00
It's a color sensor that detects
16
44485
2356
C'est un capteur de couleur qui détecte
01:02
the color frequency in front of me — (Frequency sounds) —
17
46841
3583
la fréquence de couleur devant moi , (sons de fréquence)
01:06
and sends this frequency to a chip installed
18
50424
2352
et envoie cette fréquence à une puce installée
01:08
at the back of my head, and I hear the color in front of me
19
52776
2991
à l'arrière de ma tête, et j'entends la couleur devant moi
01:11
through the bone, through bone conduction.
20
55767
2896
à travers l'os, par conduction osseuse.
01:14
(Frequency sounds) So, for example, if I have, like —
21
58663
3508
(Sons de fréquence) Donc, par exemple, si j'ai, par exemple :
01:21
This is the sound of purple. (Frequency sounds)
22
65724
2967
Voici le son du violet . (Sons de fréquence)
01:24
For example, this is the sound of grass. (Frequency sounds)
23
68691
7418
Par exemple, voici le son de l'herbe. (Sons de fréquence)
01:32
This is red, like TED. (Frequency sounds)
24
76109
2125
Voici le rouge, comme TED. (Sons de fréquence)
01:34
This is the sound of a dirty sock. (Laughter)
25
78234
4369
Voici le son d'une chaussette sale. (Rires)
01:38
Which is like yellow, this one.
26
82603
1877
Qui est jaune, celle-ci.
01:40
So I've been hearing color all the time for eight years,
27
84480
4057
Donc j'entends la couleur en permanence depuis huit ans,
01:44
since 2004, so I find it completely normal now
28
88537
2635
depuis 2004, donc je trouve ça tout à fait normal maintenant
01:47
to hear color all the time.
29
91172
2479
d'entendre tout le temps la couleur.
01:49
At the start, though, I had to memorize the names you give
30
93651
4374
Au début, cependant, j'ai dû mémoriser les noms que vous donnez
01:53
for each color, so I had to memorize the notes,
31
98025
2406
à chaque couleur, donc j'ai dû mémoriser les notes,
01:56
but after some time, all this information
32
100431
1936
mais après un certain temps, toutes ces informations
01:58
became a perception.
33
102367
1993
sont devenues une perception.
02:00
I didn't have to think about the notes.
34
104360
1759
Je n'avais pas à réfléchir aux notes.
02:02
And after some time, this perception became a feeling.
35
106119
2625
Et après un certain temps, cette perception est devenue une sensation.
02:04
I started to have favorite colors,
36
108744
2006
J'ai commencé à avoir des couleurs préférées,
02:06
and I started to dream in colors.
37
110750
1774
et j'ai commencé à rêver en couleurs.
02:08
So, when I started to dream in color is when I felt
38
112524
4275
Donc, quand j'ai commencé à rêver en couleur, c'est lorsque j'ai senti
02:12
that the software and my brain had united,
39
116799
2887
que le logiciel et mon cerveau s'étaient unis,
02:15
because in my dreams, it was my brain creating
40
119686
2956
parce que dans mon rêve, c'était mon cerveau qui créait
02:18
electronic sounds. It wasn't the software,
41
122642
2361
les sons électroniques. Ce n'était pas le logiciel,
02:20
so that's when I started to feel like a cyborg.
42
125003
3519
c'est là que j'ai commencé à avoir l'impression d'être un cyborg.
02:24
It's when I started to feel that the cybernetic device
43
128522
3050
C'est là que j'ai commencé à avoir l'impression que le dispositif cybernétique
02:27
was no longer a device.
44
131572
2190
n'était plus un dispositif.
02:29
It had become a part of my body,
45
133762
2415
C'était devenu une partie de mon corps,
02:32
an extension of my senses,
46
136177
2465
une extension de mes sens,
02:34
and after some time, it even became a part
47
138642
2626
et après un certain temps, c'est même devenu une partie
02:37
of my official image.
48
141268
3527
de mon image officielle.
02:40
This is my passport from 2004.
49
144795
2346
Voici mon passeport depuis 2004.
02:43
You're not allowed to appear on U.K. passports
50
147141
3085
On n'est pas autorisé à apparaitre sur les passeports britanniques
02:46
with electronic equipment, but I insisted
51
150226
2812
avec des équipements électroniques, mais j'ai insisté
02:48
to the passport office that what they were seeing
52
153038
2401
au Bureau des passeports sur le fait que ce qu'ils voyaient
02:51
was actually a new part of my body,
53
155439
2504
était en fait une nouvelle partie de mon corps,
02:53
an extension of my brain, and they finally accepted me
54
157943
3520
une extension de mon cerveau, et ils ont finalement accepté
02:57
to appear with the passport photo.
55
161463
2511
que je le porte sur la photo du passeport.
02:59
So, life has changed dramatically since I hear color,
56
163974
3457
La vie a donc changé radicalement depuis que j'entends la couleur,
03:03
because color is almost everywhere,
57
167431
2594
parce que la couleur est presque partout,
03:05
so the biggest change for example is
58
170025
2877
le plus grand changement est par exemple
03:08
going to an art gallery, I can listen to a Picasso,
59
172902
4538
quand je vais dans une galerie d'art, je peux écouter un Picasso,
03:13
for example. So it's like I'm going to a concert hall,
60
177440
2854
par exemple. C'est comme si j'allais dans une salle de concert,
03:16
because I can listen to the paintings.
61
180294
2211
parce que je peux écouter les peintures.
03:18
And supermarkets, I find this is very shocking,
62
182505
2461
Et les supermarchés, je trouve que c'est très choquant,
03:20
it's very, very attractive to walk along a supermarket.
63
184966
2950
c'est très, très attrayant de marcher dans un supermarché.
03:23
It's like going to a nightclub.
64
187916
1488
C'est comme aller en boîte de nuit.
03:25
It's full of different melodies. (Laughter) Yeah.
65
189404
3256
C'est plein de mélodies différentes. (Rires) Oui.
03:28
Especially the aisle with cleaning products.
66
192660
2075
Surtout l'allée des produits de nettoyage.
03:30
It's just fabulous. (Laughter)
67
194735
3351
C'est juste fabuleux. (Rires)
03:33
Also, the way I dress has changed.
68
198086
2472
En outre, ma façon de m'habiller a changé.
03:36
Before, I used to dress in a way that it looked good.
69
200558
2408
Avant, je m'habillais pour avoir l'air bien
03:38
Now I dress in a way that it sounds good. (Laughter)
70
202966
4577
Maintenant je m'habille pour que ça sonne bien. (Rires)
03:43
(Applause)
71
207543
5131
(Applaudissements)
03:48
So today I'm dressed in C major,
72
212674
2509
Aujourd'hui je suis habillé en ut majeur,
03:51
so it's quite a happy chord. (Laughter)
73
215183
3309
c'est donc un accord tout à fait joyeux. (Rires)
03:54
If I had to go to a funeral, though,
74
218492
1874
Si je devais aller à un enterrement, néanmoins,
03:56
I would dress in B minor, which would be
75
220366
2567
je m'habillerais en si mineur, c'est-à-dire
03:58
turquoise, purple and orange. (Laughter)
76
222933
8759
turquoise, violet et orange. (Rires)
04:07
Also, food, the way I look at food has changed,
77
231692
4345
Aussi, la nourriture, la façon dont je regarde la nourriture a changé,
04:11
because now I can display the food on a plate,
78
236037
3456
parce que maintenant je peux disposer les aliments sur une assiette,
04:15
so I can eat my favorite song. (Laughter)
79
239493
2952
de manière à manger ma chanson préférée. (Rires)
04:18
So depending on how I display it,
80
242445
1229
Ainsi selon comment je les dispose
04:19
I can hear and I can compose music with food.
81
243674
2750
je peux entendre et je peux composer de la musique avec les aliments.
04:22
So imagine a restaurant where we can have, like,
82
246424
2725
Imaginez donc un restaurant où nous pouvons avoir, par exemple,
04:25
Lady Gaga salads as starters. (Laughter) I mean,
83
249149
2984
des salades Lady Gaga en entrée. (Rires) Je veux dire
04:28
this would get teenagers to eat their vegetables, probably.
84
252133
3017
ça ferait probablement manger des légumes aux adolescents.
04:31
And also, some Rachmaninov piano concertos
85
255150
3439
Et aussi, quelques concertos piano de Rachmaninov
04:34
as main dishes, and some Bjork or Madonna desserts,
86
258589
3234
en plats principaux et des desserts Bjork ou Madonna,
04:37
that would be a very exciting restaurant
87
261823
3109
ce serait un restaurant très excitant
04:40
where you can actually eat songs.
88
264932
2760
où on pourrait en fait manger des chansons.
04:43
Also, the way I perceive beauty has changed,
89
267692
4450
En outre, la façon dont je perçois la beauté a changée,
04:48
because when I look at someone, I hear their face,
90
272142
4680
parce que quand je regarde quelqu'un, j'entends son visage,
04:52
so someone might look very beautiful but sound terrible.
91
276822
5002
donc quelqu'un peut paraître très beau mais sonner horrible.
04:57
(Laughter) And it might happen the opposite,
92
281824
1761
(Rires) Et le contraire pourrait se produire,
04:59
the other way around. So I really enjoy creating, like,
93
283585
2248
dans l'autre sens. J'aime beaucoup créer, par exemple,
05:01
sound portraits of people.
94
285833
1729
des portraits sonores de personnes.
05:03
Instead of drawing someone's face, like drawing the shape,
95
287562
3640
Au lieu de dessiner le visage d'une personne, comme d'en dessiner la forme,
05:07
I point at them with the eye and I write down
96
291202
2431
je les vise avec l'oeil et j'écris
05:09
the different notes I hear, and then I create sound portraits.
97
293633
3271
les différentes notes que j'entends, et ensuite je crée son portrait sonore.
05:12
Here's some faces.
98
296904
1737
Voici quelques visages.
05:14
(Musical chords)
99
298641
14527
(Accords musicaux)
05:29
Yeah, Nicole Kidman sounds good. (Laughter)
100
313168
3433
Oui, Nicole Kidman sonne plutôt bien. (Rires)
05:32
Some people, I would never relate, but they sound similar.
101
316601
3049
Certaines personnes, je n'aurais jamais fait la relation, mais ils sonnent semblables.
05:35
Prince Charles has some similarities with Nicole Kidman.
102
319650
2798
Le Prince Charles a quelques similitudes avec Nicole Kidman.
05:38
They have similar sound of eyes.
103
322448
2137
Les sons de leurs yeux sont semblables
05:40
So you relate people that you wouldn't relate,
104
324585
2048
Vous associez donc des personnes alors que vous ne l'auriez pas fait avant,
05:42
and you can actually also create concerts
105
326633
3513
et vous pouvez en fait également créer des concerts
05:46
by looking at the audience faces.
106
330146
2640
en regardant les visages du public.
05:48
So I connect the eye, and then I play the audience's faces.
107
332786
3096
Je connecte l'œil, et puis je joue les visages du public.
05:51
The good thing about this is,
108
335882
1504
Ce qui est bien avec ça,
05:53
if the concert doesn't sound good, it's their fault.
109
337386
2967
si le son du concert n'est pas bon, c'est de leur faute.
05:56
It's not my fault, because — (Laughter)
110
340353
2271
Ce n'est pas ma faute, parce que ... (rires)
05:58
And so another thing that happens is that
111
342624
4307
Et une autre chose qui se passe est que
06:02
I started having this secondary effect
112
346931
2877
j'ai commencé à avoir cet effet secondaire :
06:05
that normal sounds started to become color.
113
349808
3330
les sons normaux ont commencé à devenir de la couleur.
06:09
I heard a telephone tone, and it felt green
114
353138
3761
J'ai entendu une sonnerie de téléphone, et elle semblait verte
06:12
because it sounded just like the color green.
115
356899
2326
parce qu'elle sonnait comme la couleur verte.
06:15
The BBC beeps, they sound turquoise,
116
359225
3298
Les bips de la BBC, ils sonnent turquoise,
06:18
and listening to Mozart became a yellow experience,
117
362523
3127
et l'écoute de Mozart est devenue une expérience jaune,
06:21
so I started to paint music and paint people's voices,
118
365650
4760
alors j'ai commencé à peindre la musique et les voix des gens,
06:26
because people's voices have frequencies
119
370410
1943
parce que les voix des gens ont des fréquences
06:28
that I relate to color.
120
372353
1543
que j'associe à la couleur.
06:29
And here's some music translated into color.
121
373896
5119
Et voici de la musique traduite en couleur.
06:34
For example, Mozart, "Queen of the Night," looks like this.
122
379015
5200
Par exemple, Mozart, « La reine de la nuit, » ressemble à ceci.
06:40
(Music) Very yellow and very colorful,
123
384215
1812
(Musique) Très jaune et très coloré,
06:41
because there's many different frequencies.
124
386027
2190
parce qu'il y a de nombreuses fréquences différentes.
06:44
(Music)
125
388217
2910
(Musique)
06:48
And this is a completely different song.
126
392143
2314
Et c'est une chanson totalement différente.
06:50
(Music) It's Justin Bieber's "Baby." (Laughter)
127
394457
3931
(Musique) C'est « Baby » de Justin Bieber. (Rires)
06:54
(Music)
128
398388
1731
(Musique)
06:56
It is very pink and very yellow.
129
400119
3570
C'est très jaune et très rose.
06:59
So, also voices, I can transform speeches into color,
130
403689
7167
Donc, d'autres voix, je peux transformer les discours en couleur,
07:06
for example, these are two very well-known speeches.
131
410856
3544
par exemple, voici deux discours très connus.
07:10
One of them is Martin Luther King's "I Have A Dream,"
132
414400
3737
L'un d'eux est « I Have A Dream " , Martin Luther King
07:14
and the other one is Hitler.
133
418137
1452
et l'autre est Hitler.
07:15
And I like to exhibit these paintings in the exhibition halls
134
419589
3476
Et j'aime exposer ces tableaux dans les salles d'exposition
07:18
without labels, and then I ask people,
135
423065
2576
sans étiquettes, puis je demande aux gens,
07:21
"Which one do you prefer?"
136
425641
1847
« Lequel préférez-vous? »
07:23
And most people change their preference
137
427488
2265
Et la plupart des gens changent leur préférence
07:25
when I tell them that the one on the left is Hitler
138
429753
2911
quand je leur dis que celui de gauche est Hitler
07:28
and the one on the right is Martin Luther King.
139
432664
3120
et celui de droite est Martin Luther King.
07:31
So I got to a point when I was able to perceive 360 colors,
140
435784
5739
J'en suis donc arrivé à un point où j'étais capable de percevoir 360 couleurs,
07:37
just like human vision.
141
441523
1585
exactement comme la vision humaine.
07:39
I was able to differentiate all the degrees of the color wheel.
142
443108
3595
J'étais capable de distinguer tous les degrés de la roue des couleurs.
07:42
But then, I just thought that
143
446703
2082
Mais alors, j'ai simplement pensé que
07:44
this human vision wasn't good enough.
144
448785
3239
cette vision humaine n'était pas assez bonne.
07:47
There's many, many more colors around us
145
452024
2211
Il y a beaucoup, beaucoup plus de couleurs autour de nous
07:50
that we cannot perceive,
146
454235
1837
que nous ne percevons pas,
07:51
but that electronic eyes can perceive.
147
456072
1756
mais que ces yeux électroniques peuvent percevoir.
07:53
So I decided to continue extending my color senses,
148
457828
3729
J'ai donc décidé de continuer à étendre mes sens de couleur,
07:57
and I added infrared and I added ultraviolet
149
461557
4250
et j'ai ajouté l'infrarouge et l'ultraviolet,
08:01
to the color-to-sound scale, so now I can hear colors
150
465807
3358
à l'échelle de couleur-son, maintenant je peux donc entendre des couleurs
08:05
that the human eye cannot perceive.
151
469165
2224
que l'œil humain ne peut percevoir.
08:07
For example, perceiving infrared is good because you can
152
471389
3447
Par exemple, percevoir l'infrarouge est une bonne chose parce qu'on peut
08:10
actually detect if there's movement detectors in a room.
153
474836
4068
en fait détecter si il y a des détecteurs de mouvement dans une pièce.
08:14
I can hear if someone points at me with a remote control.
154
478904
3453
Je peux entendre si quelqu'un pointe vers moi avec une télécommande.
08:18
And the good thing about perceiving ultraviolet is that
155
482357
3150
Et le bon côté de percevoir les rayons ultraviolets est
08:21
you can hear if it's a good day or a bad day to sunbathe,
156
485507
4965
qu'on peut entendre si c'est une bonne journée ou une mauvaise journée pour bronzer,
08:26
because ultraviolet is a dangerous color,
157
490472
2157
car l'ultraviolet est une couleur dangereuse,
08:28
a color that can actually kill us, so I think we should all have this wish
158
492629
3984
une couleur qui peut en réalité nous tuer, donc je pense que nous devrions tous avoir ce désir
08:32
to perceive things that we cannot perceive.
159
496613
2961
de percevoir les choses que nous ne pouvons pas percevoir.
08:35
That's why, two years ago,
160
499574
1735
C'est pourquoi, il y a deux ans
08:37
I created the Cyborg Foundation,
161
501309
1681
j'ai créé la Fondation Cyborg,
08:38
which is a foundation that tries to help people
162
502990
2442
qui est une fondation qui tente d'aider les gens
08:41
become a cyborg, tries to encourage people
163
505432
2697
à devenir des cyborg, qui essaie d'encourager les gens
08:44
to extend their senses
164
508129
1377
à étendre leurs sens
08:45
by using technology as part of the body.
165
509506
3071
en utilisant la technologie comme une partie du corps.
08:48
We should all think that knowledge comes from our senses,
166
512577
3903
Nous devrions tous penser que la connaissance vient de nos sens,
08:52
so if we extend our senses,
167
516480
1976
donc, si nous élargissons nos sens,
08:54
we will consequently extend our knowledge.
168
518456
3088
nous prolongerons par conséquent nos connaissances.
08:57
I think life will be much more exciting
169
521544
2793
Je pense que la vie sera beaucoup plus excitante
09:00
when we stop creating applications for mobile phones
170
524337
3224
quand nous cesserons de créer des applications pour téléphones mobiles
09:03
and we start creating applications for our own body.
171
527561
3401
et que nous commençons à créer des applications pour notre propre corps.
09:06
I think this will be a big, big change
172
530962
1816
Je pense que ce sera un grand, grand changement
09:08
that we will see during this century.
173
532778
2078
que nous verrons au cours de ce siècle.
09:10
So I do encourage you all to think about which senses
174
534856
3915
Donc je vous encourage tous à réfléchir à quels sens
09:14
you'd like to extend.
175
538771
1419
vous souhaiteriez étendre.
09:16
I would encourage you to become a cyborg.
176
540190
3173
Je vous encouragerais à devenir des cyborgs.
09:19
You won't be alone. Thank you. (Applause)
177
543363
4648
Vous ne serez pas seul. Merci. (Applaudissements)
09:23
(Applause)
178
548011
6520
(Applaudissements)
ABOUT THE SPEAKER
Neil Harbisson - Sonochromatic Cyborg ArtistNeil Harbisson's "eyeborg" allows him to hear colors, even those beyond the range of sight.
Why you should listen
Born with the inability to see color, Neil Harbisson wears a prosthetic device — he calls it an "eyeborg" — that allows him to hear the spectrum, even those colors beyond the range of human sight. His unique experience of color informs his artwork — which, until he met cyberneticist Adam Montandon at a college lecture, was strictly black-and-white. By working with Montandon, and later with Peter Kese, Harbisson helped design a lightweight eyepiece that he wears on his forehead that transposes the light frequencies of color hues into sound frequencies.
Harbisson's artwork blurs the boundaries between sight and sound. In his Sound Portraits series, he listens to the colors of faces to create a microtonal chord. In the City Colours project, he expresses the capital cities of Europe in two colors (Monaco is azure and salmon pink; Bratislava yellow and turquoise).
Neil Harbisson | Speaker | TED.com