TEDGlobal 2012
Neil Harbisson: I listen to color
Нил Харбиссон: Я слышу цвет
Filmed:
Readability: 3.8
2,994,716 views
Художник Нил Харбиссон родился с полной неспособностью различать цвета, но сегодня устройство на его голове превращает цвет в слышимые частоты. Вместо того чтобы видеть мир чёрно-белым, Харбиссон может «слышать» симфонию цветов и даже слушать лица и картины.
Neil Harbisson - Sonochromatic Cyborg Artist
Neil Harbisson's "eyeborg" allows him to hear colors, even those beyond the range of sight. Full bio
Neil Harbisson's "eyeborg" allows him to hear colors, even those beyond the range of sight. Full bio
Double-click the English transcript below to play the video.
00:16
Well, I was born with a rare visual condition
0
1012
3179
Я родился
с редкой зрительной особенностью —
с редкой зрительной особенностью —
00:20
called achromatopsia, which is total color blindness,
1
4191
3713
ахроматопсией, или полной неспособностью
различать цвета.
различать цвета.
00:23
so I've never seen color,
2
7904
1870
Проще говоря, я никогда не видел цвета
00:25
and I don't know what color looks like,
3
9774
2523
и не представляю, как они выглядят.
00:28
because I come from a grayscale world.
4
12297
2975
Мой мир серый.
00:31
To me, the sky is always gray,
5
15272
2660
Для меня небо всегда серое,
00:33
flowers are always gray,
6
17932
1852
цветы всегда серые,
00:35
and television is still in black and white.
7
19784
2202
и телевидение по-прежнему чёрно-белое.
00:37
But, since the age of 21,
8
21986
2293
Но с тех пор как мне исполнился 21 год,
00:40
instead of seeing color, I can hear color.
9
24279
4129
вместо того чтобы видеть цвет,
я его слышу.
я его слышу.
00:44
In 2003, I started a project
10
28408
2976
В 2003 году я начал проект
00:47
with computer scientist Adam Montandon,
11
31384
2688
вместе с компьютерным специалистом
Адамом Монтандоном.
Адамом Монтандоном.
00:49
and the result, with further collaborations
12
34072
3167
Позже, объединившись
00:53
with Peter Kese from Slovenia
13
37239
2848
с Питером Кизом из Словении
00:55
and Matias Lizana from Barcelona,
14
40087
2033
и Матиасом Лизанья из Барселоны,
00:58
is this electronic eye.
15
42120
2365
мы создали электронный глаз.
01:00
It's a color sensor that detects
16
44485
2356
Это датчик для определения цвета.
01:02
the color frequency in front of me — (Frequency sounds) —
17
46841
3583
Он фиксирует частоту цвета
передо мной (звук частоты),
передо мной (звук частоты),
01:06
and sends this frequency to a chip installed
18
50424
2352
направляет её в чип,
установленный у меня на затылке,
установленный у меня на затылке,
01:08
at the back of my head, and I hear the color in front of me
19
52776
2991
и я слышу цвет перед собой
01:11
through the bone, through bone conduction.
20
55767
2896
при помощи костной проводимости.
01:14
(Frequency sounds) So, for example, if I have, like —
21
58663
3508
(звук частоты)
Так, например,
Так, например,
01:21
This is the sound of purple. (Frequency sounds)
22
65724
2967
звучит фиолетовый,
(звук частоты)
(звук частоты)
01:24
For example, this is the sound of grass. (Frequency sounds)
23
68691
7418
так – травяной цвет.
(звук частоты)
(звук частоты)
01:32
This is red, like TED. (Frequency sounds)
24
76109
2125
Это красный, как TED.
(звук частоты)
(звук частоты)
01:34
This is the sound of a dirty sock. (Laughter)
25
78234
4369
Здесь звук грязного носка.
(Смех)
(Смех)
01:38
Which is like yellow, this one.
26
82603
1877
Кстати, он созвучен жёлтому.
01:40
So I've been hearing color all the time for eight years,
27
84480
4057
Таким образом, я слушаю цвета
с 2004 года на протяжении 8-ми лет.
с 2004 года на протяжении 8-ми лет.
01:44
since 2004, so I find it completely normal now
28
88537
2635
Сейчас для меня
это совершенно нормально:
это совершенно нормально:
01:47
to hear color all the time.
29
91172
2479
постоянно слышать цвета.
01:49
At the start, though, I had to memorize the names you give
30
93651
4374
На первых порах я должен был запоминать
01:53
for each color, so I had to memorize the notes,
31
98025
2406
название каждого цвета и его ноту,
01:56
but after some time, all this information
32
100431
1936
но через некоторое время это перешло
01:58
became a perception.
33
102367
1993
на уровень чувственного восприятия.
02:00
I didn't have to think about the notes.
34
104360
1759
Больше не нужно было думать о нотах.
02:02
And after some time, this perception became a feeling.
35
106119
2625
Ещё позже чувственное восприятие
стало чувством.
стало чувством.
02:04
I started to have favorite colors,
36
108744
2006
У меня появились любимые цвета,
02:06
and I started to dream in colors.
37
110750
1774
начали сниться цветные сны.
02:08
So, when I started to dream in color is when I felt
38
112524
4275
После этого я осознал,
02:12
that the software and my brain had united,
39
116799
2887
что мой мозг слился
с программным обеспечением
с программным обеспечением
02:15
because in my dreams, it was my brain creating
40
119686
2956
и начал создавать
электронные звуки во сне.
электронные звуки во сне.
02:18
electronic sounds. It wasn't the software,
41
122642
2361
Программное обеспечение
здесь не замешано.
здесь не замешано.
02:20
so that's when I started to feel like a cyborg.
42
125003
3519
Я почувствовал себя киборгом.
02:24
It's when I started to feel that the cybernetic device
43
128522
3050
Кибернетическое устройство
02:27
was no longer a device.
44
131572
2190
перестало быть устройством.
02:29
It had become a part of my body,
45
133762
2415
Оно превратилось в часть моего тела,
02:32
an extension of my senses,
46
136177
2465
в продолжение моих чувств,
02:34
and after some time, it even became a part
47
138642
2626
а ещё через некоторое время —
02:37
of my official image.
48
141268
3527
в часть моего официального облика.
02:40
This is my passport from 2004.
49
144795
2346
Вот мой паспорт, выданный в 2004 году.
02:43
You're not allowed to appear on U.K. passports
50
147141
3085
В Великобритании
на фото в паспорте запрещено
на фото в паспорте запрещено
02:46
with electronic equipment, but I insisted
51
150226
2812
появляться с электронными устройствами,
02:48
to the passport office that what they were seeing
52
153038
2401
но я настоял на том,
02:51
was actually a new part of my body,
53
155439
2504
что это – новая часть моего тела,
02:53
an extension of my brain, and they finally accepted me
54
157943
3520
продолжение моего мозга,
и, в конце концов, они позволили
и, в конце концов, они позволили
02:57
to appear with the passport photo.
55
161463
2511
поместить такое фото в паспорт.
02:59
So, life has changed dramatically since I hear color,
56
163974
3457
Моя жизнь значительно изменилась
с тех пор, как я слышу цвета,
с тех пор, как я слышу цвета,
03:03
because color is almost everywhere,
57
167431
2594
потому что они есть буквально повсюду.
03:05
so the biggest change for example is
58
170025
2877
Например, самой большой переменой стало
03:08
going to an art gallery, I can listen to a Picasso,
59
172902
4538
посещение картинной галереи,
где я слышу Пикассо.
где я слышу Пикассо.
03:13
for example. So it's like I'm going to a concert hall,
60
177440
2854
Ощущения как в концертном зале —
03:16
because I can listen to the paintings.
61
180294
2211
я могу слушать картины.
03:18
And supermarkets, I find this is very shocking,
62
182505
2461
Супермаркеты производят на меня
сильное впечатление:
сильное впечатление:
03:20
it's very, very attractive to walk along a supermarket.
63
184966
2950
ходить по супермаркету
очень притягательно.
очень притягательно.
03:23
It's like going to a nightclub.
64
187916
1488
Можно сравнить
с посещением ночного клуба.
с посещением ночного клуба.
03:25
It's full of different melodies. (Laughter) Yeah.
65
189404
3256
Он наполнен разными мелодиями.
(Смех) О, да.
(Смех) О, да.
03:28
Especially the aisle with cleaning products.
66
192660
2075
Особенно ряд с чистящими средствами.
03:30
It's just fabulous. (Laughter)
67
194735
3351
Умопомрачительно. (Смех)
03:33
Also, the way I dress has changed.
68
198086
2472
Также я стал по-другому одеваться.
03:36
Before, I used to dress in a way that it looked good.
69
200558
2408
Раньше я подбирал одежду,
чтобы хорошо выглядеть.
чтобы хорошо выглядеть.
03:38
Now I dress in a way that it sounds good. (Laughter)
70
202966
4577
Сейчас я одеваюсь,
чтобы хорошо звучать. (Смех)
чтобы хорошо звучать. (Смех)
03:43
(Applause)
71
207543
5131
(Аплодисменты)
03:48
So today I'm dressed in C major,
72
212674
2509
Сегодня я одет в до-мажор,
03:51
so it's quite a happy chord. (Laughter)
73
215183
3309
а это весьма жизнерадостный аккорд.
(Смех)
(Смех)
03:54
If I had to go to a funeral, though,
74
218492
1874
Если бы мне нужно было
пойти на похороны,
пойти на похороны,
03:56
I would dress in B minor, which would be
75
220366
2567
я бы оделся в си-минор, а именно
03:58
turquoise, purple and orange. (Laughter)
76
222933
8759
в бирюзовый, фиолетовый
и оранжевый цвета. (Смех)
и оранжевый цвета. (Смех)
04:07
Also, food, the way I look at food has changed,
77
231692
4345
Также еда:
моё отношение к ней изменилось.
моё отношение к ней изменилось.
04:11
because now I can display the food on a plate,
78
236037
3456
Сейчас я выставляю еду на тарелке
в таком порядке,
в таком порядке,
04:15
so I can eat my favorite song. (Laughter)
79
239493
2952
чтобы съесть свою любимую песню.
(Смех)
(Смех)
04:18
So depending on how I display it,
80
242445
1229
В зависимости от размещения
04:19
I can hear and I can compose music with food.
81
243674
2750
я могу слышать и сочинять музыку из еды.
04:22
So imagine a restaurant where we can have, like,
82
246424
2725
Представьте себе ресторан,
в котором подают
в котором подают
04:25
Lady Gaga salads as starters. (Laughter) I mean,
83
249149
2984
салаты Леди Гага в качестве закуски.
(Смех)
(Смех)
04:28
this would get teenagers to eat their vegetables, probably.
84
252133
3017
Больше подростков стало бы есть овощи.
04:31
And also, some Rachmaninov piano concertos
85
255150
3439
Концерты фортепьянной музыки Рахманинова
04:34
as main dishes, and some Bjork or Madonna desserts,
86
258589
3234
в роли основного блюда,
немного Бьорк и Мадонны на десерт —
немного Бьорк и Мадонны на десерт —
04:37
that would be a very exciting restaurant
87
261823
3109
получился бы замечательный ресторан,
04:40
where you can actually eat songs.
88
264932
2760
где песни действительно можно есть.
04:43
Also, the way I perceive beauty has changed,
89
267692
4450
Изменилось и моё восприятие красоты.
04:48
because when I look at someone, I hear their face,
90
272142
4680
Смотря на человека, я слышу его лицо.
04:52
so someone might look very beautiful but sound terrible.
91
276822
5002
Кто-то может выглядеть прекрасно,
но звучать отвратительно.
но звучать отвратительно.
04:57
(Laughter) And it might happen the opposite,
92
281824
1761
(Смех) И наоборот.
04:59
the other way around. So I really enjoy creating, like,
93
283585
2248
Я получаю удовольствие от создания
05:01
sound portraits of people.
94
285833
1729
звуковых портретов людей.
05:03
Instead of drawing someone's face, like drawing the shape,
95
287562
3640
Вместо того чтобы рисовать черты лица,
я рисую формы,
я рисую формы,
05:07
I point at them with the eye and I write down
96
291202
2431
смотрю на них электронным глазом
05:09
the different notes I hear, and then I create sound portraits.
97
293633
3271
и записываю ноты, которые слышу.
Получается звуковой портрет.
Получается звуковой портрет.
05:12
Here's some faces.
98
296904
1737
Вот несколько лиц.
05:14
(Musical chords)
99
298641
14527
(Музыкальные аккорды)
05:29
Yeah, Nicole Kidman sounds good. (Laughter)
100
313168
3433
Да, Николь Кидман звучит хорошо.
(Смех)
(Смех)
05:32
Some people, I would never relate, but they sound similar.
101
316601
3049
Порой совершенно не связанные
между собой люди звучат похоже.
между собой люди звучат похоже.
05:35
Prince Charles has some similarities with Nicole Kidman.
102
319650
2798
Принц Чарльз и Николь Кидман
05:38
They have similar sound of eyes.
103
322448
2137
имеют одинаковый звук глаз.
05:40
So you relate people that you wouldn't relate,
104
324585
2048
И так можно найти сходство
05:42
and you can actually also create concerts
105
326633
3513
в совершенно разных людях,
можно даже создавать концерты
можно даже создавать концерты
05:46
by looking at the audience faces.
106
330146
2640
из лиц в аудитории.
05:48
So I connect the eye, and then I play the audience's faces.
107
332786
3096
Я присоединяю глаз
и проигрываю лица зрителей.
и проигрываю лица зрителей.
05:51
The good thing about this is,
108
335882
1504
Хорошая новость в том,
05:53
if the concert doesn't sound good, it's their fault.
109
337386
2967
что если концерт не удался,
это вина зрителя,
это вина зрителя,
05:56
It's not my fault, because — (Laughter)
110
340353
2271
но не моя, потому что… (Смех)
05:58
And so another thing that happens is that
111
342624
4307
Со мной также начал происходить
06:02
I started having this secondary effect
112
346931
2877
и обратный эффект:
06:05
that normal sounds started to become color.
113
349808
3330
обычные звуки
стали превращаться в цвета.
стали превращаться в цвета.
06:09
I heard a telephone tone, and it felt green
114
353138
3761
Звонок телефона
я воспринимаю как зелёный,
я воспринимаю как зелёный,
06:12
because it sounded just like the color green.
115
356899
2326
потому что он звучит одинаково.
06:15
The BBC beeps, they sound turquoise,
116
359225
3298
Звуковые сигналы BBC – бирюзовые,
06:18
and listening to Mozart became a yellow experience,
117
362523
3127
а прослушивание Моцарта
стало для меня жёлтым.
стало для меня жёлтым.
06:21
so I started to paint music and paint people's voices,
118
365650
4760
Я начал зарисовывать музыку
и голоса людей,
и голоса людей,
06:26
because people's voices have frequencies
119
370410
1943
потому что людские голоса
имеют частоты,
имеют частоты,
06:28
that I relate to color.
120
372353
1543
которые я соотношу с цветами.
06:29
And here's some music translated into color.
121
373896
5119
Здесь у меня есть музыка,
переведённая в цвет.
переведённая в цвет.
06:34
For example, Mozart, "Queen of the Night," looks like this.
122
379015
5200
Например, «Царица ночи» Моцарта
выглядит так.
выглядит так.
06:40
(Music) Very yellow and very colorful,
123
384215
1812
(Музыка) Очень жёлтой и красочной,
06:41
because there's many different frequencies.
124
386027
2190
потому что в ней много разных частот.
06:44
(Music)
125
388217
2910
(Музыка)
06:48
And this is a completely different song.
126
392143
2314
А сейчас – совершенно другая песня.
06:50
(Music) It's Justin Bieber's "Baby." (Laughter)
127
394457
3931
(Музыка) Это Джастин Бибер «Baby».
(Смех)
(Смех)
06:54
(Music)
128
398388
1731
(Музыка)
06:56
It is very pink and very yellow.
129
400119
3570
Очень розовая и очень жёлтая.
06:59
So, also voices, I can transform speeches into color,
130
403689
7167
То же происходит с голосами.
Я могу переводить речь в цвета.
Я могу переводить речь в цвета.
07:06
for example, these are two very well-known speeches.
131
410856
3544
Например, два известнейших выступления:
07:10
One of them is Martin Luther King's "I Have A Dream,"
132
414400
3737
«У меня есть мечта»
Мартина Лютера Кинга
Мартина Лютера Кинга
07:14
and the other one is Hitler.
133
418137
1452
и речь Гитлера.
07:15
And I like to exhibit these paintings in the exhibition halls
134
419589
3476
Мне нравится выставлять их
в зале без подписи
в зале без подписи
07:18
without labels, and then I ask people,
135
423065
2576
и спрашивать у людей:
07:21
"Which one do you prefer?"
136
425641
1847
«Какая нравится Вам больше?»
07:23
And most people change their preference
137
427488
2265
Большинство меняют своё мнение,
07:25
when I tell them that the one on the left is Hitler
138
429753
2911
когда я говорю им,
что речь слева принадлежит Гитлеру,
что речь слева принадлежит Гитлеру,
07:28
and the one on the right is Martin Luther King.
139
432664
3120
а справа – Мартину Лютеру Кингу.
07:31
So I got to a point when I was able to perceive 360 colors,
140
435784
5739
Итак, я достиг уровня восприятия
360-и цветов,
360-и цветов,
07:37
just like human vision.
141
441523
1585
уровня нормального зрения человека.
07:39
I was able to differentiate all the degrees of the color wheel.
142
443108
3595
Я мог различать все оттенки
на цветовом круге.
на цветовом круге.
07:42
But then, I just thought that
143
446703
2082
И тут я подумал,
07:44
this human vision wasn't good enough.
144
448785
3239
что человеческое зрение
недостаточно хорошее.
недостаточно хорошее.
07:47
There's many, many more colors around us
145
452024
2211
Вокруг нас куда больше цветов,
07:50
that we cannot perceive,
146
454235
1837
которые не видим мы,
07:51
but that electronic eyes can perceive.
147
456072
1756
но видит электронный глаз.
07:53
So I decided to continue extending my color senses,
148
457828
3729
Я решил продолжить развитие
своего чувства цвета
своего чувства цвета
07:57
and I added infrared and I added ultraviolet
149
461557
4250
и добавил инфракрасный и ультрафиолетовый
на шкалу «цвет-звук»,
на шкалу «цвет-звук»,
08:01
to the color-to-sound scale, so now I can hear colors
150
465807
3358
так что сейчас я могу слышать цвета,
08:05
that the human eye cannot perceive.
151
469165
2224
неразличимые человеческим глазом.
08:07
For example, perceiving infrared is good because you can
152
471389
3447
Восприятие инфракрасного хорошо тем,
что вы действительно можете определить,
что вы действительно можете определить,
08:10
actually detect if there's movement detectors in a room.
153
474836
4068
есть ли в комнате детекторы движения.
08:14
I can hear if someone points at me with a remote control.
154
478904
3453
Я слышу, когда кто-нибудь указывает на меня
пультом дистанционного управления.
пультом дистанционного управления.
08:18
And the good thing about perceiving ultraviolet is that
155
482357
3150
Слышать же ультрафиолет полезно,
чтобы определять
чтобы определять
08:21
you can hear if it's a good day or a bad day to sunbathe,
156
485507
4965
хороший сегодня день для загара или нет,
08:26
because ultraviolet is a dangerous color,
157
490472
2157
так как ультрафиолетовый –
опасный цвет.
опасный цвет.
08:28
a color that can actually kill us, so I think we should all have this wish
158
492629
3984
Он действительно может убить нас,
и, я полагаю, у каждого может возникнуть
и, я полагаю, у каждого может возникнуть
08:32
to perceive things that we cannot perceive.
159
496613
2961
желание различать вещи,
невидимые глазом.
невидимые глазом.
08:35
That's why, two years ago,
160
499574
1735
Именно поэтому 2 года назад
08:37
I created the Cyborg Foundation,
161
501309
1681
я основал Cyborg Foundation,
08:38
which is a foundation that tries to help people
162
502990
2442
организацию, которая помогает людям
08:41
become a cyborg, tries to encourage people
163
505432
2697
стать киборгами, старается убедить их
08:44
to extend their senses
164
508129
1377
расширить диапазон чувств,
08:45
by using technology as part of the body.
165
509506
3071
используя технологию как часть тела.
08:48
We should all think that knowledge comes from our senses,
166
512577
3903
Мы все должны понимать,
что знание происходит от наших чувств,
что знание происходит от наших чувств,
08:52
so if we extend our senses,
167
516480
1976
и расширяя чувства,
08:54
we will consequently extend our knowledge.
168
518456
3088
мы последовательно увеличиваем знание.
08:57
I think life will be much more exciting
169
521544
2793
Я думаю, жизнь станет удивительнее,
09:00
when we stop creating applications for mobile phones
170
524337
3224
когда вместо приложений
для мобильных телефонов
для мобильных телефонов
09:03
and we start creating applications for our own body.
171
527561
3401
мы начнём создавать приложения
для собственного тела.
для собственного тела.
09:06
I think this will be a big, big change
172
530962
1816
Думаю, что такую огромную перемену
09:08
that we will see during this century.
173
532778
2078
можно будет наблюдать уже в этом веке.
09:10
So I do encourage you all to think about which senses
174
534856
3915
Я призываю вас подумать, какие чувства
09:14
you'd like to extend.
175
538771
1419
вы хотели бы расширить.
09:16
I would encourage you to become a cyborg.
176
540190
3173
Я призываю вас стать киборгами.
09:19
You won't be alone. Thank you. (Applause)
177
543363
4648
Вы не будете одиноки.
Спасибо. (Аплодисменты)
Спасибо. (Аплодисменты)
09:23
(Applause)
178
548011
6520
(Аплодисменты)
ABOUT THE SPEAKER
Neil Harbisson - Sonochromatic Cyborg ArtistNeil Harbisson's "eyeborg" allows him to hear colors, even those beyond the range of sight.
Why you should listen
Born with the inability to see color, Neil Harbisson wears a prosthetic device — he calls it an "eyeborg" — that allows him to hear the spectrum, even those colors beyond the range of human sight. His unique experience of color informs his artwork — which, until he met cyberneticist Adam Montandon at a college lecture, was strictly black-and-white. By working with Montandon, and later with Peter Kese, Harbisson helped design a lightweight eyepiece that he wears on his forehead that transposes the light frequencies of color hues into sound frequencies.
Harbisson's artwork blurs the boundaries between sight and sound. In his Sound Portraits series, he listens to the colors of faces to create a microtonal chord. In the City Colours project, he expresses the capital cities of Europe in two colors (Monaco is azure and salmon pink; Bratislava yellow and turquoise).
Neil Harbisson | Speaker | TED.com