TEDGlobal 2012
Neil Harbisson: I listen to color
Ніл Харбісон: я слухаю кольори
Filmed:
Readability: 3.8
2,994,716 views
Художник Ніл Харбісон не розрізняв кольори з моменту народження, але на сьогодні пристрій, прикріплений до його голови, перетворює колір у звукові частоти. Замість того, щоб бачити світ у сірих відтінках, Харбісон може "чути" симфонію кольору - і навіть може слухати обличчя та картини.
Neil Harbisson - Sonochromatic Cyborg Artist
Neil Harbisson's "eyeborg" allows him to hear colors, even those beyond the range of sight. Full bio
Neil Harbisson's "eyeborg" allows him to hear colors, even those beyond the range of sight. Full bio
Double-click the English transcript below to play the video.
00:16
Well, I was born with a rare visual condition
0
1012
3179
Що ж, я народився з рідкісним зоровим дефектом,
00:20
called achromatopsia, which is total color blindness,
1
4191
3713
який називають ахроматопсія, тобто загальна колірна сліпота,
00:23
so I've never seen color,
2
7904
1870
тому я ніколи не бачив кольорів.
00:25
and I don't know what color looks like,
3
9774
2523
Я не знаю, як виглядає колір,
00:28
because I come from a grayscale world.
4
12297
2975
тому що я зі світу сірих відтінків.
00:31
To me, the sky is always gray,
5
15272
2660
Для мене небо є завжди сірим,
00:33
flowers are always gray,
6
17932
1852
квіти завжди сірі
00:35
and television is still in black and white.
7
19784
2202
і телебачення досі чорно-біле.
00:37
But, since the age of 21,
8
21986
2293
Але з двадцяти одного року,
00:40
instead of seeing color, I can hear color.
9
24279
4129
замість того, щоб бачити кольори, я їх чую.
00:44
In 2003, I started a project
10
28408
2976
У 2003 році,
00:47
with computer scientist Adam Montandon,
11
31384
2688
разом з комп’ютерним науковцем Адамом Монтандоном,
00:49
and the result, with further collaborations
12
34072
3167
та через подальшу співпрацю
00:53
with Peter Kese from Slovenia
13
37239
2848
із Пітером Кеше зі Словенії,
00:55
and Matias Lizana from Barcelona,
14
40087
2033
і Матіасом Лізаною із Барселони,
00:58
is this electronic eye.
15
42120
2365
я розпочав проект, результатом якого є ось це електронне око.
01:00
It's a color sensor that detects
16
44485
2356
Це датчик кольору,
01:02
the color frequency in front of me — (Frequency sounds) —
17
46841
3583
який визначає частоту кольору, що переді мною – (частотний звук) –
01:06
and sends this frequency to a chip installed
18
50424
2352
і подає частотний звук, встановлений
01:08
at the back of my head, and I hear the color in front of me
19
52776
2991
в мене на потилиці і, таким чином, я чую колір, що переді мною
01:11
through the bone, through bone conduction.
20
55767
2896
через кісткову провідність.
01:14
(Frequency sounds) So, for example, if I have, like —
21
58663
3508
(частотні звуки) Для прикладу, ось
01:21
This is the sound of purple. (Frequency sounds)
22
65724
2967
це звук фіолетового (частотні звуки);
01:24
For example, this is the sound of grass. (Frequency sounds)
23
68691
7418
це, наприклад, звук кольору трави. (частотні звуки)
01:32
This is red, like TED. (Frequency sounds)
24
76109
2125
Це червоний, як ТЕД (частотні звуки).
01:34
This is the sound of a dirty sock. (Laughter)
25
78234
4369
Це звук брудної шкарпетки. (Сміх)
01:38
Which is like yellow, this one.
26
82603
1877
Яка є жовтою.
01:40
So I've been hearing color all the time for eight years,
27
84480
4057
Що ж, я чую кольори постійно протягом восьми років,
01:44
since 2004, so I find it completely normal now
28
88537
2635
з 2004, тепер це зовсім нормально,
01:47
to hear color all the time.
29
91172
2479
постійно слухати кольори.
01:49
At the start, though, I had to memorize the names you give
30
93651
4374
Правда, на початку, я змушений був запам’ятовувати назви, які ви дали
01:53
for each color, so I had to memorize the notes,
31
98025
2406
кожному кольору, і також ноти,
01:56
but after some time, all this information
32
100431
1936
але з часом вся ця інформація
01:58
became a perception.
33
102367
1993
стала сприйняттям.
02:00
I didn't have to think about the notes.
34
104360
1759
Мені не потрібно було думати про ноти.
02:02
And after some time, this perception became a feeling.
35
106119
2625
А згодом це сприйняття перетворилось у відчуття.
02:04
I started to have favorite colors,
36
108744
2006
У мене з’явились улюблені кольори,
02:06
and I started to dream in colors.
37
110750
1774
і навіть мої сни стали кольоровими.
02:08
So, when I started to dream in color is when I felt
38
112524
4275
Коли я почав бачити сни у кольорі, тоді я відчув,
02:12
that the software and my brain had united,
39
116799
2887
що програма і мій мозок об’єднались,
02:15
because in my dreams, it was my brain creating
40
119686
2956
тому що уві сні електронні звуки створював мій мозок.
02:18
electronic sounds. It wasn't the software,
41
122642
2361
Це була не програма,
02:20
so that's when I started to feel like a cyborg.
42
125003
3519
це була мить, коли я почав відчувати себе кіборгом.
02:24
It's when I started to feel that the cybernetic device
43
128522
3050
Це була мить, коли я почав відчувати, що мій кібернетичний пристрій
02:27
was no longer a device.
44
131572
2190
більше не є пристроєм.
02:29
It had become a part of my body,
45
133762
2415
Він став частиною мого тіла,
02:32
an extension of my senses,
46
136177
2465
продовженням моїх відчуттів.
02:34
and after some time, it even became a part
47
138642
2626
І з часом, він став частиною
02:37
of my official image.
48
141268
3527
мого офіційного образу.
02:40
This is my passport from 2004.
49
144795
2346
Це мій паспорт 2004 року.
02:43
You're not allowed to appear on U.K. passports
50
147141
3085
У Великобританії на фото в паспорті не дозволяється з’являтись
02:46
with electronic equipment, but I insisted
51
150226
2812
з електронними пристроями, але я наполіг що те,
02:48
to the passport office that what they were seeing
52
153038
2401
що вони бачать,
02:51
was actually a new part of my body,
53
155439
2504
було насправді новою частиною мого тіла,
02:53
an extension of my brain, and they finally accepted me
54
157943
3520
продовженням мого мозку, і вони, врешті-решт, дозволили мені
02:57
to appear with the passport photo.
55
161463
2511
так виглядати на паспортному фото.
02:59
So, life has changed dramatically since I hear color,
56
163974
3457
Таким чином, моє життя різко змінилось, відтоді, як я чую кольори,
03:03
because color is almost everywhere,
57
167431
2594
тому що кольори є майже повсюди.
03:05
so the biggest change for example is
58
170025
2877
Найбільшою зміною є, наприклад,
03:08
going to an art gallery, I can listen to a Picasso,
59
172902
4538
похід в галерею мистецтв, де я можу слухати Пікассо.
03:13
for example. So it's like I'm going to a concert hall,
60
177440
2854
Таке відчуття, наче я в концертному залі,
03:16
because I can listen to the paintings.
61
180294
2211
тому що я можу слухати картини.
03:18
And supermarkets, I find this is very shocking,
62
182505
2461
І супермаркети, це шокуюче,
03:20
it's very, very attractive to walk along a supermarket.
63
184966
2950
це дуже-дуже цікаво ходити по супермаркету.
03:23
It's like going to a nightclub.
64
187916
1488
Це як нічний клуб.
03:25
It's full of different melodies. (Laughter) Yeah.
65
189404
3256
Він повен різних мелодій. (Сміх) Так.
03:28
Especially the aisle with cleaning products.
66
192660
2075
Особливо відділ з миючими засобами.
03:30
It's just fabulous. (Laughter)
67
194735
3351
Це просто казково. (Сміх)
03:33
Also, the way I dress has changed.
68
198086
2472
Також змінилось те, як я одягаюсь.
03:36
Before, I used to dress in a way that it looked good.
69
200558
2408
Колись я одягався так, щоб виглядати гарно.
03:38
Now I dress in a way that it sounds good. (Laughter)
70
202966
4577
Тепер я одягаюсь так, щоб звучати гарно. (Сміх)
03:43
(Applause)
71
207543
5131
(Оплески)
03:48
So today I'm dressed in C major,
72
212674
2509
Тому сьогодні я одягнений у до-мажорі,
03:51
so it's quite a happy chord. (Laughter)
73
215183
3309
це досить веселий акорд. (Сміх)
03:54
If I had to go to a funeral, though,
74
218492
1874
Якщо мені потрібно буде йти на похорон,
03:56
I would dress in B minor, which would be
75
220366
2567
то я одягнусь в сі-мінорі, це буде
03:58
turquoise, purple and orange. (Laughter)
76
222933
8759
бірюзовий, пурпурний і помаранчевий. (Сміх)
04:07
Also, food, the way I look at food has changed,
77
231692
4345
Також їжа, змінилось те, як я дивлюсь на їжу,
04:11
because now I can display the food on a plate,
78
236037
3456
тому що тепер я розставляю їжу на тарілці так,
04:15
so I can eat my favorite song. (Laughter)
79
239493
2952
що можу з’їсти свою улюблену пісню. (Сміх)
04:18
So depending on how I display it,
80
242445
1229
Все залежить від того, як я її розставляю.
04:19
I can hear and I can compose music with food.
81
243674
2750
Я можу слухати і компонувати музику з їжі.
04:22
So imagine a restaurant where we can have, like,
82
246424
2725
Уявіть собі ресторан, де вам можуть подати щось типу
04:25
Lady Gaga salads as starters. (Laughter) I mean,
83
249149
2984
салату Леді Ґаґа на закуску. (Сміх) Я веду до того,
04:28
this would get teenagers to eat their vegetables, probably.
84
252133
3017
що це, можливо, змусить підлітків їсти овочі.
04:31
And also, some Rachmaninov piano concertos
85
255150
3439
Фортепіанний концерт Рахманінова
04:34
as main dishes, and some Bjork or Madonna desserts,
86
258589
3234
в якості основної страви, і Бйорк чи Мадонна на десерт,
04:37
that would be a very exciting restaurant
87
261823
3109
це був би вражаючий ресторан,
04:40
where you can actually eat songs.
88
264932
2760
де б Ви могли їсти пісні.
04:43
Also, the way I perceive beauty has changed,
89
267692
4450
Також змінилось те, як я сприймаю красу,
04:48
because when I look at someone, I hear their face,
90
272142
4680
тому що, коли я дивлюсь на когось, я чую їх обличчя.
04:52
so someone might look very beautiful but sound terrible.
91
276822
5002
Хтось може виглядати дуже гарно, але звучати жахливо.
04:57
(Laughter) And it might happen the opposite,
92
281824
1761
(Сміх) А може бути й навпаки.
04:59
the other way around. So I really enjoy creating, like,
93
283585
2248
Я справді люблю творити
05:01
sound portraits of people.
94
285833
1729
звукові портрети людей.
05:03
Instead of drawing someone's face, like drawing the shape,
95
287562
3640
Замість того, щоб малювати чиєсь обличчя, я люблю малювати форми.
05:07
I point at them with the eye and I write down
96
291202
2431
Я наводжу на їх обличчя електронне око і записую
05:09
the different notes I hear, and then I create sound portraits.
97
293633
3271
різні ноти, які я чую, і тоді створюю звуковий портрет.
05:12
Here's some faces.
98
296904
1737
Ось деякі обличчя.
05:14
(Musical chords)
99
298641
14527
(Музичні акорди)
05:29
Yeah, Nicole Kidman sounds good. (Laughter)
100
313168
3433
Так, Ніколь Кідман звучить гарно. (Сміх)
05:32
Some people, I would never relate, but they sound similar.
101
316601
3049
Буває так, що люди, які взагалі не пов’язані між собою, звучать однаково.
05:35
Prince Charles has some similarities with Nicole Kidman.
102
319650
2798
Принц Чарльз має схожості з Ніколь Кідман.
05:38
They have similar sound of eyes.
103
322448
2137
В них однаковий звук очей.
05:40
So you relate people that you wouldn't relate,
104
324585
2048
І так ви співставляєте людей, яких би ніколи не співставили.
05:42
and you can actually also create concerts
105
326633
3513
Ви можете також створювати концерти,
05:46
by looking at the audience faces.
106
330146
2640
дивлячись на обличчя аудиторії.
05:48
So I connect the eye, and then I play the audience's faces.
107
332786
3096
Я під'єдную око, і потім програю обличчя публіки.
05:51
The good thing about this is,
108
335882
1504
Плюсом в цьому є те,
05:53
if the concert doesn't sound good, it's their fault.
109
337386
2967
що, коли концерт звучить не дуже гарно, це їхня провина,
05:56
It's not my fault, because — (Laughter)
110
340353
2271
не моя, тому що – (Сміх)
05:58
And so another thing that happens is that
111
342624
4307
Трапилося іще дещо -
06:02
I started having this secondary effect
112
346931
2877
у мене з'явився вторинний ефект:
06:05
that normal sounds started to become color.
113
349808
3330
звичайні звуки почали ставати кольором.
06:09
I heard a telephone tone, and it felt green
114
353138
3761
Я чую дзвінок телефону і відчуваю зелений колір,
06:12
because it sounded just like the color green.
115
356899
2326
тому що він звучить просто так, як зелений колір.
06:15
The BBC beeps, they sound turquoise,
116
359225
3298
Звуковий сигнал ВВС звучить як бірюзовий колір,
06:18
and listening to Mozart became a yellow experience,
117
362523
3127
а слухаючи Моцарта, я бачу жовтий.
06:21
so I started to paint music and paint people's voices,
118
365650
4760
Я почав малювати музику і людські голоси,
06:26
because people's voices have frequencies
119
370410
1943
тому що людські голоси мають частоти,
06:28
that I relate to color.
120
372353
1543
які я співвідношу з кольорами.
06:29
And here's some music translated into color.
121
373896
5119
Ось деякі музичні фрагменти, перекладені на кольори.
06:34
For example, Mozart, "Queen of the Night," looks like this.
122
379015
5200
Для прикладу, «Королева ночі» Моцарта виглядає ось так.
06:40
(Music) Very yellow and very colorful,
123
384215
1812
(Музика) Дуже жовта і дуже кольорова,
06:41
because there's many different frequencies.
124
386027
2190
оскільки тут багато різних частот.
06:44
(Music)
125
388217
2910
(Музика)
06:48
And this is a completely different song.
126
392143
2314
А ось це зовсім інша пісня.
06:50
(Music) It's Justin Bieber's "Baby." (Laughter)
127
394457
3931
(Музика) Це Джастін Бібер «Baby». (Сміх)
06:54
(Music)
128
398388
1731
(Музика)
06:56
It is very pink and very yellow.
129
400119
3570
Вона дуже рожева і дуже жовта.
06:59
So, also voices, I can transform speeches into color,
130
403689
7167
Те саме з голосами, я можу перетворити їх у кольори.
07:06
for example, these are two very well-known speeches.
131
410856
3544
Наприклад, ці дві досить відомі промови:
07:10
One of them is Martin Luther King's "I Have A Dream,"
132
414400
3737
одна належить Мартіну Лютеру Кінгу «У мене є мрія»,
07:14
and the other one is Hitler.
133
418137
1452
а інша Гітлеру.
07:15
And I like to exhibit these paintings in the exhibition halls
134
419589
3476
Мені подобається вивішувати їх у виставковому залі,
07:18
without labels, and then I ask people,
135
423065
2576
не підписавши, і тоді питати людей:
07:21
"Which one do you prefer?"
136
425641
1847
«Яка вам більше подобається?».
07:23
And most people change their preference
137
427488
2265
І більшість людей змінюють своє вподобання,
07:25
when I tell them that the one on the left is Hitler
138
429753
2911
коли я кажу їм, що картина зліва - це Гітлер,
07:28
and the one on the right is Martin Luther King.
139
432664
3120
а справа - Мартін Лютер Кінг.
07:31
So I got to a point when I was able to perceive 360 colors,
140
435784
5739
І так я досяг ширини спектру в 360 кольорів,
07:37
just like human vision.
141
441523
1585
який розрізняє і зір нормальної людини.
07:39
I was able to differentiate all the degrees of the color wheel.
142
443108
3595
Я був спроможний розрізнити всі кольори на колірному крузі.
07:42
But then, I just thought that
143
446703
2082
Але потім я зрозумів, що
07:44
this human vision wasn't good enough.
144
448785
3239
людський зір недостатньо хороший.
07:47
There's many, many more colors around us
145
452024
2211
Є набагато більше кольорів довкола нас,
07:50
that we cannot perceive,
146
454235
1837
які ми не можемо сприйняти,
07:51
but that electronic eyes can perceive.
147
456072
1756
але електронне око може.
07:53
So I decided to continue extending my color senses,
148
457828
3729
Тому я вирішив продовжити розвиток свого чуття кольору,
07:57
and I added infrared and I added ultraviolet
149
461557
4250
і я додав інфрачервоний та ультрафіолетовий
08:01
to the color-to-sound scale, so now I can hear colors
150
465807
3358
в шкалу «колір-звук». Тепер я можу чути кольори,
08:05
that the human eye cannot perceive.
151
469165
2224
які не сприймає людське око.
08:07
For example, perceiving infrared is good because you can
152
471389
3447
Наприклад, сприйняття ультрачервоного є добре тим, що ви можете
08:10
actually detect if there's movement detectors in a room.
153
474836
4068
визначити, чи є в кімнаті датчик руху.
08:14
I can hear if someone points at me with a remote control.
154
478904
3453
Я можу почути, що хтось спрямував на мене пульт дистанційного керування.
08:18
And the good thing about perceiving ultraviolet is that
155
482357
3150
І сприйняття ультрафіолету є хорошим ще тим, що
08:21
you can hear if it's a good day or a bad day to sunbathe,
156
485507
4965
ви може почути хороший це чи поганий день для засмагання,
08:26
because ultraviolet is a dangerous color,
157
490472
2157
тому що ультрафіолет є небезпечним кольором,
08:28
a color that can actually kill us, so I think we should all have this wish
158
492629
3984
який може нас навіть вбити. Я думаю, що нам усім хотілося б
08:32
to perceive things that we cannot perceive.
159
496613
2961
сприймати речі, які ми не можемо сприйняти.
08:35
That's why, two years ago,
160
499574
1735
Тому, два роки тому
08:37
I created the Cyborg Foundation,
161
501309
1681
я створив «Cyborg Foundation»,
08:38
which is a foundation that tries to help people
162
502990
2442
це фонд, який допомагає людям
08:41
become a cyborg, tries to encourage people
163
505432
2697
стати кіборгами, намагається заохотити їх
08:44
to extend their senses
164
508129
1377
розширити діапазон їх відчуттів,
08:45
by using technology as part of the body.
165
509506
3071
використовуючи технології, як частину тіла.
08:48
We should all think that knowledge comes from our senses,
166
512577
3903
Ми всі повинні розуміти, що знання походять від наших відчуттів,
08:52
so if we extend our senses,
167
516480
1976
тому, якщо ми розширимо наші відчуття,
08:54
we will consequently extend our knowledge.
168
518456
3088
ми тим самим розширимо свої знання.
08:57
I think life will be much more exciting
169
521544
2793
Я думаю, життя стане більш захоплюючим,
09:00
when we stop creating applications for mobile phones
170
524337
3224
коли ми припинимо створювати додатки до телефона,
09:03
and we start creating applications for our own body.
171
527561
3401
і почнемо створювати додатки до нашого власного тіла.
09:06
I think this will be a big, big change
172
530962
1816
Я вважаю, що це буде велика, велика зміна,
09:08
that we will see during this century.
173
532778
2078
яку ми побачимо в цьому столітті.
09:10
So I do encourage you all to think about which senses
174
534856
3915
Тому я вас всіх заохочую подумати про те, які відчуття
09:14
you'd like to extend.
175
538771
1419
ви б хотіли розширити.
09:16
I would encourage you to become a cyborg.
176
540190
3173
Я заохочую вас стати кіборгами.
09:19
You won't be alone. Thank you. (Applause)
177
543363
4648
Ви не будете самотні. Дякую. (Оплески)
09:23
(Applause)
178
548011
6520
(Оплески)
ABOUT THE SPEAKER
Neil Harbisson - Sonochromatic Cyborg ArtistNeil Harbisson's "eyeborg" allows him to hear colors, even those beyond the range of sight.
Why you should listen
Born with the inability to see color, Neil Harbisson wears a prosthetic device — he calls it an "eyeborg" — that allows him to hear the spectrum, even those colors beyond the range of human sight. His unique experience of color informs his artwork — which, until he met cyberneticist Adam Montandon at a college lecture, was strictly black-and-white. By working with Montandon, and later with Peter Kese, Harbisson helped design a lightweight eyepiece that he wears on his forehead that transposes the light frequencies of color hues into sound frequencies.
Harbisson's artwork blurs the boundaries between sight and sound. In his Sound Portraits series, he listens to the colors of faces to create a microtonal chord. In the City Colours project, he expresses the capital cities of Europe in two colors (Monaco is azure and salmon pink; Bratislava yellow and turquoise).
Neil Harbisson | Speaker | TED.com