TED2008
Tod Machover + Dan Ellsey: Inventing instruments that unlock new music
トッド・マコーバー ＋ ダン・エルシー: 新しい音楽の可能性を開く楽器を作る
Filmed:
Readability: 4.1
578,384 views
MITメディアラボのトッド・マコーバーは音楽表現を大音楽家からアマチュアまで、誰にでもできるものとし、オペラからテレビゲームまで、あらゆる形態で可能とすべく研究しています。トッド・マコーバーと作曲家ダン・エルシーが次に何が可能になるかを紹介します。
Tod Machover - Composer, inventor
At MIT's Media Lab, Tod Machover creates boundary-breaking new music, often using new instruments and music technologies he has invented. Full bioDan Ellsey - Musician
Dan Ellsey uses Hyperscore music software and a custom-tuned musical "hyperinstrument" to write, perform and conduct his music, and to help others learn how to compose. Full bio
At MIT's Media Lab, Tod Machover creates boundary-breaking new music, often using new instruments and music technologies he has invented. Full bioDan Ellsey - Musician
Dan Ellsey uses Hyperscore music software and a custom-tuned musical "hyperinstrument" to write, perform and conduct his music, and to help others learn how to compose. Full bio
Double-click the English transcript below to play the video.
00:18
The first idea I'd like to suggest is that we all
0
0
2000
最初にお話ししたいことは
みんな音楽が大好きだ ということです
みんな音楽が大好きだ ということです
00:20
love music a great deal. It means a lot to us.
1
2000
3000
これはとても大事なことです
00:23
But music is even more powerful if you don't just listen to it, but you make it yourself.
2
5000
6000
聞くだけでなく
自分で音楽を作ることができれば
自分で音楽を作ることができれば
もっと音楽は力強いものになります
00:29
So, that's my first idea. And we all know about the Mozart effect --
3
11000
3000
これが最初のテーマです
さて皆さん「モーツァルト効果」をご存知ですね？
00:32
the idea that's been around for the last five to 10 years --
4
14000
3000
10年ほど前から良く聞かれる話です
00:35
that just by listening to music or by playing music to your baby [in utero],
5
17000
4000
胎内の赤ちゃんに音楽を聞かせたり
音楽を演奏してあげたりするだけで
音楽を演奏してあげたりするだけで
00:39
that it'll raise our IQ points 10, 20, 30 percent.
6
21000
4000
IQが10から30も良くなると言うのです
00:43
Great idea, but it doesn't work at all.
7
25000
3000
素晴らしい考えなんですが そうはいきません
00:46
So, you can't just listen to music, you have to make it somehow.
8
28000
3000
ただ音楽を聞くだけではダメなんです
何らかの方法で音楽を創る必要があるんですよ
00:49
And I'd add to that, that it's not just making it,
9
31000
4000
そして付け加えたいことは
これはただ単に音楽を創るというのではなく
00:53
but everybody, each of us, everybody in the world
10
35000
2000
われわれは皆 誰でも
00:55
has the power to create and be part of music in a very dynamic way,
11
37000
4000
非常にダイナミックな方法で音楽を創造し
音楽そのものの一部となる能力が
ある ということなんです
ある ということなんです
00:59
and that's one of the main parts of my work.
12
41000
2000
これが私の研究の大事なテーマです
01:01
So, with the MIT Media Lab, for quite a while now,
13
43000
2000
MITメディアラボでこれまで長期に渡り
01:03
we've been engaged in a field called active music.
14
45000
2000
我々が取り組んできたのが
能動的音楽（アクティブ・ミュージック）
と呼ばれるプロジェクトです
と呼ばれるプロジェクトです
01:05
What are all the possible ways that we can think of
15
47000
2000
誰にでも音楽体験に
参加できるようにするためには
参加できるようにするためには
01:07
to get everybody in the middle of a musical experience,
16
49000
3000
どんな方法があるか？ というのがテーマです
01:10
not just listening, but making music?
17
52000
3000
単に音楽を聞くだけでなく
音楽を創造することを可能にする方法が
あるのでしょうか？
あるのでしょうか？
01:13
And we started by making instruments for some of the world's greatest performers --
18
55000
3000
まず最高の音楽家向けの特別な楽器を
開発することから着手しました
開発することから着手しました
01:16
we call these hyperinstruments -- for Yo-Yo Ma, Peter Gabriel, Prince,
19
58000
3000
我々が「ハイパーインスツルメント」と
名付けた楽器は ヨー・ヨー・マ
名付けた楽器は ヨー・ヨー・マ
ピーター・ガブリエル、プリンスや
01:19
orchestras, rock bands. Instruments where they're all kinds of sensors
20
61000
4000
オーケストラやロックバンド向きに開発されました
楽器には
あらゆる種類のセンサーが組み込まれて
あらゆる種類のセンサーが組み込まれて
01:23
built right into the instrument, so the instrument knows how it's being played.
21
65000
3000
楽器がどのように演奏されているのかを
把握することが出来るわけです
把握することが出来るわけです
01:26
And just by changing the interpretation and the feeling,
22
68000
3000
把握した演奏状態データの
解釈や感覚を変えて
解釈や感覚を変えて
01:29
I can turn my cello into a voice, or into a whole orchestra,
23
71000
3000
チェロの音色を人の音声に変換することや
大きなオーケストラの演奏に
01:32
or into something that nobody has ever heard before.
24
74000
3000
また誰も聞いた事がない音楽にも変換できます
01:35
When we started making these, I started thinking, why can't we make
25
77000
2000
これらの楽器を開発するようになったとき
01:37
wonderful instruments like that for everybody,
26
79000
2000
このような素晴らしい楽器を一般の人向けに
01:39
people who aren't fantastic Yo-Yo Mas or Princes?
27
81000
4000
つまり ヨー・ヨー・マやプリンスのように
才能ある音楽家ではない一般の人向けにも
作ってみようと考えるようになったのです
01:43
So, we've made a whole series of instruments.
28
85000
2000
その結果 我々は一連の楽器を開発しました
01:45
One of the largest collections is called the Brain Opera.
29
87000
3000
これらを集大成したものの一つが
「ブレイン・オペラ」です
「ブレイン・オペラ」です
01:48
It's a whole orchestra of about 100 instruments,
30
90000
2000
100種類もの楽器からなる
オーケストラのようなものです
オーケストラのようなものです
01:50
all designed for anybody to play using natural skill.
31
92000
3000
全て 特別な練習をすることなく
誰もが演奏できるように設計されています
01:53
So, you can play a video game, drive through a piece of music,
32
95000
3000
つまりテレビゲームで遊ぶように
音楽の中を車で駆け抜けたり
01:56
use your body gesture to control huge masses of sound,
33
98000
3000
身振りで大量の音をコントロールしたり
01:59
touch a special surface to make melodies, use your voice to make a whole aura.
34
101000
5000
特殊加工された表面に触れて
メロディーを創り上げたり
メロディーを創り上げたり
自分の音声で音楽に独特の雰囲気を加えたり
することが可能になります
することが可能になります
ブレイン・オペラの公演では 一般の観客を招き
02:04
And when we make the Brain Opera, we invite the public to come in,
35
106000
2000
02:06
to try these instruments and then collaborate with us
36
108000
3000
この楽器を使ってもらい
我々と共演してもらうことで
毎回の公演を
一緒に創り上げることにしたのです
一緒に創り上げることにしたのです
02:09
to help make each performance of the Brain Opera.
37
111000
1000
02:10
We toured that for a long time. It is now permanently in Vienna,
38
112000
3000
ブレイン・オペラは長期に渡って
公演ツアーされました
公演ツアーされました
現在ではウィーンに常設されていて
02:13
where we built a museum around it.
39
115000
2000
そこでは博物館の中にあります
02:15
And that led to something which you probably do know.
40
117000
3000
これは皆さんが良くご存知の
あるモノにつながりました
あるモノにつながりました
02:18
Guitar Hero came out of our lab,
41
120000
1000
ギター・ヒーロー（Activision社のゲームソフト）は
02:19
and my two teenage daughters and most of the students at the MIT Media Lab
42
121000
3000
我々の研究から生まれたものでした
私の二人の十代の娘や
02:22
are proof that if you make the right kind of interface,
43
124000
3000
MITメディアラボの多くの学生たちを見れば
適切なインターフェイスを創れれば
02:25
people are really interested in being in the middle of a piece of music,
44
127000
4000
どんな人でも
音楽の中に身を置くことに興味を持ち
音楽の中に身を置くことに興味を持ち
02:29
and playing it over and over and over again.
45
131000
3000
何度も繰り返し演奏することができる
ということが分かると思います
ということが分かると思います
02:32
So, the model works, but it's only the tip of the iceberg,
46
134000
3000
これで基本的なモデルが
うまくいくことは分かりましたが
うまくいくことは分かりましたが
これはまだ氷山の一角です
02:35
because my second idea is that it's not enough just to want
47
137000
3000
つまり私の二番目のアイディアでは
ギター・ヒーローのようなゲームの中で
02:38
to make music in something like Guitar Hero.
48
140000
3000
単に音楽を作りたい
というだけでは不十分だからです
というだけでは不十分だからです
02:41
And music is very fun, but it's also transformative.
49
143000
3000
つまり 音楽はとても楽しいものではありますが
もっと変化させる力を持つものでもあるからです
これはとても大事なことです
02:44
It's very, very important.
50
146000
1000
02:45
Music can change your life, more than almost anything.
51
147000
3000
音楽は他の何にも増して
人生を変えるような力を持っています
02:48
It can change the way you communicate with others,
52
150000
2000
音楽は人々がお互いにコミュニケートする仕方を
変えることができます
02:50
it can change your body, it can change your mind. So, we're trying
53
152000
3000
音楽は人の身体を変えることも
心を変える力も持っています
心を変える力も持っています
02:53
to go to the next step of how you build on top of something like Guitar Hero.
54
155000
4000
そこで 我々は
ギター・ヒーローの次の段階に進むべく
プロジェクトを開始したのです
プロジェクトを開始したのです
02:57
We are very involved in education. We have a long-term project
55
159000
3000
我々は教育と深い関係があります
トイ・シンフォニーという長期間のプロジェクトでは
03:00
called Toy Symphony, where we make all kinds of instruments that are also addictive,
56
162000
4000
幼い子供は別として
小さな子供たちが夢中になってしまうような
小さな子供たちが夢中になってしまうような
様々な楽器を開発しました
03:04
but for little kids, so the kids will fall in love with making music,
57
166000
4000
知らず知らずに
音楽を作ることに引き込まれてしまい
音楽を作ることに引き込まれてしまい
03:08
want to spend their time doing it, and then will demand to know how it works,
58
170000
3000
時間を忘れてのめりこみ
しかも「この楽器はどうして音が出るのだろう」
とか
とか
03:11
how to make more, how to create. So, we make squeezy instruments,
59
173000
3000
「もっと音楽を作るにはどうすれば
よいのだろう？」と
よいのだろう？」と
03:14
like these Music Shapers that measure the electricity in your fingers,
60
176000
4000
要求するものを開発したのです
その一つが握ることで音の出る楽器で
その一つが握ることで音の出る楽器で
「ミュージック・シェイパー｣と名付けたものです
これは指に流れる電流を測って音楽にします
これは指に流れる電流を測って音楽にします
これは指に流れる電流を測って音楽にします
03:18
Beatbugs that let you tap in rhythms -- they gather your rhythm,
61
180000
3000
「ビート・バグ」と名付けた楽器は
軽く叩くとそのリズムを自動的に拾い上げ
軽く叩くとそのリズムを自動的に拾い上げ
03:21
and like hot potato, you send your rhythm to your friends,
62
183000
2000
バトンタッチをするようにそのリズムを
人から人へと受け渡します
人から人へと受け渡します
受け取った人は
03:23
who then have to imitate or respond to what your doing --
63
185000
3000
そのリズムを真似したり
反応したりしなければなりません
反応したりしなければなりません
03:26
and a software package called Hyperscore, which lets anybody use lines and color
64
188000
4000
「ハイパー・スコア」という名のソフトウェアも
開発しました
開発しました
これを使うとどんな人でもディスプレイ上に
線を引いたり それに色をつけたりする事で
線を引いたり それに色をつけたりする事で
03:30
to make quite sophisticated music. Extremely easy to use, but once you use it,
65
192000
4000
相当に高度な音楽を作り出すことができます
また極めて操作が容易で 一度使えば
03:34
you can go quite deep -- music in any style. And then, by pressing a button,
66
196000
4000
どんなスタイルの音楽にも
のめりこむことが可能になります
のめりこむことが可能になります
03:38
it turns into music notation so that live musicians can play your pieces.
67
200000
6000
しかも ボタン一つで
譜面に変換して プロの演奏家が
演奏することだって出来るんです
演奏することだって出来るんです
03:44
We've had good enough, really, very powerful effects with kids
68
206000
3000
世界中の子供たちに大きな影響がありました
03:47
around the world, and now people of all ages, using Hyperscore.
69
209000
3000
あらゆる年代の人が
「ハイパー・スコア」を使います
「ハイパー・スコア」を使います
03:50
So, we've gotten more and more interested in using these kinds of creative activities
70
212000
4000
このような創造的な活動をもっと広い領域で
しかもあらゆる人々に対して
しかもあらゆる人々に対して
03:54
in a much broader context, for all kinds of people
71
216000
2000
展開することに益々興味がわいてきたのです
03:56
who don't usually have the opportunity to make music.
72
218000
3000
普段 音楽を作るチャンスなどないような人達に対して使うことに関心が湧いてきたわけです
03:59
So, one of the growing fields that we're working on
73
221000
1000
MITメディアラボにおいて我々が取り組んでいて
04:00
at the Media Lab right now is music, mind and health.
74
222000
3000
しかも拡大している領域の一つが
音楽と心と健康の領域です
04:03
A lot of you have probably seen Oliver Sacks' wonderful new book called
75
225000
3000
多くの方が オリバー・サックスの
素晴らしい新刊をご存知と思います
素晴らしい新刊をご存知と思います
04:06
"Musicophilia". It's on sale in the bookstore. It's a great book.
76
228000
4000
「ミュジコフィリア―音楽嗜好症」
素晴らしい本です
素晴らしい本です
04:10
If you haven't seen it, it's worth reading. He's a pianist himself,
77
232000
2000
是非お読み下さい
著者自身 ピアニストです
著者自身 ピアニストです
04:12
and he details his whole career of looking at and observing
78
234000
4000
この本で彼は 自らの体験から
尋常でない境遇におかれた人々に対して
尋常でない境遇におかれた人々に対して
04:16
incredibly powerful effects that music has had on peoples' lives in unusual situations.
79
238000
5000
音楽がいかに大きな影響を与えたか
述べています
述べています
04:21
So we know, for instance, that music is almost always the last thing
80
243000
3000
例えば
アルツハイマー症患者で症状が進行しても
アルツハイマー症患者で症状が進行しても
04:24
that people with advanced Alzheimer's can still respond to.
81
246000
4000
最後まで音楽には反応することが
知られています
知られています
04:28
Maybe many of you have noticed this with loved ones,
82
250000
2000
皆さんのご家族でこのような経験を
お持ちの方がいらっしゃるのではないでしょうか？
お持ちの方がいらっしゃるのではないでしょうか？
04:30
you can find somebody who can't recognize their face in the mirror,
83
252000
2000
例えば鏡に映った自分を見ても
誰か認識できないような症状であったり
誰か認識できないような症状であったり
04:32
or can't tell anyone in their family, but you can still find a shard of music
84
254000
3000
家族も認識できなくなった患者でも
音楽には反応することがあります
音楽には反応することがあります
04:35
that that person will jump out of the chair and start singing. And with that
85
257000
4000
突然椅子から飛び起きて
歌い出すこともあります
歌い出すこともあります
04:39
you can bring back parts of people's memories and personalities.
86
261000
2000
このように記憶や人格を
一部でも取り戻すことがあるのです
一部でも取り戻すことがあるのです
04:41
Music is the best way to restore speech to people who have lost it through strokes,
87
263000
4000
脳卒中のために言語障害のある人でも
音楽は言語能力を取り戻すのに
最も良い方法なんです
最も良い方法なんです
04:45
movement to people with Parkinson's disease.
88
267000
2000
あるいは パーキンソン病の人に運動能力を
取り戻す方法としても です
取り戻す方法としても です
04:47
It's very powerful for depression, schizophrenia, many, many things.
89
269000
4000
うつ病や統合失調症など
いろいろな病状の改善に音楽は大変役立ちます
いろいろな病状の改善に音楽は大変役立ちます
そこで 私たちはなぜこういう効果があるのか
04:51
So, we're working on understanding those underlying principles
90
273000
2000
04:53
and then building activities which will let music really improve people's health.
91
275000
4000
その根本原理を理解しようと研究を進めています
音楽を用いて人々の健康を改善するような
活動を開発しようとしています
活動を開発しようとしています
04:57
And we do this in many ways. We work with many different hospitals.
92
279000
3000
様々なアプローチからこれに取り組んでいます
例えば複数の病院と
共同研究に取り組んでいます
共同研究に取り組んでいます
05:00
One of them is right near Boston, called Tewksbury Hospital.
93
282000
3000
一つが
ボストン近郊の テュークスベリー病院です
ボストン近郊の テュークスベリー病院です
05:03
It's a long-term state hospital, where several years ago
94
285000
2000
ここは長期療養の州立病院ですが
数年前から
数年前から
05:05
we started working with Hyperscore and patients with physical and mental disabilities.
95
287000
4000
この病院の身体や精神に障害をもった患者達に
ハイパー・スコアを使った取り組みをはじめました
ハイパー・スコアを使った取り組みをはじめました
05:09
This has become a central part of the treatment at Tewksbury hospital,
96
291000
4000
テュークスベリー病院における治療の
中心を占めるようになって
中心を占めるようになって
05:13
so everybody there clamors to work on musical activities.
97
295000
4000
皆が音楽活動をしたくて
ウズウズしている状態なんです
ウズウズしている状態なんです
05:17
It's the activity that seems to accelerate people's treatment the most
98
299000
4000
これは患者に対する治療を
最も向上させる活動と言えると思います
最も向上させる活動と言えると思います
05:21
and it also brings the entire hospital together as a kind of musical community.
99
303000
4000
これが病院中に音楽活動で結びついた
共同体意識をもたらしているのです
共同体意識をもたらしているのです
05:25
I wanted to show you a quick video of some of this work before I go on.
100
307000
4000
これまでのプロジェクトをまとめた
短い映像をご覧に入れましょう
短い映像をご覧に入れましょう
06:10
Video: They're manipulating each other's rhythms.
101
352000
2000
これは子供たちがリズムを
操作しているところです
操作しているところです
06:12
It's a real experience, not only to learn how to play and listen to rhythms,
102
354000
4000
リズムを演奏したり聞いたりすることを
学ぶだけでなく
学ぶだけでなく
06:16
but to train your musical memory and playing music in a group.
103
358000
5000
音楽的な記憶力や 人に合わせて
合奏することを学べるのです
合奏することを学べるのです
06:21
To get their hands on music, to shape it themselves, change it,
104
363000
4000
自分自身で曲を作ったり 変えたり
06:25
to experiment with it, to make their own music.
105
367000
2000
自分自身の曲にしていくことも出来るんです
06:27
So Hyperscore lets you start from scratch very quickly.
106
369000
4000
つまりハイパースコアでは
まったくゼロの状態から
まったくゼロの状態から
短期間で始める事ができるのです
誰もが非常に深いレベルで音楽を
体験することが出来るのです
体験することが出来るのです
06:38
Everybody can experience music in a profound way,
107
380000
2000
06:40
we just have to make different tools.
108
382000
2000
それには今までにない道具を作る
必要があります
必要があります
06:59
The third idea I want to share with you is that music, paradoxically,
109
401000
6000
今日お話ししたい三つ目のテーマは
ちょっと逆説的ですが
ちょっと逆説的ですが
07:05
I think even more than words, is one of the very best ways we have
110
407000
3000
自分自身について語るためには音楽の方が
07:08
of showing who we really are. I love giving talks, although
111
410000
4000
言葉よりもすぐれた方法だ ということです
私自身皆さんの前でお話しするのは好きですが
07:12
strangely I feel more nervous giving talks than playing music.
112
414000
2000
音楽を演奏するのに比べれば
少しドキドキしてしまいます
少しドキドキしてしまいます
07:14
If I were here playing cello, or playing on a synth, or sharing my music with you,
113
416000
3000
もしチェロやシンセサイザーを弾いたり
私の曲をみなさんに披露するのであれば
私の曲をみなさんに披露するのであれば
07:17
I'd be able to show things about myself that I can't tell you in words,
114
419000
5000
言葉では伝えきれない
もっと個人的でより深いことも
もっと個人的でより深いことも
07:22
more personal things, perhaps deeper things.
115
424000
3000
皆さんにお伝えすることができるでしょう
07:25
I think that's true for many of us, and I want to give you two examples
116
427000
3000
多くの人もそうだと思います
ここで音楽が我々と自分以外とを
07:28
of how music is one of the most powerful interfaces we have,
117
430000
3000
結びつける最も有力な道具であるという
二つの例を
二つの例を
07:31
from ourselves to the outside world.
118
433000
2000
お話しましょう
07:33
The first is a really crazy project that we're building right now, called
119
435000
4000
最初の例は 今我々が取り組んでいる
変わったプロジェクトで
変わったプロジェクトで
07:37
Death and the Powers. And it's a big opera,
120
439000
2000
Death and the Powers（死とパワーズ）という
大きなオペラです
大きなオペラです
07:39
one of the larger opera projects going on in the world right now.
121
441000
4000
おそらく現在作られているオペラの中で
大規模なものの一つになるでしょう
大規模なものの一つになるでしょう
07:43
And it's about a man, rich, successful, powerful, who wants to live forever.
122
445000
5000
大成功し権力もある富豪で
不死の力を手に入れたいと願う男の物語です
不死の力を手に入れたいと願う男の物語です
07:48
So, he figures out a way to download himself into his environment,
123
450000
2000
男は自分自身に関わるあらゆるデータを
07:50
actually into a series of books.
124
452000
3000
一連の本の中にダウンロードしようとします
07:53
So this guy wants to live forever, he downloads himself into his environment.
125
455000
3000
これで男は永遠の命を
手に入れようとするのです
手に入れようとするのです
07:56
The main singer disappears at the beginning of the opera
126
458000
4000
オペラの最初に主演歌手が舞台から姿を消すと
08:00
and the entire stage becomes the main character. It becomes his legacy.
127
462000
4000
舞台全体が主人公の人格そのものになります
08:04
And the opera is about what we can share, what we can pass on to others,
128
466000
3000
このオペラは 他人とそして愛する人と
何を分かち合えるのか
何を分かち合えるのか
08:07
to the people we love, and what we can't.
129
469000
2000
何を伝えることが出来るのか
そして何を伝えられないかについてです
そして何を伝えられないかについてです
08:09
Every object in the opera comes alive and is a gigantic music instrument,
130
471000
4000
オペラの中では
あらゆるモノが命をもった巨大な楽器になります
あらゆるモノが命をもった巨大な楽器になります
08:13
like this chandelier. It takes up the whole stage. It looks like a chandelier,
131
475000
3000
例えば 舞台全体を覆うような
巨大なシャンデリアに見えるものは
巨大なシャンデリアに見えるものは
08:16
but it's actually a robotic music instrument.
132
478000
2000
実はロボット化された楽器なんです
08:18
So, as you can see in this prototype, gigantic piano strings,
133
480000
4000
この巨大なピアノの弦は
08:22
each string is controlled with a little robotic element --
134
484000
3000
小さなロボットによって制御されます
08:25
either little bows that stroke the strings, propellers that tickle the strings,
135
487000
5000
小さな弓が弦を弾き プロペラは弦を叩き
08:30
acoustic signals that vibrate the strings. We also have an army of robots on stage.
136
492000
5000
音が弦を震わせ
ステージ上には多数のロボットも登場します
ステージ上には多数のロボットも登場します
08:35
These robots are the kind of the intermediary between the main character, Simon Powers,
137
497000
4000
これらのロボットは
主人公のサイモン・パワーズと
主人公のサイモン・パワーズと
08:39
and his family. There are a whole series of them, kind of like a Greek chorus.
138
501000
4000
家族との仲介役で
古代ギリシャ劇の合唱隊のようなもので
古代ギリシャ劇の合唱隊のようなもので
08:43
They observe the action. We've designed these square robots that we're testing right now
139
505000
5000
舞台上の演技を見守っています
現在MITでテスト中のこの四角いロボットは
オペラボットと呼ばれています
08:48
at MIT called OperaBots. These OperaBots follow my music.
140
510000
3000
オペラボットは音楽に合わせて作動します
08:51
They follow the characters. They're smart enough, we hope,
141
513000
3000
登場人物を追いかけます
また 知的にできているので
08:54
not to bump into each other. They go off on their own.
142
516000
3000
お互い衝突しないはずです
08:57
And then they can also, when you snap, line up exactly the way you'd like to.
143
519000
6000
ロボットは自動的に動き出し
そして勿論 お望みのように
指を鳴らすと整列させることもできます
指を鳴らすと整列させることもできます
09:03
Even though they're cubes, they actually have a lot of personality.
144
525000
2000
単なる立方体に過ぎませんが
実際には個性を持っていると言えます
実際には個性を持っていると言えます
09:12
The largest set piece in the opera is called The System. It's a series of books.
145
534000
4000
オペラの中で最も大きな舞台装置は
「システム」と呼ばれる 大量の本です
「システム」と呼ばれる 大量の本です
09:16
Every single book is robotic, so they all move, they all make sound,
146
538000
4000
本は全部がロボットで
動いたり音を出すことが出来ます
動いたり音を出すことが出来ます
09:20
and when you put them all together, they turn into these walls,
147
542000
4000
全体が一体化するとこのような壁になります
09:24
which have the gesture and the personality of Simon Powers. So he's disappeared,
148
546000
5000
サイモンパワーズの
身振りや個性を表現するのです
身振りや個性を表現するのです
主人公は舞台上から姿を消しましたが
09:29
but the whole physical environment becomes this person.
149
551000
3000
舞台全体が主人公そのものに変化するのです
09:32
This is how he's chosen to represent himself.
150
554000
3000
このように自分自身を変身させるのが
主人公の意思だったからです
主人公の意思だったからです
09:35
The books also have high-packed LEDs on the spines. So it's all display.
151
557000
7000
本の背表紙には大量のLEDが仕掛けてあり
映像を写すことができます
09:42
And here's the great baritone James Maddalena as he enters The System.
152
564000
4000
これは著名なバリトン歌手
ジェームズ・マダレーナが
ジェームズ・マダレーナが
システムに入るところです
予告編をご覧ください
09:46
This is a sneak preview.
153
568000
1000
10:11
This premieres in Monaco -- it's in September 2009. If by any chance you can't make it,
154
593000
5000
このオペラは2009年９月に
モナコで初演の予定です
モナコで初演の予定です
万一モナコに来られない方のために
10:16
another idea with this project -- here's this guy building his legacy
155
598000
3000
このプロジェクトの
もう一つの応用例をご紹介しましょう
もう一つの応用例をご紹介しましょう
10:19
through this very unusual form, through music and through the environment.
156
601000
4000
このオペラは
自分自身の全てを音楽や環境によって
自分自身の全てを音楽や環境によって
遺産として残そうとする男の話です
10:23
But we're also making this available both online and in public spaces,
157
605000
4000
この作品をオンラインや
公共の場所で見られるようにしています
公共の場所で見られるようにしています
10:27
as a way of each of us to use music and images from our lives
158
609000
4000
自分自身や愛する人の遺産を残すために
10:31
to make our own legacy or to make a legacy of someone we love.
159
613000
3000
音楽や我々自身の映像を使うことです
10:34
So instead of being grand opera, this opera will turn into what we're
160
616000
3000
つまり 大仕掛けのオペラの代わりに
10:37
thinking of as personal opera.
161
619000
2000
パーソナル・オペラと言うべきものに
なるわけです
なるわけです
10:39
And, if you're going to make a personal opera, what about a personal instrument?
162
621000
2000
パーソナル・オペラを開発する場合
楽器はどうすればよいでしょう？
10:41
Everything I've shown you so far -- whether it's a hyper-cello for Yo-Yo Ma
163
623000
3000
ご覧に入れた ヨー・ヨー・マ用の
ハイパー・チェロにしても
ハイパー・チェロにしても
10:44
or squeezy toy for a child -- the instruments stayed the same and are valuable
164
626000
5000
子供用の握る楽器にしても
大演奏家か子供なのかは別として
10:49
for a certain class of person: a virtuoso, a child.
165
631000
3000
みなある種のレベルの人のためのものでした
10:52
But what if I could make an instrument that could be adapted
166
634000
3000
もし私が普段通りの
身振り手ぶりだけで演奏できる
身振り手ぶりだけで演奏できる
10:55
to the way I personally behave, to the way my hands work,
167
637000
4000
楽器を開発したとしたらどうでしょう？
10:59
to what I do very skillfully, perhaps, to what I don't do so skillfully?
168
641000
3000
身振りや手振りは
とてもうまくできるかも知れないし
とてもうまくできるかも知れないし
そうでないかも知れません
11:02
I think that this is the future of interface, it's the future of music, the future of instruments.
169
644000
5000
これは未来のインターフェイスであり 未来の音楽
そして未来の楽器になると思います
11:07
And I'd like now to invite two very special people on the stage,
170
649000
3000
ここで 二人の特別なゲストを招きたいと思います
11:10
so that I can give you an example of what personal instruments might be like.
171
652000
6000
きっとパーソナル楽器とは一体どんなものなのか
お分かりいただけると思います
お分かりいただけると思います
11:16
So, can you give a hand to Adam Boulanger, Ph.D. student from
172
658000
5000
MITの博士課程の学生 アダム・ブランジェーと
11:21
the MIT Media Lab, and Dan Ellsey. Dan,
173
663000
7000
ダン・エルシーを拍手でお迎えください
11:28
thanks to TED and to Bombardier Flexjet, Dan is here with us today
174
670000
7000
ダンは TEDと
ボンバルディア・フレックスジェット社のおかげで
ボンバルディア・フレックスジェット社のおかげで
テュークスベリー病院から
今日ここまで来ることが出来ました
今日ここまで来ることが出来ました
11:35
all the way from Tewksbury. He's a resident at Tewksbury Hospital.
175
677000
4000
彼はテュークスベリー病院の入院患者なんです
11:39
This is by far the farthest he's strayed from Tewksbury Hospital, I can tell you that,
176
681000
4000
これまでで最も病院から離れたところまで
足を伸ばしたことになると思います
足を伸ばしたことになると思います
11:43
because he's motivated to meet with you today and show you his own music.
177
685000
5000
それは 彼が皆さんの前で
是非自分の音楽を披露したかったからなんです
是非自分の音楽を披露したかったからなんです
11:48
So, first of all, Dan, do you want to say hi to everyone and tell everyone who you are?
178
690000
4000
ダン まずは皆さんに一言ご挨拶をお願いします
11:57
Dan Ellsey: Hello. My name is Dan Ellsey. I am 34 years old and I have cerebral palsy.
179
699000
8000
こんにちは 私はダン・エルシーといいます
34歳で 脳性麻痺の患者です
34歳で 脳性麻痺の患者です
12:05
I have always loved music and I am excited to be able to conduct
180
707000
6000
私はずっと音楽が好きで
この新しいソフトウェアを使って自分の曲を
この新しいソフトウェアを使って自分の曲を
12:11
my own music with this new software.
181
713000
2000
演奏出来るのでとてもワクワクしています
12:15
Tod Machover: And we're really excited to have you here, really Dan. (Applause)
182
717000
11000
私たちもみな 君が今日ここに来てくれて
ワクワクしていますよ
ワクワクしていますよ
私たちがダンと出会ったのは
３年半ほど前のことで
３年半ほど前のことで
12:26
So we met Dan about three years ago, three and a half years ago,
183
728000
3000
12:29
when we started working at Tewksbury. Everybody we met there was fantastic,
184
731000
5000
テュークスベリー病院で
研究を始めたときでした
研究を始めたときでした
病院で出会った人はみな素晴らしく
12:34
did fantastic music. Dan had never made music before, and it turned out
185
736000
5000
音楽の才能に溢れていました
ダンはそれまで
作曲をしたことがありませんでした
作曲をしたことがありませんでした
素晴らしい才能を持っていることが
分かったのです
分かったのです
12:39
he was really fantastic at it. He's a born composer.
186
741000
7000
生まれつきの作曲家なんです
12:46
He's very shy, too.
187
748000
3000
とても恥ずかしがり屋なんですよね
12:49
So, turned out he's a fantastic composer, and over the last few years has been
188
751000
4000
素晴らしい作曲家だと分かり
その後数年に渡り
我々と一緒に仕事をしています
我々と一緒に仕事をしています
12:53
a constant collaborator of ours. He has made many, many pieces.
189
755000
3000
彼は多くの曲を作曲してきました
12:56
He makes his own CDs. Actually, he is quite well known in the Boston area --
190
758000
3000
CDも出しました
彼はボストン地区では相当に有名なんです
12:59
mentors people at the hospital and children, locally, in how to make their own music.
191
761000
4000
病院の患者たちや地域の子供たちに
作曲を教えています
作曲を教えています
13:03
And I'll let Adam tell you. So, Adam is a Ph.D. student at MIT, an expert in music
192
765000
5000
ここでMIT博士課程の学生で音楽 技術 医学が専門のアダムをご紹介しましょう
13:08
technology and medicine. And Adam and Dan have become close collaborators.
193
770000
5000
アダムはダンと一緒に研究してきました
13:13
What Adam's been working on for this last period is not only how to have Dan
194
775000
4000
最近アダムが研究しているのは
ダンが自分自身で作曲するために
ダンが自分自身で作曲するために
13:17
be able easily to make his own pieces,
195
779000
3000
何をすれば良いのか
と言うことだけではありません
と言うことだけではありません
13:20
but how he can perform his piece using this kind of personal instrument.
196
782000
3000
ダン自身がそれを演奏するのに
個人の楽器を使うということも研究してきました
個人の楽器を使うということも研究してきました
13:23
So, you want to say a little bit about how you guys work?
197
785000
2000
どんな研究をしているか
簡単に説明してくれるかい
簡単に説明してくれるかい
13:25
Adam Boulanger: Yes. So, Tod and I entered into a discussion
198
787000
3000
ええ テュークスベリー病院で研究をしていて
13:28
following the Tewksbury work and it was really about how Dan is an expressive
199
790000
4000
ダンが大変表現豊かで知的で
かつ創造的であるということを
かつ創造的であるということを
13:32
person, and he's an intelligent and creative person. And it's in his face,
200
794000
5000
トッドと私で話したんです
ダンは顔の表情や
ダンは顔の表情や
13:37
it's in his breathing, it's in his eyes. How come he can't perform
201
799000
3000
呼吸のしかた あるいは目でそれを表すんです
それなのに 彼自身の曲を
なぜ自分で演奏できないのか？
なぜ自分で演奏できないのか？
13:40
one of his pieces of music? That's our responsibility, and it doesn't make sense.
202
802000
4000
それをできるようにするのが
我々の仕事だと思ったんです
我々の仕事だと思ったんです
13:44
So we started developing a technology that will allow him with nuance,
203
806000
3000
ダンが身体的な障害を持っていても
微妙なニュアンスを表現し
微妙なニュアンスを表現し
13:47
with precision, with control, and despite his physical disability, to be able to do that,
204
809000
5000
正確に彼自身の曲を演奏できるような技術を
13:52
to be able to perform his piece of music.
205
814000
3000
開発することにしたんです
13:55
So, the process and the technology --
206
817000
2000
まずは処理過程と技術が必要です
13:57
basically, first we needed an engineering solution. So, you know,
207
819000
3000
基本的には工学的な解決策が必要でした
14:00
we have a FireWire camera, it looked at an infrared pointer.
208
822000
3000
ご覧のようにコンピューターに接続されたカメラが赤外線による位置指示信号を関知します
14:03
We went with the type of gesture metaphor that Dan was already used to
209
825000
4000
身振りや表情など ダンがすでに会話支援装置で使い慣れている方式を
14:07
with his speaking controller.
210
829000
4000
音楽表現のための方法として採用しました
14:11
And this was actually the least interesting part of the work, you know,
211
833000
3000
設計は一番面白くない部分でした
14:14
the design process. We needed an input; we needed continuous tracking;
212
836000
3000
何を入力信号にし 持続的追跡はどうするのか
14:17
in the software, we look at the types of shapes he's making.
213
839000
3000
ソフトウェアはダンの動作のパターンを
認識していました
認識していました
14:20
But, then was the really interesting aspect of the work, following the engineering part,
214
842000
4000
しかし本当に面白い仕事は
技術的な問題の次にやってきます
技術的な問題の次にやってきます
14:24
where, basically, we're coding over Dan's shoulder at the hospital
215
846000
3000
我々は病院でダンの肩越しに
ダンがどんな風に動くのか
ダンがどんな風に動くのか
14:27
extensively to figure out, you know, how does Dan move?
216
849000
3000
見守りながら プログラムを書いていたんです
14:30
What's useful to him as an expressive motion?
217
852000
2000
音楽表現をするために
どんな動作が彼にとって役立つのか？
どんな動作が彼にとって役立つのか？
14:32
You know, what's his metaphor for performance?
218
854000
3000
つまり 彼にとっての音楽表現とは何なのか？
ということです
ということです
14:35
What types of things does he find
219
857000
2000
ダンにとって音楽のニュアンスを表現したり
伝えるためには
伝えるためには
14:37
important to control and convey in a piece of music?
220
859000
2000
どんなことが重要なのでしょうか？
14:39
So all the parameter fitting, and really the technology
221
861000
4000
変数の計算や技術を限界まで利用し
14:43
was stretched at that point to fit just Dan.
222
865000
3000
ダンが音楽をぴったり表現できるようにしました
14:46
And, you know, I think this is a perspective shift. It's not that our technologies --
223
868000
6000
これは考え方の転換です
つまりこの技術さえあれば誰でも創造的な
つまりこの技術さえあれば誰でも創造的な
14:52
they provide access, they allow us to create pieces of creative work.
224
874000
4000
音楽を作れるようになるわけではありません
14:56
But what about expression? What about that moment when an artist delivers
225
878000
3000
表現とは一体なんでしょう？
音楽家が素晴らしい曲を演奏する
音楽家が素晴らしい曲を演奏する
14:59
that piece of work? You know, do our technologies allow us to express?
226
881000
4000
瞬間の表現はどうなるのでしょう？
技術によって表現が可能になるのでしょうか？
技術によって表現が可能になるのでしょうか？
15:03
Do they provide structure for us to do that? And, you know, that's a personal relationship
227
885000
4000
技術でそんなことを可能にする
仕組みを作れるでしょうか？
仕組みを作れるでしょうか？
技術に欠けている音楽表現と
15:07
to expression that is lacking in the technological sphere. So, you know,
228
889000
4000
どう個人的にかかわっていくかということです
15:11
with Dan, we needed a new design process, a new engineering process
229
893000
3000
そこでダンのために
我々には新しい設計方法や技術が必要でした
我々には新しい設計方法や技術が必要でした
15:14
to sort of discover his movement and his path to expression that allow him to perform.
230
896000
5000
ダンの動作や表現を演奏に結びつけるための
仕組みを発見する必要があったのです
仕組みを発見する必要があったのです
15:19
And so that's what we'll do today.
231
901000
2000
今日はそれをご披露します
15:21
TM: So let's do it. So Dan do you want to tell everyone
232
903000
2000
ダン 今日これから君が演奏する曲について
15:23
about what you're going to play now?
233
905000
2000
説明してくれるかい？
15:31
DE: This is "My Eagle Song."
234
913000
2000
これは「マイ・イーグル・ソング」といいます
15:35
TM: So Dan is going to play a piece of his, called "My Eagle Song".
235
917000
3000
これからダンが演奏するのは彼が作曲した
「マイ・イーグル・ソング」です
「マイ・イーグル・ソング」です
15:38
In fact, this is the score for Dan's piece,
236
920000
2000
これはダンの曲の楽譜です
15:40
completely composed by Dan in Hyperscore.
237
922000
3000
ハイパースコアを使って
完全に一人で作曲しました
完全に一人で作曲しました
15:43
So he can use his infrared tracker to go directly into Hyperscore.
238
925000
5000
彼は赤外線追跡装置を使って
ハイパースコアを直接使うことが出来るんです
ハイパースコアを直接使うことが出来るんです
15:48
He's incredibly fast at it, too, faster than I am, in fact.
239
930000
3000
実に素早く使うことが出来ます
私よりも速いくらいです
私よりも速いくらいです
15:51
(Laughter)
240
933000
2000
（笑）
15:55
TM: He's really modest, too.
241
937000
2000
彼は謙虚ですしね
15:58
So he can go in Hyperscore. You start out by making melodies and rhythms.
242
940000
6000
ハイパースコアを使って
まずはメロディーやリズムを作ります
まずはメロディーやリズムを作ります
16:04
He can place those exactly where he wants.
243
946000
2000
これを好きなところに動かすことが出来ます
16:06
Each one gets a color. He goes back into the composition window,
244
948000
3000
それぞれには色がついており
作曲ウィンドウにもどれば
作曲ウィンドウにもどれば
16:09
draws the lines, places everything the way he wants to. Looking at the Hyperscore,
245
951000
5000
線をひいたり あらゆる要素を思いのままに
配置できます ハイパースコアをみれば
配置できます ハイパースコアをみれば
16:14
you can see it also, you can see where the sections are,
246
956000
3000
これがお分かりいただけると思います
それぞれのセクションがどこにあるか
それぞれのセクションがどこにあるか
16:17
something might continue for a while, change, get really crazy and then end
247
959000
5000
ある部分はしばらく続き 変化したり
激しくなったり 最後には
激しくなったり 最後には
16:22
up with a big bang at the end.
248
964000
3000
大きく爆発して終わったりします
16:25
So that's the way he made his piece, and as Adam says,
249
967000
3000
こうやって彼は作曲したんです
アダムがご説明したように
アダムがご説明したように
16:28
we then figured out the best way to have him perform his piece.
250
970000
7000
私たちはダン自身が演奏できるようにするための
最良の仕組みも開発しました
最良の仕組みも開発しました
16:35
It's going to be looked at by this camera, analyze his movements,
251
977000
3000
このカメラが 彼の動きを観測 分析し
16:38
it's going to let Dan bring out all the different aspects of his music that he wants to.
252
980000
4000
ダンが望むように
彼の曲の色々な特徴を引き出すことが出来ます
彼の曲の色々な特徴を引き出すことが出来ます
16:42
And you're also going to notice a visual on the screen.
253
984000
3000
スクリーン上の映像にお気づきになると思います
16:45
We asked one of our students to look at what the camera is measuring.
254
987000
6000
学生に指示して カメラがどのように動作を
測定しているのかを映すことにしました
測定しているのかを映すことにしました
16:51
But instead of making it very literal, showing you exactly
255
993000
3000
カメラの映像そのままをお見せするのではなく
16:54
the camera tracing, we turned it into a graphic that shows you the basic
256
996000
5000
画像を加工処理し グラフィックス表現にし
16:59
movement, and shows the way it's being analyzed.
257
1001000
4000
どのように動作を分析しているのかを
分かり易くして見ました
分かり易くして見ました
17:03
I think it gives an understanding of how we're picking out movement from what
258
1005000
4000
これでダンの動作をどんな風に拾い上げているのか 分かっていただけると思います
17:07
Dan's doing, but I think it will also show you, if you look at that movement,
259
1009000
4000
それだけでなく
ダンが演奏する時の動作を見れば
ダンが演奏する時の動作を見れば
17:11
that when Dan makes music, his motions are very purposeful, very precise,
260
1013000
7000
彼の動作が大変はっきりとして 正確で
17:18
very disciplined and they're also very beautiful.
261
1020000
3000
良く統制がとれており
その上大変美しいことが分かると思います
その上大変美しいことが分かると思います
17:21
So, in hearing this piece, as I mentioned before, the most important thing is
262
1023000
5000
この曲を聞いていただければ
最初に申し上げた 音楽は素晴しい という
最初に申し上げた 音楽は素晴しい という
17:26
the music's great, and it'll show you who Dan is.
263
1028000
3000
ことがお分かりいただけると思います
そしてダンがどんな人間であるかということも
17:29
So, are we ready Adam?
264
1031000
2000
アダム 用意はいいかい？
17:31
AB: Yeah.
265
1033000
2000
はい
OK それではダンが「マイ・イーグル・ソング」を
皆さんのために演奏します
皆さんのために演奏します
17:33
TM: OK, now Dan will play his piece "My Eagle Song" for you.
266
1035000
4000
(音楽)
20:01
(Applause)
267
1183000
24000
（拍手）
20:25
TM: Bravo.
268
1207000
2000
ブラボー！
20:27
(Applause)
269
1209000
9000
（拍手）
ABOUT THE SPEAKERS
Tod Machover - Composer, inventorAt MIT's Media Lab, Tod Machover creates boundary-breaking new music, often using new instruments and music technologies he has invented.
Why you should listen
Tod Machover is head of the MIT Media Lab's Hyperinstruments/Opera of the Future group. He has composed five operas and helped to develop many groundbeaking musical technologies -- including Hyperinstruments, a technology that augments musical expression for both virtuosi (from Yo-Yo Ma to Prince) and amateurs, and Hyperscore, software that allows anyone to create sophisticated, original music by using lines and colors. Many of Machover's principles about "active participation" in music are exemplified in Guitar Hero, which grew out of his lab.
Among his current projects is a new opera, Death and the Powers, complete with a musical chandelier, animatronic walls, and an army of robots. Death and the Powers premieres in Monaco in September 2009.
A recent focus of Machover's group has been on Music, Mind and Health, which marshals the power of music to promote well-being. Working with long-term patients at facilities such as Tewksbury Hospital, north of Boston, the group's goal is to develop personal musical activities that adapt to the particular skills and needs of each individual. In this way, the path to health becomes as rewarding as learning an instrument, composing a symphony, or premiering at Carnegie Hall.
Tod Machover | Speaker | TED.com
Dan Ellsey - Musician
Dan Ellsey uses Hyperscore music software and a custom-tuned musical "hyperinstrument" to write, perform and conduct his music, and to help others learn how to compose.
Why you should listen
A resident of Tewksbury Hospital in Massachusetts, Dan Ellsey has cerebral palsy and does not walk or speak. He does, however, write and play his own music, and mentor others, through a groundbreaking music system developed by MIT's Tod Machover and his team, including grad student Adam Boulanger. Working closely with this team, Ellsey helped to develop and fine-tune a head-mounted interface, tweaked to respond to his movements, that allows him to compose music and to conduct nuanced performances of his work. Hyperscore software helps Ellsey notate his musical ideas.
Ellsey's work has been performed at MIT, on the radio and at workshops around the Boston area. The Lowell Symphony Orchestra performed his piece "Our Musically" at a 2004 concert for residents of Tewksbury -- many of whom count Ellsey as a mentor in their own musical education.
Dan Ellsey | Speaker | TED.com