TED2009
Pattie Maes + Pranav Mistry: Meet the SixthSense interaction
Pattie Maes demonstriert "Sixth Sense", eine bahnbrechende, am Körper tragbare Technologie
Filmed:
Readability: 4.4
11,289,293 views
Diese Vorführung -- ein Produkt aus dem Labor Pattie Maes' am MIT, angeführt von Pranav Mistry -- war DAS Gesprächsthema bei TED. Ein Gerät mit einem Projektor, das am Körper getragen wird und umfassendem Zusammenspiel mit unserer Umgebung den Weg bahnt. Denken Sie an "Minority Report" und noch einiges mehr.
Pattie Maes - Researcher
As head of the MIT Media Lab's Fluid Interfaces Group, Pattie Maes researches the tools we use to work with information and connect with one another. Full bioPranav Mistry - Director of research, Samsung Research America
As an MIT grad student, Pranav Mistry invented SixthSense, a wearable device that enables new interactions between the real world and the world of data. Full bio
As head of the MIT Media Lab's Fluid Interfaces Group, Pattie Maes researches the tools we use to work with information and connect with one another. Full bioPranav Mistry - Director of research, Samsung Research America
As an MIT grad student, Pranav Mistry invented SixthSense, a wearable device that enables new interactions between the real world and the world of data. Full bio
Double-click the English transcript below to play the video.
00:12
I've been intrigued by this question
0
0
2000
Mich hat schon lang die Frage fasziniert,
00:14
of whether we could evolve or develop a sixth sense --
1
2000
3000
ob wir einen sechsten Sinn entwickeln oder schaffen können --
00:17
a sense that would give us seamless access
2
5000
6000
einen Sinn, der uns einen nahtlosen
00:23
and easy access to meta-information
3
11000
3000
und leichten Zugriff auf Meta-Informationen bietet,
00:26
or information that may exist somewhere
4
14000
3000
oder auf Informationen, die irgendwo vorhanden sein mögen,
00:29
that may be relevant to help us make the right decision
5
17000
3000
und die uns dabei behilflich sein können,
00:32
about whatever it is that we're coming across.
6
20000
3000
richtige Entscheidungen zu treffen, was auch immer uns begegnet.
00:35
And some of you may argue,
7
23000
3000
Und einige von Ihnen mögen sagen:
00:38
well, don't today's cell phones do that already?
8
26000
3000
Na ja, tun das die heutigen Handys nicht bereits?
00:41
But I would say no.
9
29000
2000
Ich würde aber sagen nein.
00:43
When you meet someone here at TED --
10
31000
2000
Wenn Sie sich bei TED jemanden treffen --
00:45
and this is the top networking place, of course, of the year --
11
33000
3000
und dies ist ja wohl der Haupt-Networking-Ort des Jahres --
00:48
you don't shake somebody's hand
12
36000
2000
Sie schüttlen nicht jemandem die Hand
00:50
and then say, "Can you hold on for a moment
13
38000
3000
und sagen dann "Einen Augenblick, bitte!
00:53
while I take out my phone and Google you?"
14
41000
2000
Ich nehme mein Handy raus und googele Sie."
00:55
Or when you go to the supermarket
15
43000
4000
Oder wenn Sie zum Supermarkt gehen
00:59
and you're standing there in that huge aisle
16
47000
2000
und auf dem grossen Gang stehen,
01:01
of different types of toilet papers,
17
49000
3000
mit verschiedenen Sorten Toilettenpapier,
01:04
you don't take out your cell phone, and open a browser,
18
52000
4000
nehmen Sie Ihr Handy nicht raus, um einen Browser zu öffnen
01:08
and go to a website to try to decide
19
56000
2000
und auf eine Webseite zu gehen, damit Sie entscheiden können,
01:10
which of these different toilet papers
20
58000
3000
welche dieser verschiedenen Toilettenpapiersorten
01:13
is the most ecologically responsible purchase to make.
21
61000
3000
der ökologisch vernünftigste Einkauf wäre?
01:16
So we don't really have easy access
22
64000
3000
Also, wir haben eigentlich keinen leichten Zugriff
01:19
to all this relevant information
23
67000
2000
auf alle diese relevanten Informationen,
01:21
that can just help us make optimal decisions
24
69000
3000
die uns vielleicht dabei helfen können
01:24
about what to do next and what actions to take.
25
72000
3000
über unser weiteres Vorgehen optimale Entscheidungen zu treffen.
01:27
And so my research group at the Media Lab
26
75000
4000
Und daher beschäftigt sich mein Arbeitskreis am Media Lab seit einiger Zeit
01:31
has been developing a series of inventions
27
79000
4000
mit der Entwicklung einer Reihe von Erfindungen
01:35
to give us access to this information
28
83000
3000
um uns diese Informationen
01:38
in a sort of easy way,
29
86000
2000
auf einfache Art zugänglich zu machen,
01:40
without requiring that the user changes any of their behavior.
30
88000
5000
ohne die Bedingung einer Verhaltensmodifikation seitens der Anwender.
01:45
And I'm here to unveil
31
93000
2000
Also ich bin hier, und enthülle
01:47
our latest effort,
32
95000
3000
unseren jüngsten und bislang
01:50
and most successful effort so far,
33
98000
2000
erfolgreichsten Versuch,
01:52
which is still very much a work in process.
34
100000
2000
der sich mitten in der Entwicklung befindet.
01:54
I'm actually wearing the device right now
35
102000
3000
Eigentlich trage ich momentan den Apparat am Körper
01:57
and we've sort of cobbled it together
36
105000
3000
und wir haben ihn irgendwie zusammengeflickt
02:00
with components that are off the shelf --
37
108000
3000
aus regulären Massenwaren --
02:03
and that, by the way, only cost 350 dollars
38
111000
3000
die übrigens nur 350 Dollar kosten
02:06
at this point in time.
39
114000
2000
im Moment.
02:08
I'm wearing a camera, just a simple webcam,
40
116000
4000
Ich trage eine Kamera, also eine einfache Webcam,
02:12
a portable, battery-powered projection system with a little mirror.
41
120000
6000
einen tragbaren batteriebetriebenen Projektor mit einem kleinen Spiegel.
02:18
These components communicate to my cell phone in my pocket
42
126000
4000
Diese Komponenten übermitteln Informationen an mein Handy, das in meiner Tasche ist,
02:22
which acts as the communication and computation device.
43
130000
4000
und das als ein Übermittlungs- sowie Berechnungsgerät funktioniert.
02:26
And in the video here we see my student Pranav Mistry,
44
134000
4000
Und im Video hier sehen wir meinen Studenten, Pranav Mistry,
02:30
who's really the genius who's been implementing
45
138000
3000
der tatsächlich der brillante Kopf ist, der für die Umsetzung
02:33
and designing this whole system.
46
141000
2000
und die Entwicklung dieses ganzen Systems verantwortlich ist.
02:35
And we see how this system
47
143000
2000
Und wir sehen wie dieses System
02:37
lets him walk up to any surface
48
145000
4000
ihm ermöglicht, auf irgendeine Fläche zuzugehen
02:41
and start using his hands to interact with the information
49
149000
4000
und anzufangen, seine Hände zu benutzen, um mit den
02:45
that is projected in front of him.
50
153000
2000
vor ihm projektierten Informationen zu interagieren.
02:47
The system tracks the four significant fingers.
51
155000
4000
Das System folgt den vier wichtigen Fingern.
02:51
In this case, he's wearing simple marker caps
52
159000
4000
In diesem Fall hat er einfache Marker-Kappe getragen,
02:55
that you may recognize.
53
163000
2000
die Sie vielleicht schon erkennen.
02:57
But if you want a more stylish version
54
165000
2000
Aber wenn Sie eine noch stylishere Version möchten,
02:59
you could also paint your nails in different colors.
55
167000
4000
können Sie auch Ihre Fingernägel in verschiedenen Farben lackieren.
03:03
And the camera basically tracks these four fingers
56
171000
4000
Und die Kamera folgt im Grunde diesen vier Fingern
03:07
and recognizes any gestures that he's making
57
175000
3000
und erkennt alle ihre Gesten.
03:10
so he can just go to, for example, a map of Long Beach,
58
178000
5000
Also er kann, z.B., auf die Landkarte von Long Beach zugehen,
03:15
zoom in and out, etc.
59
183000
2000
ein- oder auszoomen, usw.
03:17
The system also recognizes iconic gestures
60
185000
3000
Das System erkennt auch die bildhaften Gesten
03:20
such as the "take a picture" gesture,
61
188000
3000
wie z.B. die "Foto machen" Geste,
03:23
and then takes a picture of whatever is in front of you.
62
191000
3000
und es fotographiert, was immer sich gerade vor Ihnen befindet.
03:26
And when he then walks back to the Media Lab,
63
194000
4000
Und wenn er dann ins Media Lab zurückkehrt,¥
03:30
he can just go up to any wall
64
198000
2000
kann er einfach auf irgendeine Wand zugehen
03:32
and project all the pictures that he's taken,
65
200000
3000
und alle von ihm gemachten Fotos projektieren,
03:35
sort through them and organize them,
66
203000
2000
sie sortieren und organisieren,
03:37
and re-size them, etc.,
67
205000
2000
die Grösse ändern, usw.,
03:39
again using all natural gestures.
68
207000
3000
und das wieder mittels ganz normaler Gesten.
03:42
So, some of you most likely were here two years ago
69
210000
4000
Einige von Ihnen waren sehr wahrscheinlich vorletztes Jahr hier
03:46
and saw the demo by Jeff Han
70
214000
5000
und haben die Vorführung von Jeff Han gesehen.
03:51
or some of you may think, "Well, doesn't this look like the Microsoft Surface Table?"
71
219000
3000
Und Sie denken vielleicht "Na ja, sieht das nicht wie der Microsoft Surface Table aus?"
03:54
And yes, you also interact using natural gestures,
72
222000
5000
Und ja, Sie interagieren auch mittels normaler Gesten,
03:59
both hands, etc.
73
227000
2000
beide Hände, usw.
04:01
But the difference here is that you can use any surface,
74
229000
3000
Aber der Unterschied hier ist, dass Sie irgendeine Fläche benutzen können,
04:04
you can walk to up to any surface,
75
232000
3000
auf jedwede Fläche zugehen können,
04:07
including your hand if nothing else is available
76
235000
3000
einschlieβlich Ihrer Hände falls nichts anderes vorhanden ist,
04:10
and interact with this projected data.
77
238000
3000
und mit diesen projezierten Daten interagieren.
04:13
The device is completely portable,
78
241000
3000
Das Apparat ist völlig portabel,
04:16
and can be ...
79
244000
2000
und kann...
04:18
(Applause)
80
246000
7000
(Applaus)
04:25
So one important difference is that it's totally mobile.
81
253000
4000
Also ein wichtiger Unterschied ist, dass es völlig mobil ist.
04:29
Another even more important difference is that in mass production
82
257000
4000
Ein noch wichtigerer Unterschied ist, dass in der Massenproduktion
04:33
this would not cost more tomorrow than today's cell phones
83
261000
4000
es zukünftig nicht mehr kosten wird als heutige Handys
04:37
and would actually not sort of be a bigger packaging --
84
265000
4000
und nicht solch eine grosse Verpackung haben würde --
04:41
could look a lot more stylish
85
269000
2000
könnte viel stylisher aussehen
04:43
than this version that I'm wearing around my neck.
86
271000
3000
als diese Version hier, die ich um den Hals trage.
04:46
But other than letting some of you live out your fantasy
87
274000
6000
Aber auβer der Möglichkeit, einige von Ihnen Ihre Fantasie ausleben zu lassen,
04:52
of looking as cool as Tom Cruise in "Minority Report,"
88
280000
4000
dass Sie so cool wie Tom Cruise in "Minority Report" aussehen,
04:56
the reason why we're really excited about this device
89
284000
4000
sind wir echt begeistert von diesem Gerät,
05:00
is that it really can act as one of these sixth-sense devices
90
288000
6000
weil es tatsächlich wie eines dieser "sechter Sinn"-Geräte funktionieren kann,
05:06
that gives you relevant information
91
294000
3000
die Ihnen die relevanten Informationen
05:09
about whatever is in front of you.
92
297000
2000
über irgendetwas anbietet, was vor Ihnen steht.
05:11
So we see Pranav here going into the supermarket
93
299000
5000
Also wir schauen jetzt Pranav bei seinem Besuch im Supermarkt an
05:16
and he's shopping for some paper towels.
94
304000
3000
und er kauft einige Papierhandtücher ein.
05:19
And, as he picks up a product the system can recognize
95
307000
3000
Und wenn er ein Produkt anhebt, kann das System
05:22
the product that he's picking up,
96
310000
2000
das angehobene Produkt durch Bilderkennungs- oder
05:24
using either image recognition or marker technology,
97
312000
4000
Marker-Technologie erkennen,
05:28
and give him the green light or an orange light.
98
316000
3000
und ihm grünes bzw. rotes Licht geben.
05:31
He can ask for additional information.
99
319000
3000
Er kann auch weitere Information fordern.
05:34
So this particular choice here
100
322000
4000
Also diese Auswahl hier
05:38
is a particularly good choice, given his personal criteria.
101
326000
4000
ist nach seinen persönlichen Kriterien eine besonders gute Wahl.
05:42
Some of you may want the toilet paper with the most bleach in it
102
330000
4000
Kann sein, dass einige von Ihnen eher das Toilettenpapier mit dem meisten Bleichmittel
05:46
rather than the most ecologically-responsible choice.
103
334000
3000
der ökologisch vernüftigsten Option vorziehen.
05:49
(Laughter)
104
337000
3000
(Gelächter)
05:52
If he picks up a book in the bookstore,
105
340000
3000
Wenn er in einem Buchladen ein Buch anschaut,
05:55
he can get an Amazon rating --
106
343000
2000
kann er ein Amazon-Rating bekommen.
05:57
it gets projected right on the cover of the book.
107
345000
2000
Es wird gleich auf den Bucheinband projeziert.
05:59
This is Juan's book, our previous speaker,
108
347000
5000
Der Autor des Buches ist Juan, unser vorheriger Referent.
06:04
which gets a great rating, by the way, at Amazon.
109
352000
2000
Es wird übrigens von Amazon hervorragend bewertet.
06:06
And so, Pranav turns the page of the book
110
354000
3000
Und jetzt blättert Pranav um
06:09
and can then see additional information about the book --
111
357000
3000
und kann weitere Informationen über das Buch sehen --
06:12
reader comments, maybe sort of information by his favorite critic, etc.
112
360000
7000
Kommentare von den Lesern, vielleicht einige Information von seinem Lieblings Kritiker, usw.
06:19
If he turns to a particular page
113
367000
2000
Wenn er auf eine bestimmte Seite blättert,
06:21
he finds an annotation by maybe an expert of a friend of ours
114
369000
4000
findet er vielleicht einen Vermerk eines unserer Freunde, der ein Experte ist,
06:25
that gives him a little bit of additional information
115
373000
2000
und erhält so zusätzliche Informationen
06:27
about whatever is on that particular page.
116
375000
3000
zu beliebigen Inhalten auf dieser Seite.
06:30
Reading the newspaper --
117
378000
2000
Beim Lesen einer Zeitung --
06:32
it never has to be outdated.
118
380000
3000
olle Kamellen gibt's nicht mehr.
06:35
(Laughter)
119
383000
2000
(Gelächter)
06:37
You can get video annotations of the event that you're reading about
120
385000
4000
Sie können Video-Kommentare über das Ereignis bekommen, das Sie lesen.
06:41
You can get the latest sports scores etc.
121
389000
4000
Sie können Infos zu aktuellesten Spielständen erhalten, usw.
06:45
This is a more controversial one.
122
393000
3000
Dies ist eher umstritten.
06:48
(Laughter)
123
396000
1000
(Gelächter)
06:49
As you interact with someone at TED,
124
397000
3000
Wenn Sie mit einer Person hier bei TED interagieren,
06:52
maybe you can see a word cloud of the tags,
125
400000
4000
vielleicht sehen Sie eine Wolke aus Schlagwörtern,
06:56
the words that are associated with that person
126
404000
2000
also die mit dieser Person assoziierten Begriffe,
06:58
in their blog and personal web pages.
127
406000
3000
die sich auf ihren Blog oder ihre persönliche Webseiten befinden.
07:01
In this case, the student is interested in cameras, etc.
128
409000
5000
In diesem Fall interessiert sich der Student für Kameras, usw.
07:06
On your way to the airport,
129
414000
2000
Auf dem Weg zum Flughafen,
07:08
if you pick up your boarding pass, it can tell you that your flight is delayed,
130
416000
4000
wenn Sie Ihre Bordkarte abholen, kann es Sie informieren, ob es eine Flugverspätung gibt,
07:12
that the gate has changed, etc.
131
420000
3000
ob Sie zum anderen Flugsteig gehen müssen, usw.
07:15
And, if you need to know what the current time is
132
423000
3000
Und wenn Sie die Uhrzeit brauchen,
07:18
it's as simple as drawing a watch --
133
426000
4000
zeichnen Sie einfach eine Uhr --
07:22
(Laughter)
134
430000
1000
(Gelächter)
07:23
(Applause)
135
431000
1000
(Applaus)
07:24
on your arm.
136
432000
2000
auf Ihren Arm.
07:26
So that's where we're at so far
137
434000
4000
Also soweit sind wir bislang
07:30
in developing this sixth sense
138
438000
4000
mit der Entwicklung dieses sechten Sinnes,
07:34
that would give us seamless access to all this relevant information
139
442000
4000
der uns nahtlosen Zugriff gewähren kann auf alle diesen relevanten Informationen
07:38
about the things that we may come across.
140
446000
3000
zu Dingen, die uns begegnen.
07:41
My student Pranav, who's really, like I said, the genius behind this.
141
449000
4000
Mein Student Pranav, der wie ich gesagt habe, der brillante Kopf hinter dieser Idee ist.
07:45
(Applause) (Standing ovation)
142
453000
23000
(Applaus)
08:08
He does deserve a lot of applause
143
476000
3000
Er verdient wirklich viel Beifall,
08:11
because I don't think he's slept much in the last three months, actually.
144
479000
4000
denn er hat in den letzten drei Monaten nicht viel geschlafen, denke ich.
08:15
And his girlfriend is probably not very happy about him either.
145
483000
3000
Und seine Freundin hat wahrscheinlich auch nicht viel Freude an ihm.
08:18
But it's not perfect yet, it's very much a work in progress.
146
486000
5000
Aber es ist noch nicht perfekt, und die Entwicklung dauert noch an.
08:23
And who knows, maybe in another 10 years
147
491000
3000
Und wer weiβ, vielleicht in weiteren 10 Jahren
08:26
we'll be here with the ultimate sixth sense brain implant.
148
494000
5000
erfinden wir das ultimative Gehirnimplantat für den sechsten Sinn.
08:31
Thank you.
149
499000
1000
Dankeschön.
08:32
(Applause)
150
500000
4000
(Applaus)
ABOUT THE SPEAKERS
Pattie Maes - ResearcherAs head of the MIT Media Lab's Fluid Interfaces Group, Pattie Maes researches the tools we use to work with information and connect with one another.
Why you should listen
Pattie Maes was the key architect behind what was once called "collaborative filtering" and has become a key to Web 2.0: the immense engine of recommendations -- or "things like this" -- fueled by other users. In the 1990s, Maes' Software Agents program at MIT created Firefly, a technology (and then a startup sold to Microsoft) that let users choose songs they liked, and find similar songs they'd never heard of, by taking cues from others with similar taste. This brought a sea change in the way we interact with software, with culture and with one another.
Now Maes is working on a similarly boundary-breaking initiative. She founded Fluid Interfaces Group, also part of the MIT Media Lab, to rethink the ways in which humans and computers interact, partially by redefining both human and computer. In Maes' world (and really, in all of ours), the computer is no longer a distinct object, but a source of intelligence that's embedded in our environment. By outfitting ourselves with digital accessories, we can continually learn from (and teach) our surroundings. The uses of this tech -- from healthcare to home furnishings, warfare to supermarkets -- are powerful and increasingly real.
Pattie Maes | Speaker | TED.com
Pranav Mistry - Director of research, Samsung Research America
As an MIT grad student, Pranav Mistry invented SixthSense, a wearable device that enables new interactions between the real world and the world of data.
Why you should listen
When Pranav Mistry was a PhD student in the Fluid Interfaces Group at MIT's Media Lab, he worked with lab director Pattie Maes to create some of the most entertaining and thought-provoking interfaces the world had ever seen. And not just computer interfaces, mind you -- these are ways to help the digital and the actual worlds interface. Imagine: intelligent sticky notes, Quickies, that can be searched and can send reminders; a pen that draws in 3D; and TaPuMa, a tangible public map that can act as Google of physical world. And of course the legendary SixthSense, which is now open sourced
Before his studies at MIT, he worked with Microsoft as a UX researcher; he's a graduate of IIT. Now, as director of research at Samsung Research America, Mistry heads the Think Tank Team, an interdisciplinary group of researchers that hunts for new ways to mix digital informational with real-world interactions. As an example, Mistry launched the company's smartwatch, the Galaxy Gear, in 2013.
Pranav Mistry | Speaker | TED.com