TEDIndia 2009
Pranav Mistry: The thrilling potential of SixthSense technology
Pranav Mistry: De spannende mogelijkheden van de SixthSense-technologie
Filmed:
Readability: 4
18,689,186 views
Op TEDIndia toont Pranav Mistry enkele tools die de fysieke wereld laten interageren met de wereld van gegevens -- met een diepe kijk in zijn SixthSense-toestel en een nieuwe papieren "laptop", een paradigmaverschuiving. Tijdens een live vraag-en-antwoordsessie zegt Mistry dat hij de software achter SixthSense open source zal maken, om de mogelijkheden ervan voor iedereen toegankelijk te maken.
Pranav Mistry - Director of research, Samsung Research America
As an MIT grad student, Pranav Mistry invented SixthSense, a wearable device that enables new interactions between the real world and the world of data. Full bio
As an MIT grad student, Pranav Mistry invented SixthSense, a wearable device that enables new interactions between the real world and the world of data. Full bio
Double-click the English transcript below to play the video.
00:15
We grew up
0
0
2000
Wij groeiden op
00:17
interacting with the physical objects around us.
1
2000
3000
in interactie met de fysieke
voorwerpen rondom ons.
voorwerpen rondom ons.
00:20
There are an enormous number of them
2
5000
2000
Er zijn er heel veel,
00:22
that we use every day.
3
7000
2000
we gebruiken ze elke dag.
00:24
Unlike most of our computing devices,
4
9000
3000
Anders dan de meeste van onze computers,
00:27
these objects are much more fun to use.
5
12000
3000
zijn ze leuk om te gebruiken.
00:30
When you talk about objects,
6
15000
3000
Als je over voorwerpen praat,
00:33
one other thing automatically comes attached to that thing,
7
18000
3000
dan horen daar automatisch ook
00:36
and that is gestures:
8
21000
2000
gebaren bij:
hoe we deze voorwerpen hanteren,
00:38
how we manipulate these objects,
9
23000
2000
00:40
how we use these objects in everyday life.
10
25000
3000
hoe we ze in ons
dagelijks leven gebruiken.
dagelijks leven gebruiken.
We gebruiken gebaren niet alleen
om met voorwerpen te interageren,
om met voorwerpen te interageren,
00:43
We use gestures not only to interact with these objects,
11
28000
3000
maar ook om met elkaar te interageren.
00:46
but we also use them to interact with each other.
12
31000
2000
00:48
A gesture of "Namaste!", maybe, to respect someone,
13
33000
3000
Een "Namaste!"-gebaar, misschien,
om iemand te respecteren.
om iemand te respecteren.
00:51
or maybe --
14
36000
1000
Of misschien --
00:52
in India I don't need to teach a kid that this means
15
37000
2000
in India hoef ik kinderen
niet te leren dat dit
niet te leren dat dit
00:54
"four runs" in cricket.
16
39000
2000
"4 runs" betekent in cricket.
00:56
It comes as a part of our everyday learning.
17
41000
3000
Het is deel van ons alledaags leren.
00:59
So, I am very interested,
18
44000
2000
Ik heb dus veel belangstelling
01:01
from the beginning, that how --
19
46000
2000
vanaf het begin, voor hoe --
01:03
how our knowledge
20
48000
2000
hoe onze kennis
01:05
about everyday objects and gestures,
21
50000
2000
van alledaagse voorwerpen en gebaren,
01:07
and how we use these objects,
22
52000
2000
en hoe we deze voorwerpen gebruiken,
01:09
can be leveraged to our interactions with the digital world.
23
54000
3000
kan bijdragen tot onze interactie
met de digitale wereld.
met de digitale wereld.
01:12
Rather than using a keyboard and mouse,
24
57000
3000
Liever dan toetsenbord
en muis te gebruiken,
en muis te gebruiken,
01:15
why can I not use my computer
25
60000
3000
waarom kan ik mijn computer niet gebruiken
01:18
in the same way that I interact in the physical world?
26
63000
3000
zoals ik in de fysieke manier interageer?
01:21
So, I started this exploration around eight years back,
27
66000
3000
Ik begon deze verkenningstocht
acht jaar geleden,
acht jaar geleden,
01:24
and it literally started with a mouse on my desk.
28
69000
3000
en ik startte letterlijk
met een muis op mijn bureau.
met een muis op mijn bureau.
01:27
Rather than using it for my computer,
29
72000
3000
Ik gebruikte ze niet voor mijn computer,
01:30
I actually opened it.
30
75000
3000
maar opende ze.
De meesten van jullie weten dat de muis toen
01:33
Most of you might be aware that, in those days,
31
78000
2000
01:35
the mouse used to come with a ball inside,
32
80000
2000
een balletje had vanbinnen,
01:37
and there were two rollers
33
82000
2000
met twee rollers
01:39
that actually guide the computer where the ball is moving,
34
84000
3000
die de computer leiden
volgens de beweging van de bal
volgens de beweging van de bal
01:42
and, accordingly, where the mouse is moving.
35
87000
2000
en dus volgens de beweging van de muis.
01:44
So, I was interested in these two rollers,
36
89000
3000
Ik had dus interesse voor die twee rollers
01:47
and I actually wanted more, so I borrowed another mouse from a friend --
37
92000
3000
en wilde er meer, dus leende ik
nog een muis van een vriend --
nog een muis van een vriend --
01:50
never returned to him --
38
95000
2000
nooit teruggegeven --
en nu had ik 4 rollers.
01:52
and I now had four rollers.
39
97000
2000
01:54
Interestingly, what I did with these rollers is,
40
99000
3000
Interessant is wat ik deed
met die rollers:
met die rollers:
01:57
basically, I took them off of these mouses
41
102000
3000
ik haalde ze uit de muizen
02:00
and then put them in one line.
42
105000
2000
en legde ze naast elkaar.
02:02
It had some strings and pulleys and some springs.
43
107000
3000
Het had een paar koordjes,
wieltjes en veren.
wieltjes en veren.
02:05
What I got is basically a gesture interface device
44
110000
3000
Ik kreeg een toestel
voor gebareninterface,
voor gebareninterface,
02:08
that actually acts as a motion-sensing device
45
113000
4000
een bewegingsgevoelig toestel
02:12
made for two dollars.
46
117000
2000
dat twee dollar had gekost.
02:14
So, here, whatever movement I do in my physical world
47
119000
3000
Elke beweging die ik maak
in mijn fysieke wereld
in mijn fysieke wereld
02:17
is actually replicated inside the digital world
48
122000
3000
wordt gerepliceerd in de digitale wereld
02:20
just using this small device that I made, around eight years back,
49
125000
3000
met dit kleine toestelletje
dat ik 8 jaar geleden maakte,
dat ik 8 jaar geleden maakte,
02:23
in 2000.
50
128000
2000
in 2000.
02:25
Because I was interested in integrating these two worlds,
51
130000
2000
Omdat ik deze twee werelden
wilde integreren,
wilde integreren,
02:27
I thought of sticky notes.
52
132000
2000
dacht ik aan post-its.
02:29
I thought, "Why can I not connect
53
134000
3000
Ik dacht: "Waarom kan ik
02:32
the normal interface of a physical sticky note
54
137000
2000
de normale interface
van een fysieke post-it
van een fysieke post-it
02:34
to the digital world?"
55
139000
2000
niet verbinden met de digitale wereld?"
02:36
A message written on a sticky note to my mom
56
141000
2000
Een bericht geschreven
op een post-it voor mijn mama
op een post-it voor mijn mama
02:38
on paper
57
143000
1000
op papier
02:39
can come to an SMS,
58
144000
2000
kan een SMS bereiken,
02:41
or maybe a meeting reminder
59
146000
2000
of een herinnering voor een vergadering
02:43
automatically syncs with my digital calendar --
60
148000
2000
kan synchroniseren
met mijn digitale kalender --
met mijn digitale kalender --
02:45
a to-do list that automatically syncs with you.
61
150000
3000
een to-do-lijstje dat automatisch
synchroniseert met jou.
synchroniseert met jou.
02:48
But you can also search in the digital world,
62
153000
3000
Je kan ook zoeken in de digitale wereld
02:51
or maybe you can write a query, saying,
63
156000
2000
of een query schrijven, bijvoorbeeld:
02:53
"What is Dr. Smith's address?"
64
158000
2000
"Wat is het adres van Dr. Smith?"
Dit kleine systeem drukt het af.
02:55
and this small system actually prints it out --
65
160000
2000
Het gedraagt zich als
een papieren input-outputsysteem,
een papieren input-outputsysteem,
02:57
so it actually acts like a paper input-output system,
66
162000
2000
02:59
just made out of paper.
67
164000
3000
gemaakt van louter papier.
03:05
In another exploration,
68
170000
2000
Bij een andere verkenning
03:07
I thought of making a pen that can draw in three dimensions.
69
172000
3000
bedacht ik een pen
die in drie dimensies kan tekenen.
die in drie dimensies kan tekenen.
03:10
So, I implemented this pen
70
175000
2000
Ik implementeerde deze pen
03:12
that can help designers and architects
71
177000
2000
die designers en architecten kan helpen
03:14
not only think in three dimensions,
72
179000
2000
om niet alleen in 3 dimensies te denken,
03:16
but they can actually draw
73
181000
2000
maar ook te tekenen,
zodat ze meer intuïtief te gebruiken is.
03:18
so that it's more intuitive to use that way.
74
183000
2000
03:20
Then I thought, "Why not make a Google Map,
75
185000
2000
Toen bedacht ik:
"Waarom maak ik geen Googlekaart,
"Waarom maak ik geen Googlekaart,
03:22
but in the physical world?"
76
187000
2000
maar voor de fysieke wereld?"
03:24
Rather than typing a keyword to find something,
77
189000
3000
Liever dan een sleutelwoord
in te tikken om iets te vinden,
in te tikken om iets te vinden,
03:27
I put my objects on top of it.
78
192000
2000
zet ik mijn dingen er bovenop.
03:29
If I put a boarding pass, it will show me where the flight gate is.
79
194000
3000
Als ik er een instapkaart leg,
toont het mij waar de gate is.
toont het mij waar de gate is.
03:32
A coffee cup will show where you can find more coffee,
80
197000
3000
Een koffiekop toont je
waar je meer koffie vindt,
waar je meer koffie vindt,
03:35
or where you can trash the cup.
81
200000
2000
of waar je de beker kan weggooien.
03:37
So, these were some of the earlier explorations I did because
82
202000
3000
Dit waren een paar
van mijn vroege exploraties.
van mijn vroege exploraties.
03:40
the goal was to connect these two worlds seamlessly.
83
205000
3000
Het doel was de twee werelden
naadloos te integreren.
naadloos te integreren.
03:44
Among all these experiments,
84
209000
2000
Al deze experimenten
03:46
there was one thing in common:
85
211000
2000
hadden één ding gemeen:
03:48
I was trying to bring a part of the physical world to the digital world.
86
213000
4000
ik probeerde iets uit de fysieke wereld
in de digitale wereld te brengen.
in de digitale wereld te brengen.
03:52
I was taking some part of the objects,
87
217000
3000
Ik nam een aspect van de voorwerpen
03:55
or any of the intuitiveness of real life,
88
220000
3000
of van het intuïtieve van het echte leven
03:58
and bringing them to the digital world,
89
223000
3000
en transfereerde ze
naar de digitale wereld,
naar de digitale wereld,
04:01
because the goal was to make our computing interfaces more intuitive.
90
226000
3000
met als doel onze computerinterface
meer intuïtief te maken.
meer intuïtief te maken.
04:04
But then I realized that we humans
91
229000
2000
Maar toen besefte ik dat wij mensen
04:06
are not actually interested in computing.
92
231000
3000
eigenlijk geen belangstelling
hebben voor computers.
hebben voor computers.
04:09
What we are interested in is information.
93
234000
3000
Wij hebben belangstelling voor informatie.
We willen dingen weten.
04:12
We want to know about things.
94
237000
2000
We willen kennis over
de loop van dynamische dingen.
de loop van dynamische dingen.
04:14
We want to know about dynamic things going around.
95
239000
2000
04:16
So I thought, around last year -- in the beginning of the last year --
96
241000
5000
Dus bedacht ik vorig jaar,
in het begin van het jaar:
in het begin van het jaar:
04:21
I started thinking, "Why can I not take this approach in the reverse way?"
97
246000
3000
"Waarom kan ik deze aanpak niet omkeren?
04:24
Maybe, "How about I take my digital world
98
249000
3000
Waarom neem ik mijn digitale wereld niet
04:27
and paint the physical world with that digital information?"
99
252000
5000
en kleur ik de fysieke wereld
met die digitale informatie?"
met die digitale informatie?"
04:32
Because pixels are actually, right now, confined in these rectangular devices
100
257000
4000
Want pixels zijn vandaag
beperkt tot rechthoekige dingen
beperkt tot rechthoekige dingen
04:36
that fit in our pockets.
101
261000
2000
die in onze broekzak passen.
04:38
Why can I not remove this confine
102
263000
3000
Waarom hef ik die beperking niet op
04:41
and take that to my everyday objects, everyday life
103
266000
3000
en breng ik dit over
naar mijn dingen van elke dag,
naar mijn dingen van elke dag,
04:44
so that I don't need to learn the new language
104
269000
2000
zodat ik de nieuwe taal niet moet leren
04:46
for interacting with those pixels?
105
271000
3000
om te interageren met deze pixels?
04:50
So, in order to realize this dream,
106
275000
2000
Om deze droom te realiseren,
04:52
I actually thought of putting a big-size projector on my head.
107
277000
3000
wilde ik een grote projector
op mijn hoofd zetten.
op mijn hoofd zetten.
04:55
I think that's why this is called a head-mounted projector, isn't it?
108
280000
3000
Daarom heet dit
een hoofdgemonteerde projector, niet?
een hoofdgemonteerde projector, niet?
04:58
I took it very literally,
109
283000
2000
Ik nam het letterlijk,
05:00
and took my bike helmet,
110
285000
2000
en nam mijn fietshelm,
05:02
put a little cut over there so that the projector actually fits nicely.
111
287000
3000
maakte een insnijding
zodat de projector er goed in past.
zodat de projector er goed in past.
05:05
So now, what I can do --
112
290000
2000
Wat ik nu kan doen --
05:07
I can augment the world around me with this digital information.
113
292000
4000
ik kan de wereld rondom mij
verrijken met digitale informatie.
verrijken met digitale informatie.
05:11
But later,
114
296000
2000
Later besefte ik
05:13
I realized that I actually wanted to interact with those digital pixels, also.
115
298000
3000
dat ik ook wilde interageren
met die digitale pixels.
met die digitale pixels.
05:16
So I put a small camera over there,
116
301000
2000
Dus zette ik daar een kleine camera
05:18
that acts as a digital eye.
117
303000
2000
die zich als een digitaal oog gedraagt.
05:20
Later, we moved to a much better,
118
305000
2000
Later schakelden we over op een beter,
05:22
consumer-oriented pendant version of that,
119
307000
2000
meer klantgerichte versie daarvan,
05:24
that many of you now know as the SixthSense device.
120
309000
3000
die velen van jullie nu kennen
als het SixthSense-toestel.
als het SixthSense-toestel.
05:27
But the most interesting thing about this particular technology
121
312000
3000
Het interessantste aan deze technologie is
05:30
is that you can carry your digital world with you
122
315000
4000
dat je je digitale wereld mee kan nemen,
05:34
wherever you go.
123
319000
2000
waar je ook heengaat.
05:36
You can start using any surface, any wall around you,
124
321000
3000
Je kan elk oppervlak gebruiken,
elke muur in de buurt,
elke muur in de buurt,
05:39
as an interface.
125
324000
2000
als interface.
De camera volgt al je gebaren.
05:41
The camera is actually tracking all your gestures.
126
326000
3000
Wat je ook doet met je handen,
05:44
Whatever you're doing with your hands,
127
329000
2000
ze snapt je gebaar.
05:46
it's understanding that gesture.
128
331000
2000
Kijk, er zijn een paar kleurmarkeringen
05:48
And, actually, if you see, there are some color markers
129
333000
2000
05:50
that in the beginning version we are using with it.
130
335000
3000
die we gebruiken bij de beginversie.
Je kan beginnen schilderen op een muur.
05:53
You can start painting on any wall.
131
338000
2000
05:55
You stop by a wall, and start painting on that wall.
132
340000
3000
Je stopt bij een muur en begint te schilderen.
We volgen niet één vinger, hier.
05:58
But we are not only tracking one finger, here.
133
343000
2000
06:00
We are giving you the freedom of using all of both of your hands,
134
345000
4000
We geven je de vrijheid om je twee handen
helemaal te gebruiken,
helemaal te gebruiken,
06:04
so you can actually use both of your hands to zoom into or zoom out
135
349000
3000
je kan dus beide handen gebruiken
om in en uit te zoomen
om in en uit te zoomen
06:07
of a map just by pinching all present.
136
352000
2000
door te knijpen.
06:09
The camera is actually doing --
137
354000
3000
Wat de camera doet --
06:12
just, getting all the images --
138
357000
1000
die alle beelden krijgt --
06:13
is doing the edge recognition and also the color recognition
139
358000
3000
is de herkenning van omtrek en kleur,
06:16
and so many other small algorithms are going on inside.
140
361000
3000
en binnenin spelen zich
allerlei kleine algoritmes af.
allerlei kleine algoritmes af.
06:19
So, technically, it's a little bit complex,
141
364000
2000
Het is technisch een beetje complex,
06:21
but it gives you an output which is more intuitive to use, in some sense.
142
366000
3000
maar het geeft je een resultaat
dat intuïtiever te gebruiken is.
dat intuïtiever te gebruiken is.
06:24
But I'm more excited that you can actually take it outside.
143
369000
3000
Ik vind het spannender
dat je het mee naar buiten kan nemen.
dat je het mee naar buiten kan nemen.
06:27
Rather than getting your camera out of your pocket,
144
372000
3000
In plaats van je camera
uit je zak te halen,
uit je zak te halen,
06:30
you can just do the gesture of taking a photo
145
375000
3000
maak je gewoon
het gebaar van "foto maken",
het gebaar van "foto maken",
06:33
and it takes a photo for you.
146
378000
2000
en het maakt een foto voor jou.
06:35
(Applause)
147
380000
4000
(Applaus)
06:39
Thank you.
148
384000
1000
Dankjewel.
06:41
And later I can find a wall, anywhere,
149
386000
2000
En later vind ik ergens een muur
06:43
and start browsing those photos
150
388000
2000
en begin ik door de foto's te bladeren,
06:45
or maybe, "OK, I want to modify this photo a little bit
151
390000
2000
of: "OK, ik wil deze foto wat aanpassen
06:47
and send it as an email to a friend."
152
392000
2000
en naar een vriend mailen."
06:49
So, we are looking for an era where
153
394000
3000
We stevenen dus af op een tijd waarin
06:52
computing will actually merge with the physical world.
154
397000
3000
computers zich vermengen
met de fysieke wereld.
met de fysieke wereld.
06:55
And, of course, if you don't have any surface,
155
400000
3000
En natuurlijk, als je geen oppervlak hebt,
06:58
you can start using your palm for simple operations.
156
403000
3000
kan je je handpalm gebruiken
voor simpele dingen.
voor simpele dingen.
07:01
Here, I'm dialing a phone number just using my hand.
157
406000
2000
Hier tik ik een telefoonnummer in
met mijn hand.
met mijn hand.
07:07
The camera is actually not only understanding your hand movements,
158
412000
3000
De camera snapt niet alleen
je handbewegingen,
je handbewegingen,
maar -- interessant --
07:10
but, interestingly,
159
415000
1000
07:11
is also able to understand what objects you are holding in your hand.
160
416000
3000
snapt ook welke dingen je
in je hand houdt.
in je hand houdt.
07:14
What we're doing here is actually --
161
419000
3000
Wat we hier doen,
07:17
for example, in this case,
162
422000
2000
in dit geval,
is de boekomslag vergelijken
07:19
the book cover is matched
163
424000
2000
met zoveel duizenden,
miljoenen boeken online,
miljoenen boeken online,
07:21
with so many thousands, or maybe millions of books online,
164
426000
3000
en uitzoeken welk boek het is.
07:24
and checking out which book it is.
165
429000
2000
Zodra het die informatie heeft,
07:26
Once it has that information,
166
431000
1000
07:27
it finds out more reviews about that,
167
432000
2000
zoekt het recensies op.
07:29
or maybe New York Times has a sound overview on that,
168
434000
3000
Daar heeft de New York Times
misschien een geluidsopname van,
misschien een geluidsopname van,
07:32
so you can actually hear, on a physical book,
169
437000
2000
dus kan je, op een fysieke boek,
07:34
a review as sound.
170
439000
2000
een recensie horen als geluid.
07:36
("famous talk at Harvard University ...")
171
441000
2000
("bekende praatje aan
de universiteit van Harvard...")
de universiteit van Harvard...")
07:38
This was Obama's visit last week to MIT.
172
443000
3000
Dit was het bezoek
van Obama aan MIT vorige week.
van Obama aan MIT vorige week.
07:42
("... and particularly I want to thank two outstanding MIT ...")
173
447000
4000
("... en ik wil in het bijzonder dank zeggen
aan twee uitstekende MIT...")
aan twee uitstekende MIT...")
07:46
So, I was seeing the live [video] of his talk, outside, on just a newspaper.
174
451000
5000
Dus ik keek naar de live-video
van dit praatje, buiten, op een krant.
van dit praatje, buiten, op een krant.
07:51
Your newspaper will show you live weather information
175
456000
3000
Je krant zal je actuele
weersinformatie tonen
weersinformatie tonen
07:54
rather than having it updated -- like, you have to check your computer
176
459000
3000
in plaats van updates te geven --
jij moet je computer checken
om dat te doen, niet?
om dat te doen, niet?
07:57
in order to do that, right?
177
462000
2000
07:59
(Applause)
178
464000
5000
(Applaus)
08:04
When I'm going back, I can just use my boarding pass
179
469000
3000
As ik terugkeer,
kan ik mijn instapkaart gebruiken
kan ik mijn instapkaart gebruiken
om te bekijken
hoeveel vertraging mijn vlucht heeft,
hoeveel vertraging mijn vlucht heeft,
08:07
to check how much my flight has been delayed,
180
472000
2000
08:09
because at that particular time,
181
474000
2000
want op dat moment
heb ik geen zin
om mijn iPhone aan te zetten,
om mijn iPhone aan te zetten,
08:11
I'm not feeling like opening my iPhone,
182
476000
2000
08:13
and checking out a particular icon.
183
478000
2000
en dat icoontje te controleren.
08:15
And I think this technology will not only change the way --
184
480000
3000
Ik denk dat deze technologie
niet alleen de manier verandert --
niet alleen de manier verandert --
08:18
yes. (Laughter)
185
483000
1000
Ja. (Gelach)
Het verandert ook
hoe we met mensen omgaan,
hoe we met mensen omgaan,
08:20
It will change the way we interact with people, also,
186
485000
2000
08:22
not only the physical world.
187
487000
2000
niet alleen met de fysieke wereld.
08:24
The fun part is, I'm going to the Boston metro,
188
489000
3000
Het leuke is, ik ga
naar de metro van Boston
naar de metro van Boston
08:27
and playing a pong game inside the train
189
492000
3000
en speel Pong op de trein,
08:30
on the ground, right?
190
495000
2000
op de grond.
08:32
(Laughter)
191
497000
1000
(Gelach)
08:33
And I think the imagination is the only limit
192
498000
2000
Ik denk dat verbeelding de enige grens is
08:35
of what you can think of
193
500000
2000
van wat je kan bedenken
08:37
when this kind of technology merges with real life.
194
502000
2000
als deze technologie zich
met het echte leven mengt.
met het echte leven mengt.
08:39
But many of you argue, actually, that
195
504000
2000
Velen van jullie zullen opwerpen dat
08:41
all of our work is not only about physical objects.
196
506000
3000
ons werk niet alleen
om fysieke dingen gaat.
om fysieke dingen gaat.
08:44
We actually do lots of accounting and paper editing
197
509000
3000
We doen boekhouding,
en schrijven op papier,
en schrijven op papier,
08:47
and all those kinds of things; what about that?
198
512000
2000
en dat soort dingen. Wat daarmee?
08:49
And many of you are excited about the next generation tablet computers
199
514000
4000
Velen vinden de volgende generatie
tabletcomputers spannend,
tabletcomputers spannend,
08:53
to come out in the market.
200
518000
2000
die op de markt komen.
08:55
So, rather than waiting for that,
201
520000
2000
In plaats van daarop te wachten,
08:57
I actually made my own, just using a piece of paper.
202
522000
3000
maakte ik er een voor mezelf,
met een blad papier.
met een blad papier.
09:00
So, what I did here is remove the camera --
203
525000
2000
Ik haalde de camera eruit --
09:02
All the webcam cameras have a microphone inside the camera.
204
527000
4000
alle webcams hebben
een microfoon in de camera.
een microfoon in de camera.
09:06
I removed the microphone from that,
205
531000
3000
Ik haalde de microfoon eruit
09:09
and then just pinched that --
206
534000
2000
en prikte die --
09:11
like I just made a clip out of the microphone --
207
536000
3000
ik maakte een clip van de microfoon
09:14
and clipped that to a piece of paper, any paper that you found around.
208
539000
4000
en maakte die vast
aan een stuk papier dat ik vond.
aan een stuk papier dat ik vond.
09:18
So now the sound of the touch
209
543000
3000
Het geluid van de aanraking
09:21
is getting me when exactly I'm touching the paper.
210
546000
3000
laat weten op welk ogenblik
ik het papier aanraak.
ik het papier aanraak.
09:24
But the camera is actually tracking where my fingers are moving.
211
549000
4000
De camera volgt intussen
waar mijn vingers heengaan;
waar mijn vingers heengaan;
09:28
You can of course watch movies.
212
553000
3000
Je kan natuurlijk films kijken.
09:31
("Good afternoon. My name is Russell ...
213
556000
3000
("Goedemiddag. Mijn naam is Russell...")
09:34
and I am a Wilderness Explorer in Tribe 54.")
214
559000
3000
("... en ik ben een Verkenner
bij Stam 54.")
bij Stam 54.")
09:37
And you can of course play games.
215
562000
3000
En je kan natuurlijk spelletjes spelen.
09:40
(Car engine)
216
565000
3000
(Autoracegeluid)
09:43
Here, the camera is actually understanding how you're holding the paper
217
568000
3000
De camera snapt hoe je het papier houdt
09:46
and playing a car-racing game.
218
571000
2000
en een autorace speelt.
09:48
(Applause)
219
573000
3000
(Applaus)
09:52
Many of you already must have thought, OK, you can browse.
220
577000
2000
Velen van jullie denken wellicht:
"OK, je kan browsen.
"OK, je kan browsen.
09:54
Yeah. Of course you can browse to any websites
221
579000
3000
Natuurlijk kan je browsen naar een website
09:57
or you can do all sorts of computing on a piece of paper
222
582000
3000
of allerlei berekeningen doen
op een blad papier
op een blad papier
als je het nodig hebt.
10:00
wherever you need it.
223
585000
1000
10:01
So, more interestingly,
224
586000
3000
Interessanter is:
hoe doen we dat
op een meer dynamische manier?
op een meer dynamische manier?
10:04
I'm interested in how we can take that in a more dynamic way.
225
589000
3000
Als ik terugkom bij mijn bureau,
pak ik die informatie op
pak ik die informatie op
10:07
When I come back to my desk I can just pinch that information
226
592000
3000
en laat het los op mijn bureaublad,
10:10
back to my desktop
227
595000
2000
10:12
so I can use my full-size computer.
228
597000
3000
zodat ik mijn volledige computer kan gebruiken.
10:15
(Applause)
229
600000
2000
(Applaus)
10:17
And why only computers? We can just play with papers.
230
602000
3000
Waarom alleen computers?
We kunnen met louter papier spelen.
We kunnen met louter papier spelen.
10:20
Paper world is interesting to play with.
231
605000
3000
De papieren wereld
is leuk om mee te spelen.
is leuk om mee te spelen.
10:23
Here, I'm taking a part of a document
232
608000
2000
Hier neem ik een deel van een document
10:25
and putting over here a second part from a second place --
233
610000
4000
en voeg er een tweede deel
aan toe van een andere plek --
aan toe van een andere plek --
10:29
and I'm actually modifying the information
234
614000
3000
en wijzig ik de informatie
10:32
that I have over there.
235
617000
2000
die ik hier heb.
10:34
Yeah. And I say, "OK, this looks nice,
236
619000
3000
En ik zeg: "OK, ziet er goed uit,
laat me dat ding afdrukken."
10:37
let me print it out, that thing."
237
622000
2000
Nu heb ik dus een afdruk.
10:39
So I now have a print-out of that thing, and now --
238
624000
2000
10:41
the workflow is more intuitive the way we used to do it
239
626000
3000
De workflow was intuïtiever zoals we het
10:44
maybe 20 years back,
240
629000
3000
20 jaar geleden deden,
dan vandaag, nu we schakelen
tussen deze twee werelden.
tussen deze twee werelden.
10:47
rather than now switching between these two worlds.
241
632000
3000
10:50
So, as a last thought,
242
635000
3000
Nog een laatste gedachte:
ik denk dat informatie integreren
in dingen van elke dag
in dingen van elke dag
10:53
I think that integrating information to everyday objects
243
638000
3000
10:56
will not only help us to get rid of the digital divide,
244
641000
5000
ons niet alleen zal helpen
om de digitale kloof te overbruggen,
om de digitale kloof te overbruggen,
11:01
the gap between these two worlds,
245
646000
2000
het gat tussen deze twee werelden,
11:03
but will also help us, in some way,
246
648000
2000
maar het zal ons ook helpen
11:05
to stay human,
247
650000
2000
om menselijk te blijven,
11:07
to be more connected to our physical world.
248
652000
3000
om meer verbonden te zijn
met de fysieke wereld.
met de fysieke wereld.
11:13
And it will actually help us not end up being machines
249
658000
3000
Het zal ons helpen
om geen machines te zijn
om geen machines te zijn
11:16
sitting in front of other machines.
250
661000
2000
die voor andere machines zitten.
11:18
That's all. Thank you.
251
663000
3000
Dat is alles. Dankjewel.
(Applaus)
11:21
(Applause)
252
666000
14000
11:35
Thank you.
253
680000
1000
Dankjewel.
11:36
(Applause)
254
681000
3000
(Applaus)
Chris Anderson: Pranav,
11:39
Chris Anderson: So, Pranav,
255
684000
1000
11:40
first of all, you're a genius.
256
685000
3000
eerst en vooral, je bent een genie.
11:43
This is incredible, really.
257
688000
3000
Dit is echt ongelooflijk.
11:46
What are you doing with this? Is there a company being planned?
258
691000
3000
Wat doe je ermee?
Staat er een bedrijf op stapel?
Staat er een bedrijf op stapel?
11:49
Or is this research forever, or what?
259
694000
2000
Of is dit voor altijd onderzoek, of zo?
11:51
Pranav Mistry: So, there are lots of companies --
260
696000
2000
Pranav Mistry: Veel bedrijven
die Media Lab sponsoren
die Media Lab sponsoren
11:53
actually sponsor companies of Media Lab --
261
698000
1000
11:54
interested in taking this ahead in one or another way.
262
699000
3000
hebben belangstelling
om hier iets mee te doen.
om hier iets mee te doen.
11:57
Companies like mobile phone operators
263
702000
2000
Bedrijven zoals mobiele telefoonbedrijven
11:59
want to take this in a different way than the NGOs in India,
264
704000
3000
willen dit anders doen
dan de ngo's in India,
dan de ngo's in India,
12:02
[who] are thinking, "Why can we only have 'Sixth Sense'?
265
707000
3000
die denken: "Waarom kunnen we
alleen 'SixthSense' krijgen?
alleen 'SixthSense' krijgen?
We hebben een vijfde zintuig nodig
voor mensen die er één missen,
voor mensen die er één missen,
12:05
We should have a 'Fifth Sense' for missing-sense people
266
710000
2000
12:07
who cannot speak.
267
712000
1000
die niet kunnen praten.
12:08
This technology can be used for them to speak out in a different way
268
713000
3000
Deze technologie kan worden gebruikt
zodat ze anders kunnen spreken,
zodat ze anders kunnen spreken,
12:11
with maybe a speaker system."
269
716000
1000
met een spraaksysteem;"
12:12
CA: What are your own plans? Are you staying at MIT,
270
717000
3000
CA: Wat zijn je eigen plannen?
Blijf je op MIT,
Blijf je op MIT,
12:15
or are you going to do something with this?
271
720000
1000
of ga je hier iets mee doen?
12:16
PM: I'm trying to make this more available to people
272
721000
2000
PM: Ik probeer dit
voor meer mensen open te stellen,
voor meer mensen open te stellen,
12:18
so that anyone can develop their own SixthSense device,
273
723000
3000
zodat iedereen zijn eigen
SixthSense-toestel kan maken,
SixthSense-toestel kan maken,
12:21
because the hardware is actually not that hard to manufacture
274
726000
5000
want de hardware
is niet zo moeilijk te produceren,
is niet zo moeilijk te produceren,
of zelf te maken.
12:26
or hard to make your own.
275
731000
2000
We maken er open-sourcesoftware van,
12:28
We will provide all the open source software for them,
276
733000
2000
12:30
maybe starting next month.
277
735000
2000
misschien vanaf volgende maand.
12:32
CA: Open source? Wow.
278
737000
2000
CA: Open source? Wow.
12:34
(Applause)
279
739000
5000
(Applaus)
12:39
CA: Are you going to come back to India with some of this, at some point?
280
744000
3000
CA: Breng je dit op één of
andere manier terug naar India?
andere manier terug naar India?
12:42
PM: Yeah. Yes, yes, of course.
281
747000
2000
PM: Ja, natuurlijk.
12:44
CA: What are your plans? MIT?
282
749000
2000
CA: Wat zijn je plannen? MIT?
12:46
India? How are you going to split your time going forward?
283
751000
2000
India? Hoe zal je je tijd verdelen
in de toekomst?
in de toekomst?
12:48
PM: There is a lot of energy here. Lots of learning.
284
753000
3000
PM: Hier is veel energie. Veel leren.
12:51
All of this work that you have seen is all about
285
756000
2000
Alles wat je hier ziet gaat over
12:53
my learning in India.
286
758000
2000
mijn leren in India.
12:55
And now, if you see, it's more about the cost-effectiveness:
287
760000
3000
Kijk, gaat het meer
om kosteneffectiviteit:
om kosteneffectiviteit:
12:58
this system costs you $300
288
763000
2000
dit systeem kost je 300 dollar,
13:00
compared to the $20,000 surface tables, or anything like that.
289
765000
3000
vergeleken met
de touchtafels van 20.000 dollar.
de touchtafels van 20.000 dollar.
13:03
Or maybe even the $2 mouse gesture system
290
768000
3000
Zelfs het muisgebarensysteem
van twee dollar
van twee dollar
13:06
at that time was costing around $5,000?
291
771000
3000
kostte toen 5.000 dollar.
13:09
So, we actually -- I showed that, at a conference, to
292
774000
4000
Dus ik liet dit eens zien aan
President Abdul Kalam, toentertijd,
13:13
President Abdul Kalam, at that time,
293
778000
2000
en hij zei: "We kunnen dit gebruiken
in het Bhabha Nucleair Onderzoekscentrum,
in het Bhabha Nucleair Onderzoekscentrum,
13:15
and then he said, "OK, we should use this in Bhabha Atomic Research Centre
294
780000
3000
13:18
for some use of that."
295
783000
2000
Ik vind het dus spannend dat ik
technologie naar de massa kan brengen
technologie naar de massa kan brengen
13:20
So I'm excited about how I can bring the technology to the masses
296
785000
3000
13:23
rather than just keeping that technology in the lab environment.
297
788000
3000
in plaats van ze
in het laboratorium te houden.
in het laboratorium te houden.
13:26
(Applause)
298
791000
4000
(Applaus)
CA: Op basis van de mensen
die we bij TED hebben gezien,
die we bij TED hebben gezien,
13:30
CA: Based on the people we've seen at TED,
299
795000
3000
zou ik zeggen dat je behoort
tot de twee of drie
tot de twee of drie
13:33
I would say you're truly one of the two or three
300
798000
1000
13:34
best inventors in the world right now.
301
799000
2000
beste uitvinders
in de wereld van dit moment.
in de wereld van dit moment.
13:36
It's an honor to have you at TED.
302
801000
2000
Het is een eer om je op TED te hebben.
13:38
Thank you so much.
303
803000
2000
Heel hartelijk dank.
13:40
That's fantastic.
304
805000
1000
Fantastisch.
13:41
(Applause)
305
806000
4000
(Applaus)
ABOUT THE SPEAKER
Pranav Mistry - Director of research, Samsung Research AmericaAs an MIT grad student, Pranav Mistry invented SixthSense, a wearable device that enables new interactions between the real world and the world of data.
Why you should listen
When Pranav Mistry was a PhD student in the Fluid Interfaces Group at MIT's Media Lab, he worked with lab director Pattie Maes to create some of the most entertaining and thought-provoking interfaces the world had ever seen. And not just computer interfaces, mind you -- these are ways to help the digital and the actual worlds interface. Imagine: intelligent sticky notes, Quickies, that can be searched and can send reminders; a pen that draws in 3D; and TaPuMa, a tangible public map that can act as Google of physical world. And of course the legendary SixthSense, which is now open sourced
Before his studies at MIT, he worked with Microsoft as a UX researcher; he's a graduate of IIT. Now, as director of research at Samsung Research America, Mistry heads the Think Tank Team, an interdisciplinary group of researchers that hunts for new ways to mix digital informational with real-world interactions. As an example, Mistry launched the company's smartwatch, the Galaxy Gear, in 2013.
Pranav Mistry | Speaker | TED.com