TED2009
Pattie Maes + Pranav Mistry: Meet the SixthSense interaction
Petija Māsa un Pranavs Mistrijs: Iepazīstieties ar "SixthSense" komunikāciju!
Filmed:
Readability: 4.4
11,289,293 views
Par šī projekta, kas izstrādāts Petijas Māsas Masačūsetsas Tehnoloģiju institūta laboratorijā un ko vadījis Pranavs Mistrijs, demonstrāciju tika ārkārtīgi daudz diskutēts TED konferencē. Tā ir valkājama ierīce ar projektoru, kas paver ceļu patiešām pamatīgai komunikācijai ar apkārtējo vidi. Iedomājieties filmu "Īpašais ziņojums" un vēl vairāk!
Pattie Maes - Researcher
As head of the MIT Media Lab's Fluid Interfaces Group, Pattie Maes researches the tools we use to work with information and connect with one another. Full bioPranav Mistry - Director of research, Samsung Research America
As an MIT grad student, Pranav Mistry invented SixthSense, a wearable device that enables new interactions between the real world and the world of data. Full bio
As head of the MIT Media Lab's Fluid Interfaces Group, Pattie Maes researches the tools we use to work with information and connect with one another. Full bioPranav Mistry - Director of research, Samsung Research America
As an MIT grad student, Pranav Mistry invented SixthSense, a wearable device that enables new interactions between the real world and the world of data. Full bio
Double-click the English transcript below to play the video.
00:12
I've been intrigued by this question
0
0
2000
Mani ir ieintriģējis jautājums,
00:14
of whether we could evolve or develop a sixth sense --
1
2000
3000
vai mēs varam attīstīt
vai izstrādāt sesto maņu –
vai izstrādāt sesto maņu –
00:17
a sense that would give us seamless access
2
5000
6000
maņu, kas mums sniegtu nemanāmu pieeju,
00:23
and easy access to meta-information
3
11000
3000
vieglu pieeju metainformācijai
vai informācijai, kas atrodama citviet
vai informācijai, kas atrodama citviet
00:26
or information that may exist somewhere
4
14000
3000
00:29
that may be relevant to help us make the right decision
5
17000
3000
un varētu noderēt
pareizu lēmumu pieņemšanā
pareizu lēmumu pieņemšanā
00:32
about whatever it is that we're coming across.
6
20000
3000
lai kas arī būtu tas, ar ko sastopamies.
00:35
And some of you may argue,
7
23000
3000
Daži no jums varētu iebilst:
00:38
well, don't today's cell phones do that already?
8
26000
3000
"Vai tad mūsdienu mobilie tālruņi
to jau nedara?"
to jau nedara?"
00:41
But I would say no.
9
29000
2000
Es gan teiktu, ka ne.
00:43
When you meet someone here at TED --
10
31000
2000
Satiekot kādu šeit, TED,
00:45
and this is the top networking place, of course, of the year --
11
33000
3000
– un šī, protams, ir gada
lieliskākā tīklošanās vieta –
lieliskākā tīklošanās vieta –
00:48
you don't shake somebody's hand
12
36000
2000
jūs pēc sasveicināšanās nesakāt:
00:50
and then say, "Can you hold on for a moment
13
38000
3000
"Uzgaidiet mirklīti,
es iegūglēšu Jūs telefonā."
es iegūglēšu Jūs telefonā."
00:53
while I take out my phone and Google you?"
14
41000
2000
00:55
Or when you go to the supermarket
15
43000
4000
Vai, esot lielveikalā
00:59
and you're standing there in that huge aisle
16
47000
2000
un stāvot pie garas plauktu rindas
01:01
of different types of toilet papers,
17
49000
3000
ar dažāda veida tualetes papīriem,
01:04
you don't take out your cell phone, and open a browser,
18
52000
4000
jūs neskatāties telefona pārlūkprogrammā
01:08
and go to a website to try to decide
19
56000
2000
un neejat uz kādu mājaslapu, lai izlemtu,
01:10
which of these different toilet papers
20
58000
3000
kurš no šiem tualetes papīriem
ir videi draudzīgākais pirkums.
ir videi draudzīgākais pirkums.
01:13
is the most ecologically responsible purchase to make.
21
61000
3000
01:16
So we don't really have easy access
22
64000
3000
Tā nu mums nav vieglas pieejas
visai šai noderīgajai informācijai,
visai šai noderīgajai informācijai,
01:19
to all this relevant information
23
67000
2000
01:21
that can just help us make optimal decisions
24
69000
3000
kas varētu palīdzēt
pieņemt optimālo lēmumu,
pieņemt optimālo lēmumu,
01:24
about what to do next and what actions to take.
25
72000
3000
ko darīt tālāk un kā rīkoties.
01:27
And so my research group at the Media Lab
26
75000
4000
Mana MediaLab izpētes grupa
01:31
has been developing a series of inventions
27
79000
4000
attīsta virkni izgudrojumu,
01:35
to give us access to this information
28
83000
3000
kas sniedz pieeju šai informācijai
diezgan vieglā veidā,
diezgan vieglā veidā,
01:38
in a sort of easy way,
29
86000
2000
01:40
without requiring that the user changes any of their behavior.
30
88000
5000
neliekot lietotājam
mainīt ierasto uzvedību.
mainīt ierasto uzvedību.
01:45
And I'm here to unveil
31
93000
2000
Esmu šeit, lai atklātu mūsu jaunāko
01:47
our latest effort,
32
95000
3000
01:50
and most successful effort so far,
33
98000
2000
un līdz šim veiksmīgāko mēģinājumu,
01:52
which is still very much a work in process.
34
100000
2000
kas vēl joprojām ir attīstības stadijā.
01:54
I'm actually wearing the device right now
35
102000
3000
Šī ierīce man patiesībā pašlaik ir kaklā,
01:57
and we've sort of cobbled it together
36
105000
3000
un mēs to esam sameistarojuši
no viegli pieejamām sastāvdaļām,
no viegli pieejamām sastāvdaļām,
02:00
with components that are off the shelf --
37
108000
3000
02:03
and that, by the way, only cost 350 dollars
38
111000
3000
un tā, starp citu, šobrīd
maksā tikai 350 dolārus.
maksā tikai 350 dolārus.
02:06
at this point in time.
39
114000
2000
02:08
I'm wearing a camera, just a simple webcam,
40
116000
4000
Man šeit ir kamera,
vienkārša tīmekļa kamera,
vienkārša tīmekļa kamera,
02:12
a portable, battery-powered projection system with a little mirror.
41
120000
6000
pārnēsājama, ar bateriju apgādāta
projekcijas sistēma ar mazu spogulīti.
projekcijas sistēma ar mazu spogulīti.
02:18
These components communicate to my cell phone in my pocket
42
126000
4000
Šīs sastāvdaļas sazinās
ar viedtālruni manā kabatā,
ar viedtālruni manā kabatā,
02:22
which acts as the communication and computation device.
43
130000
4000
kas darbojas kā komunikāciju
un skaitļošanas ierīce.
un skaitļošanas ierīce.
02:26
And in the video here we see my student Pranav Mistry,
44
134000
4000
Šajā video mēs redzam
manu studentu Pranavu Mistriju,
manu studentu Pranavu Mistriju,
02:30
who's really the genius who's been implementing
45
138000
3000
ģēniju, kas visu šo ir īstenojis
02:33
and designing this whole system.
46
141000
2000
un radījis šo sistēmu.
02:35
And we see how this system
47
143000
2000
Mēs redzam, kā šī sistēma
ļauj viņam izmantot jebkuru virsmu,
ļauj viņam izmantot jebkuru virsmu,
02:37
lets him walk up to any surface
48
145000
4000
02:41
and start using his hands to interact with the information
49
149000
4000
lai, izmantojot rokas,
komunicētu ar informāciju,
komunicētu ar informāciju,
02:45
that is projected in front of him.
50
153000
2000
kas projicēta viņa priekšā.
02:47
The system tracks the four significant fingers.
51
155000
4000
Sistēma seko
četriem svarīgākajiem pirkstiem.
četriem svarīgākajiem pirkstiem.
02:51
In this case, he's wearing simple marker caps
52
159000
4000
Šajā gadījumā viņš ir uzvilcis
vienkāršus marķieru uzgaļus,
vienkāršus marķieru uzgaļus,
02:55
that you may recognize.
53
163000
2000
ko, iespējams, atpazīstat.
02:57
But if you want a more stylish version
54
165000
2000
Bet, ja vēlaties stilīgāku versiju,
02:59
you could also paint your nails in different colors.
55
167000
4000
varat arī nokrāsot nagus dažādās krāsās.
03:03
And the camera basically tracks these four fingers
56
171000
4000
Kamera principā seko
šiem četriem pirkstiem
šiem četriem pirkstiem
03:07
and recognizes any gestures that he's making
57
175000
3000
un atpazīst jebkuru viņa žestu,
03:10
so he can just go to, for example, a map of Long Beach,
58
178000
5000
tā ka viņš var vienkārši atvērt,
piemēram, Longbīčas karti,
piemēram, Longbīčas karti,
03:15
zoom in and out, etc.
59
183000
2000
pietuvināt un attālināt, un tā tālāk.
03:17
The system also recognizes iconic gestures
60
185000
3000
Sistēma arī atpazīst tādus plaši zināmus
žestus kā "nofotografēt",
žestus kā "nofotografēt",
03:20
such as the "take a picture" gesture,
61
188000
3000
03:23
and then takes a picture of whatever is in front of you.
62
191000
3000
un tad uzņem attēlu jebkam,
kas atrodas jūsu priekšā.
kas atrodas jūsu priekšā.
03:26
And when he then walks back to the Media Lab,
63
194000
4000
Atgriezies Media Lab,
03:30
he can just go up to any wall
64
198000
2000
viņš var vienkārši pieiet pie sienas
03:32
and project all the pictures that he's taken,
65
200000
3000
un projicēt visus uzņemtos attēlus,
03:35
sort through them and organize them,
66
203000
2000
pārskatīt tos un sakārtot,
mainīt lielumu un tā tālāk,
mainīt lielumu un tā tālāk,
03:37
and re-size them, etc.,
67
205000
2000
03:39
again using all natural gestures.
68
207000
3000
izmantojot tikai dabiskus žestus.
03:42
So, some of you most likely were here two years ago
69
210000
4000
Daži no jums droši vien šeit bija
pirms diviem gadiem
pirms diviem gadiem
03:46
and saw the demo by Jeff Han
70
214000
5000
un redzēja Džefa Hāna demonstrāciju,
vai daži no jums varbūt domā:
vai daži no jums varbūt domā:
03:51
or some of you may think, "Well, doesn't this look like the Microsoft Surface Table?"
71
219000
3000
"Vai tik tas neatgādina
Microsoft Surface Table?"
Microsoft Surface Table?"
03:54
And yes, you also interact using natural gestures,
72
222000
5000
Jā, arī tur kominikācija notiek
ar dabiskiem žestiem,
ar dabiskiem žestiem,
03:59
both hands, etc.
73
227000
2000
ar abām rokām,
04:01
But the difference here is that you can use any surface,
74
229000
3000
bet atšķirība tāda,
ka varat lietot jebkuru virsmu,
ka varat lietot jebkuru virsmu,
04:04
you can walk to up to any surface,
75
232000
3000
jūs varat izmantot jebkuru virsmu,
ieskaitot savu roku, ja nav nekā cita,
04:07
including your hand if nothing else is available
76
235000
3000
04:10
and interact with this projected data.
77
238000
3000
un komunicēt ar projicētajiem datiem.
04:13
The device is completely portable,
78
241000
3000
Ierīce ir pilnībā pārnēsājama,
un to var...
un to var...
04:16
and can be ...
79
244000
2000
04:18
(Applause)
80
246000
7000
(Aplausi)
(Aplausi beidzas)
04:25
So one important difference is that it's totally mobile.
81
253000
4000
Tātad svarīgi ir tas,
ka tā ir pilnībā mobila.
ka tā ir pilnībā mobila.
04:29
Another even more important difference is that in mass production
82
257000
4000
Vēl viena, pat svarīgāka, atšķirība
ir tā, ka masu ražošanā
ir tā, ka masu ražošanā
04:33
this would not cost more tomorrow than today's cell phones
83
261000
4000
tā nemaksātu vairāk
kā mūsdienu mobilie tālruņi
kā mūsdienu mobilie tālruņi
04:37
and would actually not sort of be a bigger packaging --
84
265000
4000
un īstenībā nebūtu izmērā lielāka,
04:41
could look a lot more stylish
85
269000
2000
un izskatītos daudz stilīgāka
04:43
than this version that I'm wearing around my neck.
86
271000
3000
nekā šī versija, kas ir man kaklā.
04:46
But other than letting some of you live out your fantasy
87
274000
6000
Tomēr mēs vēlamies
ne vien ļaut jums izdzīvot fantāziju,
ne vien ļaut jums izdzīvot fantāziju,
04:52
of looking as cool as Tom Cruise in "Minority Report,"
88
280000
4000
ka izskatāties tikpat elegants
kā Toms Krūzs filmā "Īpašais ziņojums",
kā Toms Krūzs filmā "Īpašais ziņojums",
04:56
the reason why we're really excited about this device
89
284000
4000
bet mēs esam patiešām sajūsmā
par šo ierīci arī tādēļ,
par šo ierīci arī tādēļ,
05:00
is that it really can act as one of these sixth-sense devices
90
288000
6000
ka tā spēj veikt funkcijas,
kas raksturīgas sestās maņas ierīcēm,
kas raksturīgas sestās maņas ierīcēm,
05:06
that gives you relevant information
91
294000
3000
kas sniedz atbilstošu informāciju
par jebko, kas atrodas jums priekšā.
par jebko, kas atrodas jums priekšā.
05:09
about whatever is in front of you.
92
297000
2000
05:11
So we see Pranav here going into the supermarket
93
299000
5000
Te mēs redzam Pranavu lielveikalā,
05:16
and he's shopping for some paper towels.
94
304000
3000
un viņš pērk papīra dvieļus.
05:19
And, as he picks up a product the system can recognize
95
307000
3000
Viņš paņem kādu produktu,
sistēma atpazīst to
05:22
the product that he's picking up,
96
310000
2000
05:24
using either image recognition or marker technology,
97
312000
4000
ar attēla atpazīšanas
vai marķējuma tehnoloģijas palīdzību
vai marķējuma tehnoloģijas palīdzību
05:28
and give him the green light or an orange light.
98
316000
3000
un rāda viņam zaļo vai oranžo gaismu.
05:31
He can ask for additional information.
99
319000
3000
Viņš var pieprasīt papildu informāciju.
05:34
So this particular choice here
100
322000
4000
Šī konkrētā izvēle
05:38
is a particularly good choice, given his personal criteria.
101
326000
4000
ir īpaši laba, balstoties
uz personīgiem kritērijiem.
uz personīgiem kritērijiem.
05:42
Some of you may want the toilet paper with the most bleach in it
102
330000
4000
Kāds varbūt vēlas pēc iespējas
balinātāku tualetes papīru,
balinātāku tualetes papīru,
05:46
rather than the most ecologically-responsible choice.
103
334000
3000
nevis ekoloģiski atbildīgu izvēli.
05:49
(Laughter)
104
337000
3000
(Smiekli)
05:52
If he picks up a book in the bookstore,
105
340000
3000
Paņemot grāmatveikalā kādu grāmatu,
viņš var iegūt Amazon reitingu.
viņš var iegūt Amazon reitingu.
05:55
he can get an Amazon rating --
106
343000
2000
05:57
it gets projected right on the cover of the book.
107
345000
2000
Tas tiek projicēts tieši uz grāmatas vāka.
05:59
This is Juan's book, our previous speaker,
108
347000
5000
Šī ir Huana, iepriekšējā runātāja,
06:04
which gets a great rating, by the way, at Amazon.
109
352000
2000
grāmata, kas, starp citu,
ir augsti novērtēta Amazon.
ir augsti novērtēta Amazon.
06:06
And so, Pranav turns the page of the book
110
354000
3000
Pranavs atver grāmatu
06:09
and can then see additional information about the book --
111
357000
3000
un var redzēt papildu informāciju –
06:12
reader comments, maybe sort of information by his favorite critic, etc.
112
360000
7000
lasītāju komentārus, varbūt sava
iecienītākā kritiķa viedokli un tā tālāk.
iecienītākā kritiķa viedokli un tā tālāk.
06:19
If he turns to a particular page
113
367000
2000
Uzšķirot noteiktu lapu,
06:21
he finds an annotation by maybe an expert of a friend of ours
114
369000
4000
viņš atrod kāda eksperta
vai mūsu drauga anotāciju,
vai mūsu drauga anotāciju,
06:25
that gives him a little bit of additional information
115
373000
2000
kas sniedz papildu informāciju
06:27
about whatever is on that particular page.
116
375000
3000
par to, kas šajā lapā rakstīts.
06:30
Reading the newspaper --
117
378000
2000
Lasot laikrakstu, tas nekad nenoveco.
06:32
it never has to be outdated.
118
380000
3000
06:35
(Laughter)
119
383000
2000
(Smiekli)
06:37
You can get video annotations of the event that you're reading about
120
385000
4000
Jūs varat iegūt videoanotācijas
par notikumiem, par kuriem lasāt.
par notikumiem, par kuriem lasāt.
06:41
You can get the latest sports scores etc.
121
389000
4000
Jūs varat uzzināt jaunākos
sporta rezultātus un tā tālāk.
sporta rezultātus un tā tālāk.
06:45
This is a more controversial one.
122
393000
3000
Šis ir strīdīgāks pielietojums.
06:48
(Laughter)
123
396000
1000
(Smiekli)
06:49
As you interact with someone at TED,
124
397000
3000
Komunicējot ar kādu TED konferencē,
06:52
maybe you can see a word cloud of the tags,
125
400000
4000
varbūt varat redzēt birku mākoni,
ko veido ar šo personu saistītie vārdi
06:56
the words that are associated with that person
126
404000
2000
06:58
in their blog and personal web pages.
127
406000
3000
no viņu bloga un personīgajās mājaslapas.
07:01
In this case, the student is interested in cameras, etc.
128
409000
5000
Šajā gadījumā studentu interesē
kameras un tamlīdzīgi produkti.
kameras un tamlīdzīgi produkti.
07:06
On your way to the airport,
129
414000
2000
Pa ceļam uz lidostu,
07:08
if you pick up your boarding pass, it can tell you that your flight is delayed,
130
416000
4000
paņemot rokās iekāpšanas karti,
varat uzzināt, ka jūsu lidojums kavējas,
varat uzzināt, ka jūsu lidojums kavējas,
07:12
that the gate has changed, etc.
131
420000
3000
ka iekāpšanas vārti mainīti un tā tālāk.
07:15
And, if you need to know what the current time is
132
423000
3000
Un, ja gribat zināt,
cik pašlaik ir pulkstenis,
cik pašlaik ir pulkstenis,
07:18
it's as simple as drawing a watch --
133
426000
4000
tas ir tik vienkārši,
kā uzzīmēt pulksteni...
kā uzzīmēt pulksteni...
07:22
(Laughter)
134
430000
1000
(Smiekli)
07:23
(Applause)
135
431000
1000
(Aplausi)
07:24
on your arm.
136
432000
2000
uz rokas.
07:26
So that's where we're at so far
137
434000
4000
Tik tālu, lūk, esam
sestās maņas attīstībā,
sestās maņas attīstībā,
07:30
in developing this sixth sense
138
438000
4000
07:34
that would give us seamless access to all this relevant information
139
442000
4000
kas dotu nemanāmu pieeju
visai šai noderīgajai informācijai
visai šai noderīgajai informācijai
07:38
about the things that we may come across.
140
446000
3000
par lietām, ko sastopam.
07:41
My student Pranav, who's really, like I said, the genius behind this.
141
449000
4000
Mans students Pranavs, kas tiešām,
kā jau teicu, ir ģēnijs aiz tā visa.
kā jau teicu, ir ģēnijs aiz tā visa.
07:45
(Applause) (Standing ovation)
142
453000
23000
(Aplausi un gaviles)
(Aplausi beidzas)
08:08
He does deserve a lot of applause
143
476000
3000
Viņš patiešām ir pelnījis skaļus aplausus,
08:11
because I don't think he's slept much in the last three months, actually.
144
479000
4000
jo nedomāju, ka viņš ir daudz gulējis
pēdējo trīs mēnešu laikā.
pēdējo trīs mēnešu laikā.
08:15
And his girlfriend is probably not very happy about him either.
145
483000
3000
Un viņa draudzene par to
droši vien nav visai priecīga.
droši vien nav visai priecīga.
08:18
But it's not perfect yet, it's very much a work in progress.
146
486000
5000
Bet tas vēl nav perfekts,
tas vēl arvien ir attīstības stadijā.
tas vēl arvien ir attīstības stadijā.
08:23
And who knows, maybe in another 10 years
147
491000
3000
Un, kas zina, varbūt vēl pēc 10 gadiem
08:26
we'll be here with the ultimate sixth sense brain implant.
148
494000
5000
mēs šeit būsim ar izstrādātu
sestās maņas smadzeņu implantu.
sestās maņas smadzeņu implantu.
08:31
Thank you.
149
499000
1000
Paldies.
08:32
(Applause)
150
500000
4000
(Aplausi)
ABOUT THE SPEAKERS
Pattie Maes - ResearcherAs head of the MIT Media Lab's Fluid Interfaces Group, Pattie Maes researches the tools we use to work with information and connect with one another.
Why you should listen
Pattie Maes was the key architect behind what was once called "collaborative filtering" and has become a key to Web 2.0: the immense engine of recommendations -- or "things like this" -- fueled by other users. In the 1990s, Maes' Software Agents program at MIT created Firefly, a technology (and then a startup sold to Microsoft) that let users choose songs they liked, and find similar songs they'd never heard of, by taking cues from others with similar taste. This brought a sea change in the way we interact with software, with culture and with one another.
Now Maes is working on a similarly boundary-breaking initiative. She founded Fluid Interfaces Group, also part of the MIT Media Lab, to rethink the ways in which humans and computers interact, partially by redefining both human and computer. In Maes' world (and really, in all of ours), the computer is no longer a distinct object, but a source of intelligence that's embedded in our environment. By outfitting ourselves with digital accessories, we can continually learn from (and teach) our surroundings. The uses of this tech -- from healthcare to home furnishings, warfare to supermarkets -- are powerful and increasingly real.
Pattie Maes | Speaker | TED.com
Pranav Mistry - Director of research, Samsung Research America
As an MIT grad student, Pranav Mistry invented SixthSense, a wearable device that enables new interactions between the real world and the world of data.
Why you should listen
When Pranav Mistry was a PhD student in the Fluid Interfaces Group at MIT's Media Lab, he worked with lab director Pattie Maes to create some of the most entertaining and thought-provoking interfaces the world had ever seen. And not just computer interfaces, mind you -- these are ways to help the digital and the actual worlds interface. Imagine: intelligent sticky notes, Quickies, that can be searched and can send reminders; a pen that draws in 3D; and TaPuMa, a tangible public map that can act as Google of physical world. And of course the legendary SixthSense, which is now open sourced
Before his studies at MIT, he worked with Microsoft as a UX researcher; he's a graduate of IIT. Now, as director of research at Samsung Research America, Mistry heads the Think Tank Team, an interdisciplinary group of researchers that hunts for new ways to mix digital informational with real-world interactions. As an example, Mistry launched the company's smartwatch, the Galaxy Gear, in 2013.
Pranav Mistry | Speaker | TED.com