TED Fellows Retreat 2013
James Patten: The best computer interface? Maybe ... your hands
James Patten: De beste computerinterface? Je handen misschien?
Filmed:
Readability: 5
1,092,626 views
"De computer is een ongelooflijk krachtig middel voor creatieve expressie," zegt ontwerper James Patten. Nu gaan we vooral om met computers via typen en tikken. In deze talk en demo, schildert Patten een meer viscerale, fysieke manier om je gedachten en ideeën in de digitale wereld tot leven te brengen. Hij neemt de computerinterface uit het scherm en stopt hem in je handen.
James Patten - Interaction designer
James Patten, a TED Fellow, imagines new ways for us to play with computers. Full bio
James Patten, a TED Fellow, imagines new ways for us to play with computers. Full bio
Double-click the English transcript below to play the video.
00:12
A computer is an incredibly powerful means
0
721
2667
De computer is een
ongelofelijk krachtig middel
ongelofelijk krachtig middel
00:15
of creative expression,
1
3388
1654
om je creatief uit te drukken.
00:17
but for the most part,
2
5042
1571
Die uitdrukking beperkt zich
grotendeels tot het scherm
grotendeels tot het scherm
00:18
that expression is confined to the screens
3
6613
2165
00:20
of our laptops and mobile phones.
4
8778
2418
van onze laptop of mobiele telefoon.
00:23
And I'd like to tell you a story about
5
11196
2200
Ik wil je een verhaal vertellen
over het gebruik van de kracht
van de computer
van de computer
00:25
bringing this power of the computer
6
13396
1956
00:27
to move things around and interact with us
7
15352
2370
om dingen te bewegen
en met ons te interageren,
en met ons te interageren,
00:29
off of the screen and into the physical world
8
17722
2913
weg van het scherm,
naar de werkelijkheid
naar de werkelijkheid
00:32
in which we live.
9
20635
1189
waarin we leven.
00:33
A few years ago, I got a call from
10
21824
1618
Een paar jaar geleden belde
een luxe kledingwinkel,
een luxe kledingwinkel,
00:35
a luxury fashion store called Barneys New York,
11
23442
2486
Barneys in New York
00:37
and the next thing I knew,
12
25928
1264
en even later
00:39
I was designing storefront kinetic sculptures
13
27192
2693
was ik bewegende kunstwerken
aan het ontwerpen
aan het ontwerpen
00:41
for their window displays.
14
29885
1392
voor hun etalages.
00:43
This one's called "The Chase."
15
31277
1395
Deze heet 'de achtervolging'.
00:44
There are two pairs of shoes,
16
32672
1346
Er zijn twee paar schoenen:
00:46
a man's pair and a woman's pair,
17
34018
1625
van een man en een vrouw.
00:47
and they play out this slow, tense chase
18
35643
2904
Ze doen een langzame,
gevoelige achtervolging,
gevoelige achtervolging,
00:50
around the window
19
38547
1278
de etalage rond.
00:51
in which the man scoots up behind the woman
20
39825
2225
De 'man' schuifelt achter de 'vrouw' aan,
00:54
and gets in her personal space,
21
42050
1573
komt in haar persoonlijke ruimte,
00:55
and then she moves away.
22
43623
1935
en zij beweegt zich weg van hem.
00:57
Each of the shoes has magnets in it,
23
45558
1841
Er zitten magneten in de schoenen.
00:59
and there are magnets underneath the table
24
47399
2003
Onder de tafel zitten ook magneten
01:01
that move the shoes around.
25
49402
1964
die de schoenen doen bewegen.
01:03
My friend Andy Cavatorta was building
26
51366
2032
Mijn vriend Andy Cavatorta
heeft een robot-harp gebouwd
heeft een robot-harp gebouwd
01:05
a robotic harp for Bjork's Biophilia tour
27
53398
3542
voor de Biophilia-tour van Björk
01:08
and I wound up building the electronics
28
56940
2392
en ik ging de elektronica maken
01:11
and motion control software
29
59332
2189
en de software voor de afstandsbediening
01:13
to make the harps move and play music.
30
61521
2466
om de harp te laten bewegen en spelen.
01:15
The harp has four separate pendulums,
31
63987
2011
De harp heeft vier gescheiden slingers
01:17
and each pendulum has 11 strings,
32
65998
2126
en elke slinger heeft 11 snaren.
01:20
so the harp swings on its axis and also rotates
33
68124
2488
De harp draait dus om zijn as en roteert
01:22
in order to play different musical notes,
34
70612
2203
om zo verschillende noten te spelen.
01:24
and the harps are all networked together
35
72815
2162
De harpen zijn verbonden in een netwerk,
01:26
so that they can play the right notes
36
74977
1800
zodat ze de goede noten spelen
01:28
at the right time in the music.
37
76777
2626
op het juiste moment in de muziek.
01:31
I built an interactive chemistry exhibit
38
79403
2424
Ik heb een interactieve
chemie-tentoonstelling gemaakt
chemie-tentoonstelling gemaakt
01:33
at the Museum of Science and Industry in Chicago,
39
81827
2599
in het Museum voor
Wetenschap en Industrie in Chicago.
Wetenschap en Industrie in Chicago.
01:36
and this exhibit lets people use physical objects
40
84426
2981
De mensen kunnen er voorwerpen gebruiken
01:39
to grab chemical elements off of the periodic table
41
87407
3036
om scheikundige elementen te pakken
van een periodiek stelsel
van een periodiek stelsel
01:42
and bring them together to cause
42
90443
1408
en ze bij elkaar doen
01:43
chemical reactions to happen.
43
91851
1766
voor een chemische reactie.
01:45
And the museum noticed that people
44
93617
1924
Het museum zag dat de mensen
er lang mee speelden.
er lang mee speelden.
01:47
were spending a lot of time with this exhibit,
45
95541
2226
01:49
and a researcher from a science education center
46
97767
3147
Een onderzoeker van een
wetenschaps-educatiecentrum in Australië
wetenschaps-educatiecentrum in Australië
01:52
in Australia decided to study this exhibit
47
100914
2805
wilde de tentoonstelling bestuderen
01:55
and try to figure out what was going on.
48
103719
2240
om te onderzoeken
wat er aan de hand was.
wat er aan de hand was.
01:57
And she found that the physical objects
49
105959
2293
Ze ontdekte dat
de fysieke voorwerpen hielpen
de fysieke voorwerpen hielpen
02:00
that people were using were helping people
50
108252
1664
bij het begrijpen hoe ze
de tentoonstelling moesten gebruiken.
de tentoonstelling moesten gebruiken.
02:01
understand how to use the exhibit,
51
109916
2014
02:03
and were helping people learn in a social way.
52
111930
2943
We hielpen mensen leren op een sociale manier.
02:06
And when you think about
it, this makes a lot of sense,
it, this makes a lot of sense,
53
114873
2266
Als je erover nadenkt, is het logisch
02:09
that using specialized physical objects
54
117139
2240
dat je met speciale fysieke voorwerpen
02:11
would help people use an interface more easily.
55
119379
3272
de bediening makkelijker leert gebruiken.
02:14
I mean, our hands and our minds are optimized
56
122651
2839
Onze handen en onze hersenen
zijn gebouwd om met
tastbare voorwerpen om te gaan.
tastbare voorwerpen om te gaan.
02:17
to think about and interact with tangible objects.
57
125490
3269
02:20
Think about which you find easier to use,
58
128759
2062
Wat vind je makkelijker om te gebruiken?
Een fysiek toetsenbord
02:22
a physical keyboard or an onscreen keyboard
59
130821
2319
of een toetsenbord op een scherm
zoals op je mobiel?
zoals op je mobiel?
02:25
like on a phone?
60
133140
2100
Het viel me bij al deze projecten op
02:27
But the thing that struck me
61
135240
1025
02:28
about all of these different projects
62
136265
1999
02:30
is that they really had to be built from scratch,
63
138264
3117
dat ze allemaal vanuit niets
moesten worden opgebouwd,
moesten worden opgebouwd,
02:33
down to the level of the electronics
64
141381
1790
tot op het niveau van de elektronica
02:35
and the printed circuit boards and
65
143171
1106
en de elektronische printplaatjes
02:36
all the mechanisms all the way up to the software.
66
144277
2745
en alle mechaniek tot aan de software.
02:39
I wanted to create something
67
147022
1762
Ik wilde iets maken
02:40
where we could move objects
under computer control
under computer control
68
148784
3319
waarbij we voorwerpen konden bewegen
met afstandsbediening
met afstandsbediening
02:44
and create interactions around that idea
69
152103
2249
met daar omheen interactie
02:46
without having to go through this process
70
154352
2215
zonder elke keer van nul te moeten beginnen.
02:48
of building something from scratch
71
156567
1383
02:49
every single time.
72
157950
1375
Mijn eerste poging om dat te bereiken,
02:51
So my first attempt at this
73
159325
1991
02:53
was at the MIT Media Lab
74
161316
1684
was in het MIT Media Lab
02:55
with Professor Hiroshi Ishii,
75
163000
1581
van professor Hiroshi Ishii.
02:56
and we built this array of
76
164581
1835
We bouwden deze stapel
02:58
512 different electromagnets,
77
166416
2257
van 512 verschillende elektromagneten,
03:00
and together they were able to move objects around
78
168673
2627
en samen konden ze voorwerpen bewegen
03:03
on top of their surface.
79
171300
1536
bovenop hun oppervlak.
03:04
But the problem with this
80
172836
1548
Het probleem is
03:06
was that these magnets
81
174384
1656
dat deze magneten
meer dan $10.000 kosten.
meer dan $10.000 kosten.
03:08
cost over 10,000 dollars.
82
176040
2160
03:10
Although each one was pretty small,
83
178200
1666
Hoewel ze allemaal klein zijn,
03:11
altogether they weighed so much
84
179866
1709
wegen ze samen zoveel
03:13
that the table that they were on
85
181575
1255
dat de tafel begon door te buigen.
03:14
started to sag.
86
182830
1558
03:16
So I wanted to build something
87
184388
1332
Ik wilde dus iets maken
03:17
where you could have this kind of interaction
88
185720
1616
waar die interactie mogelijk was
03:19
on any tabletop surface.
89
187336
2643
op een normaal tafelblad.
03:21
So to explore this idea,
90
189979
2081
Om dat idee uit te werken
03:24
I built an army of small robots,
91
192060
2150
heb ik een leger
kleine robots gemaakt.
kleine robots gemaakt.
03:26
and each of these robots has
what are called omni wheels.
what are called omni wheels.
92
194210
2765
Elk heeft een 'omni-wiel'.
03:28
They're these special wheels
93
196975
1305
Dat zijn van die wielen
03:30
that can move equally easily in all directions,
94
198280
2666
die makkelijk alle kanten op
kunnen bewegen.
kunnen bewegen.
03:32
and when you couple these robots
95
200946
2589
Als je deze robots
03:35
with a video projector,
96
203535
1910
aan een videoprojector koppelt,
03:37
you have these physical tools
97
205445
1808
krijg je de fysieke gereedschappen
03:39
for interacting with digital information.
98
207253
2900
voor de uitwisseling
van digitale informatie.
van digitale informatie.
03:42
So here's an example of what I mean.
99
210153
1842
Hier is een voorbeeld.
03:43
This is a video editing application
100
211995
1922
Dit is een videobewerk-applicatie
03:45
where all of the controls
101
213917
1486
waar alle bediening
03:47
for manipulating the video are physical.
102
215403
2307
voor videobewerking fysiek is.
03:49
So if we want to tweak the color,
103
217710
1582
Als je de kleur wilt aanpassen
03:51
we just enter the color mode,
104
219292
1352
ga je naar de kleurmodus.
03:52
and then we get three different dials
105
220644
1296
Je hebt dan drie wielen
03:53
for tweaking the color,
106
221940
1378
om de kleur aan te passen.
03:55
or if we want to adjust the audio,
107
223318
1961
Of als je het geluid wilt regelen,
03:57
then we get two different dials
for that, these physical objects.
for that, these physical objects.
108
225279
3341
heb je twee verschillende wielen
om dat fysiek te regelen.
om dat fysiek te regelen.
04:00
So here the left and right channel stay in sync,
109
228620
2846
Hier blijven het linkse en
rechtse kanaal synchroon.
rechtse kanaal synchroon.
04:03
but if we want to, we can override that
110
231466
1743
Je kan dat veranderen
04:05
by grabbing both of them at the same time.
111
233209
2999
door ze allebei tegelijk
vast te nemen.
vast te nemen.
04:08
So the idea is that we get the speed
112
236208
1928
Zo krijgen we de voordelen
van snelheid en efficiency
van snelheid en efficiency
04:10
and efficiency benefits of using these physical dials
113
238136
3117
van deze fysieke wielen,
04:13
together with the flexibility and versatility
114
241253
2790
samen met de flexibiliteit
en veelzijdigheid
en veelzijdigheid
04:16
of a system that's designed in software.
115
244043
3331
van een systeem dat
met software gemaakt is.
met software gemaakt is.
04:19
And this is a mapping application
116
247374
1935
En dit is een applicatie
voor kaarten bij rampenbestrijding.
voor kaarten bij rampenbestrijding.
04:21
for disaster response.
117
249309
2127
04:23
So you have these physical objects
118
251436
1945
Je hebt de fysieke voorwerpen voor
04:25
that represent police, fire and rescue,
119
253381
2227
politie, brandweer en reddingsdiensten
04:27
and a dispatcher can grab them
120
255608
1553
en iets om ze te grijpen
04:29
and place them on the map
121
257161
1326
en op de kaart te zetten,
04:30
to tell those units where to go,
122
258487
1989
om te zeggen waar ze
naartoe moeten.
naartoe moeten.
04:32
and then the position of the units on the map
123
260476
2376
De locatie van de eenheden op de kaart
04:34
gets synced up with the position
124
262852
1969
wordt gesynchroniseerd met de locatie
van de eenheden in de echte wereld.
van de eenheden in de echte wereld.
04:36
of those units in the real world.
125
264821
3627
04:40
This is a video chat application.
126
268448
1612
Dit is een videochat-toepassing.
04:42
It's amazing how much emotion you can convey
127
270060
2352
Ongelofelijk hoeveel emotie je kwijt kan
04:44
with just a few simple movements
128
272412
1213
met wat beweging
04:45
of a physical object.
129
273625
2425
van een fysiek voorwerp.
04:48
With this interface, we open up
a huge array of possibilities
a huge array of possibilities
130
276050
3052
Met deze interface krijgen we
enorm veel mogelijkheden
enorm veel mogelijkheden
04:51
in between traditional board games
131
279102
2078
tussen de traditionele bordspellen
04:53
and arcade games,
132
281180
1414
en speelautomaten.
04:54
where the physical possibilities of interaction
133
282594
2547
Door de fysieke interactie
04:57
make so many different styles of play possible.
134
285141
3713
worden veel spelvariaties mogelijk.
05:00
But one of the areas that I'm most excited
135
288854
2389
Ik ben het meest enthousiast
05:03
about using this platform for
136
291243
1814
over het gebruik van dit platform
05:05
is applying it to problems that are difficult
137
293057
2543
voor problemen die moeilijk
op te lossen zijn
op te lossen zijn
05:07
for computers or people to solve alone.
138
295600
2254
voor alleen computers of mensen.
05:09
One example of those is protein folding.
139
297854
2622
Een voorbeeld is vouwen van eiwitten.
05:12
So here we have an interface
140
300476
1412
Hier heb ik een interface
05:13
where we have physical handles onto a protein,
141
301888
3514
waarbij een eiwit handvatten heeft
05:17
and we can grab those handles
142
305402
1751
waarmee we het kunnen bewegen
05:19
and try to move the protein and
try to fold it in different ways.
try to fold it in different ways.
143
307153
2987
en op verschillende manieren te vouwen.
05:22
And if we move it in a way that
doesn't really make sense
doesn't really make sense
144
310140
3000
Als we hem bewegen
in een richting die nergens op slaat,
in een richting die nergens op slaat,
05:25
with the underlying molecular simulation,
145
313140
1967
met moleculaire nabootsing,
05:27
we get this physical feedback where we can
146
315107
2202
krijgen we fysieke feedback
05:29
actually feel these physical handles
147
317309
1973
omdat we de handvatten
echt voelen terugtrekken.
echt voelen terugtrekken.
05:31
pulling back against us.
148
319282
1608
05:32
So feeling what's going on
149
320890
1531
Voelen wat er speelt
05:34
inside a molecular simulation
150
322421
2239
in een molecuul-simulatie
05:36
is a whole different level of interaction.
151
324660
2946
is een heel ander niveau van interactie.
05:39
So we're just beginning to explore
152
327606
2981
We staan aan het begin
van een ontdekkingstocht
van een ontdekkingstocht
05:42
what's possible when we use software
153
330587
2511
naar de mogelijkheden om met software
de beweging te regelen
de beweging te regelen
05:45
to control the movement
154
333098
1491
05:46
of objects in our environment.
155
334589
2243
van voorwerpen in onze omgeving.
05:48
Maybe this is the computer of the future.
156
336832
2904
Misschien is dit
de computer van de toekomst.
de computer van de toekomst.
05:51
There's no touchscreen.
157
339736
1616
Zonder touchscreen.
05:53
There's no technology visible at all.
158
341352
2031
Er is helemaal geen techniek zichtbaar.
05:55
But when we want to have a video chat
159
343383
1844
Maar als we een videogesprek willen
05:57
or play a game
160
345227
1461
of een spel spelen
05:58
or lay out the slides to our next TED Talk,
161
346688
2713
of de dia's van de volgende
TED Talk willen plaatsen
TED Talk willen plaatsen
06:01
the objects on the table come alive.
162
349401
2273
dan komen de voorwerpen tot leven.
06:03
Thank you.
163
351674
1352
Dank je wel.
06:05
(Applause)
164
353026
2123
(Applaus)
ABOUT THE SPEAKER
James Patten - Interaction designerJames Patten, a TED Fellow, imagines new ways for us to play with computers.
Why you should listen
James Patten is an interaction designer, inventor and visual artist working at the intersection of the physical and digital worlds. Patten is a TED Fellow and the founder and principal of the design firm Patten Studio, where his clients have included Björk, Barneys New York, General Electric, Steelcase and Autodesk. Patten earned his doctorate at the MIT Media Lab where he studied in the Tangible Media Group under Hiroshi Ishii. His work has been exhibited or performed in venues such as the Museum of Modern Art, the Transmediale festival in Berlin, the Museo Guggenheim Bilbao and the Ars Electronica Center in Linz, Austria. Patten's work has been recognized in several international design competitions including the International Design Magazine's Annual Design Review, and the International Design Excellence Awards. Tour his Brooklyn workshop.
James Patten | Speaker | TED.com