Rana el Kaliouby: This app knows how you feel -- from the look on your face
רנא אל קליובי: יישום זה יודע איך אתם מרגישים - מהמבט על הפנים שלכם
What if a computer could recognize your facial expression, and react to how you feel? Rana el Kaliouby sees big possibilities in making technology emotionally aware. Full bio
Double-click the English transcript below to play the video.
every aspect of our lives,
היבט של חיינו,
to how we do business and make decisions,
עסקים ומקבלים החלטות,
how we connect with one another.
אנו מתחברים זה לזה.
in a world like this,
more and more of our lives like this --
יותר ויותר כך -
from my daughter last night --
מהבת שלי אתמול בלילה --
back into our digital experiences.
לחוויות הדיגיטליות שלנו.
a Ph.D. program at Cambridge University.
באוניברסיטת קיימברידג'.
who had to stay in Egypt,
away from home,
more hours with my laptop
עם המחשב הנישא שלי
had absolutely no idea how I was feeling.
לא היה כל מושג איך אני מרגישה
online with my family back home,
עם משפחתי באינטרנט
disappeared in cyberspace.
נעלמו במרחב הקיברנטי.
and on some days I was actually crying,
ולמשך כמה ימים ממש בכיתי,
these emotions was this.
את הרגשות האלו היה זה.
has lots of I.Q., but no E.Q.;
but no emotional intelligence.
אבל אין אינטליגנציה רגשית.
could sense our emotions?
לחוש את הרגשות שלנו?
how we felt and reacted accordingly,
איך הרגשנו והיו מגיבים בהתאם,
intelligent friend would?
רגשית היה מרגיש?
הצוות שלי
and respond to our emotions,
את הרגשות שלנו, ולהגיב להם.
הפנים האנושיות.
one of the most powerful channels
אחד מהערוצים החזקים ביותר
social and emotional states,
מצבים חברתיים ורגשיים,
facial muscle movement an action unit.
תנועת שרירי פנים יחידת פעולה.
which is the main component of a smile.
שמהווה את המרכיב העיקרי של חיוך.
some smiles going on.
כמה חיוכים.
It's the brow furrow.
היא כיווץ המצח.
את הגבות שלכם יחד
these textures and wrinkles.
המרקמים והקמטים האלה.
a strong indicator of a negative emotion.
אינדיקציה חזקה של רגש שלילי.
hundreds of emotions.
מאות רגשות.
these facial emotions is hard,
הפנים האלו,
they can be fast, they're subtle,
הן יכולות להיות מהירות, הן עדינות,
the smile and the smirk.
but they mean very different things.
שונה לחלוטין.
שלילי.
can make you become famous.
יכול לגרום לכם להיות מפורסמים
for a computer to be able
שמחשב יהיה מסוגל
between the two expressions.
of people we know to be smiling,
של אנשים שאנחנו מכירים כמחייכים,
ומגדרים שונים,
עבור גיחוכים.
למידה עמוקה
textures and wrinkles
המרקמים והקמטים האלו
have common characteristics,
יש מאפיינים משותפים,
different characteristics.
מאפיינים מעודנים שונים.
פנים חדשות,
characteristics of a smile,
של חיוך,
This is a smile expression."
זו הבעת חיוך. "
how this technology works
איך הטכנולוגיה הזו עובדת
preferably somebody with a face.
רצוי מישהו עם פנים.
המתנדבת שלנו היום
from being a research project at MIT
מלהיות פרויקט מחקר ב- MIT
to make this technology work,
כדי לגרום לטכנולוגיה הזו לעבוד,
the core emotion engine
with a camera, like this iPad.
עם מצלמה, כמו האייפד הזה.
has essentially found Cloe's face,
בעצם מצא את פניה של קלואי,
feature points on her face,
המרכזיים של פניה,
her mouth and her nose.
פיה ואפה.
can it recognize her expression?
האם זה יכול לזהות את הבעתה?
Yep, awesome. (Laughter)
כן, מדהים. (צחוק)
this is a genuine smile, it's great.
זה חיוך אמיתי, זה נהדר.
go up as she smiles.
עולה כשהיא מחייכת.
to see if the computer can recognize?
כדי לראות אם המחשב יכול לזהות?
to make that happen.
כדי שזה יקרה.
indicator of surprise.
שמצביעה של הפתעה.
an indicator of confusion.
action units. There's many more of them.
יש עוד מהן.
an emotion data point,
נקודת נתוני רגש,
to portray different emotions.
כדי לתאר רגשות שונים.
look like you're happy.
נראה כאילו שאתם שמחים
when Zayn left One Direction.
כשזאיין עזב בכיוון אחד.
negative, so you must have been a big fan.
אז כנראה שאת מעריצה גדולה.
or negative an experience is,
החוויה היא חיובית או שלילית,
expressive she is as well.
היא בעלת הבעה גם כן.
to this real-time emotion stream,
לזרם רגש כזה בזמן אמת,
with anybody she wanted to.
עם כל מי שהיא רצתה.
12 billion of these emotion data points.
נקודות נתוני רגש אלה.
database in the world.
ביותר בעולם.
from 2.9 million face videos,
וידאו של פנים.
to share their emotions with us,
לחלוק את רגשותיהם איתנו,
as personal as our emotions,
כה אישי כמו הרגשות שלנו,
בקנה המידה הזה
that you might suspect.
שאולי אתם מנחשים.
הבעה מגברים.
their smiles last longer,
החיוכים שלהם נמשכים יותר זמן,
what it is that men and women
מהו הדבר שגברים ונשים
אז בארצות הברית,
more expressive than men,
יותר בעלות הבעה מגברים,
in the U.K. between men and women.
הבדל בבריטניה בין גברים לנשים.
than younger people.
מאנשים צעירים.
than men the same age,
הרבה יותר מגברים באותו גיל,
the most about this data
בנתונים אלה
to be expressive all the time,
in front of our devices alone,
לבד מול המכשירים שלנו,
cat videos on Facebook.
בקטעי וידאו על חתולים בפייסבוק.
texting, shopping online,
הודעות SMS, וקניות באינטרנט,
and voting behavior;
or emotion-enabling technology,
רגש,
that are especially close to my heart.
שקרובות ללבי במיוחד.
can help individuals
יכולים לעזור לאנשים
read the faces of others,
של אחרים
on the autism spectrum interpret emotion,
על הספקטרום האוטיסטי לפרש רגש,
if your learning apps
הלמידה שלכם
ואז מאיטים,
מאיצים,
would in a classroom.
עוקב אחר מצב הרוח שלכם,
שאתם עייפים,
knows that you're stressed,
יודע שאתם לחוצים,
from binge eating. (Laughter)
מכם בולמוס אכילה. (צחוק)
emotion stream,
בזמן אמת,
back home in a very natural way,
בבית באופן מאוד טבעי,
in the same room together?
כולנו יחד באותו חדר?
to have an emotion chip,
שבב רגש,
when we couldn't just frown at our device
פשוט לזעוף על המכשיר שלנו
you didn't like that, did you?"
לא אהבת את זה , נכון?"
so many applications of this technology,
כל כך הרבה יישומים של טכנולוגיה זו,
build them all ourselves,
לבנות את כולם בעצמנו,
so that other developers
שמפתחים אחרים
there are potential risks
סיכונים פוטנציאליים
many years doing this,
שנים רבות בעשייה של זה,
intelligent technology
part of the conversation.
חלק מהשיחה.
about this technology,
על טכנולוגיה זו,
in how it's being used.
מה יהיה אופן השימוש.
of our lives become digital,
דיגיטליים,
trying to curb our usage of devices
את השימוש במכשירים שלנו
is to bring emotions into our technology
הוא להביא רגשות לטכנולוגיה שלנו
ליותר מגיבה.
that have separated us
שהפרידו בינינו
we have this golden opportunity
יש לנו הזדמנות פז
connect with machines,
יוצרים קשר עם מכונות
ABOUT THE SPEAKER
Rana el Kaliouby - Computer scientistWhat if a computer could recognize your facial expression, and react to how you feel? Rana el Kaliouby sees big possibilities in making technology emotionally aware.
Why you should listen
Rana el Kaliouby, chief science officer and co-founder of Affectiva, an MIT Media Lab spin-off, is on a mission to bring emotion intelligence to our digital experiences. She leads the company's emotion analytics team, which is responsible for developing emotion-sensing algorithms and mining the world's largest emotion data database. So far, they've collected 12 billion emotion data points from 2.9 million face videos from volunteers in 75 countries. The company’s platform is used by many Fortune Global 100 companies to measure consumer engagement, and is pioneering emotion-enabled digital apps for enterprise, entertainment, video communication and online education.
Entrepreneur magazine called el Kaliouby one of “The 7 Most Powerful Women To Watch in 2014,” and the MIT Technology Review included her in their list of the “Top 35 Innovators Under 35.”
Rana el Kaliouby | Speaker | TED.com