Stuart Russell: 3 principles for creating safer AI
Stuart Russell: Come l'IA potrebbe renderci persone migliori
Stuart Russell wrote the standard text on AI; now he thinks deeply on AI's future -- and the future of us humans, too. Full bio
Double-click the English transcript below to play the video.
greatest Go players,
di Go al mondo,
in Silicon Valley call
a Silicon Valley dicono
ci rendiamo conto
a lot faster than we expected.
molto più rapidamente del previsto.
What about the real world?
E nel mondo reale?
of the technologies
is not yet happening in machines,
non sono ancora in grado di leggere,
that the human race has ever written.
che gli umani hanno scritto.
further ahead than humans can,
molto più lontano degli umani,
to more information,
a più informazioni,
in the real world than we can.
nel mondo reale rispetto a noi.
everything that we value,
tutto ciò a cui diamo valore,
to a lot more intelligence,
a molta più intelligenza,
to what the human race can do.
a ciò che la razza umana può fare.
as some people have described it,
come alcuni lo hanno descritto,
of the human race?
della razza umana"?
and Stephen Hawking?
e Stephen Hawking?
has been around for a while.
circola da un po'.
in a subservient position,
in una posizione subordinata,
at strategic moments" --
in momenti strategici" --
"turning off the power" idea later on --
di "staccare la corrente"
feel greatly humbled."
sentirci fortemente umiliati."
This is Alan Turing in 1951.
Questo è Alan Turing nel 1951.
is the father of computer science
è il padre dell'informatica
the father of AI as well.
anche il padre dell'IA.
more intelligent than your own species,
di più intelligente della nostra specie,
il "problema del gorilla",
a few million years ago,
lo hanno fatto milioni di anni fa,
to discuss whether it was a good idea,
per discutere se è stata una buona idea,
they conclude, no,
arrivano alla conclusione: no,
sadness in their eyes.
la tristezza esistenziale nei loro occhi.
something smarter than your own species
di più intelligente della propria specie
except stop doing AI,
se non smettere di produrre IA,
the benefits that I mentioned
to keep doing AI.
a produrre ancora IA.
the problem a bit more.
definire un po' di più il problema.
una catastrofe?
that the purpose put into the machine
che l'obiettivo inserito nella macchina
one of the very early learning systems
uno dei primi sistemi di apprendimento
better than its creator.
meglio del proprio creatore.
I touch to turn to gold,"
che tocco diventi oro,"
that he put into the machine,
che aveva inserito nella macchina,
and his relatives turned to gold
e i suoi parenti diventarono oro
"the King Midas problem"
"problema di Re Mida"
which is not, in fact,
che non è, in realtà,
"the value alignment problem."
"problema di conformità dei valori."
is not the only part of the problem.
non è l'unica parte del problema.
"Fetch the coffee,"
"Porta il caffè,"
to fetch the coffee?
a portare il caffè?
against interference
dalle interferenze
that I have been given."
che mi è stato dato."
of an objective that is, in fact,
che non è, in realtà,
of the human race --
della razza umana --
takeaway from this talk.
di questa conferenza.
the coffee if you're dead.
portare il caffè se siete morti.
Repeat it to yourself three times a day.
Ripetetevelo tre volte al giorno.
esattamente la trama
with the objectives of the humans,
all'obiettivo degli umani,
is not superintelligent.
non è super intelligente.
but eventually Dave outwits him
ma alla fine Dave lo batte
pursue objectives.
in modo intelligente.
of altruism, if you like,
di altruismo, se volete,
of human objectives,
degli obiettivi umani,
touchy-feely, goody-goody values.
valori sdolcinati, da santarellini.
that the human would prefer
gli esseri umani
its own existence.
deve tutelare la sua esistenza.
its existence whatsoever.
nel preservare la sua esistenza.
of humility, if you like.
di umiltà, se volete.
important to make robots safe.
per rendere sicuri i robot.
but it doesn't know what they are.
ma non sa cosa sono.
of single-minded pursuit
della caccia risoluta
by observation of human choices,
dall'osservazione delle scelte umane,
delle informazioni
our lives to be like.
che le nostre vite siano.
to this question of:
alla seguente domanda:
as Turing suggested.
come suggeriva Turing.
right on the back.
sul dorso.
going to let you switch it off?
di spegnerlo?
the coffee, I must fetch the coffee,
"Porta il caffè, devo portare il caffè,
has been listening to my talk,
ha ascoltato il mio discorso,
"I must disable my 'off' switch,
"Devo disabilitare il pulsante 'off'",
people in Starbucks
nello Starbucks
seems to be inevitable,
sembra inevitabile,
a concrete, definite objective.
concreto e definito.
is uncertain about the objective?
è incerta sull'obiettivo?
might switch me off,
può spegnermi,
principles right there.
e il secondo principio.
che l'uomo mi spenga."
the incentive that the robot has
lo stimolo che riceve il robot
al grado di incertezza
the underlying objective.
it should be pursuing,
che deve perseguire,
what it did wasn't right.
che ciò che ha fatto non era corretto.
of Greek symbols,
di simboli greci,
is provably beneficial to the human.
è certamente vantaggioso agli umani.
with a machine that's designed in this way
con una macchina programmata in tale modo
but this is the first step
ma è il primo passo
with human-compatible AI.
con l'IA compatibile con gli umani.
scratching your head over.
che fa grattare la testa.
you know, I behave badly.
"Mi comporto male.
si comporti come me.
and take stuff from the fridge.
e prendo roba dal frigo.
you don't want the robot doing.
che non volete il robot faccia.
quite work that way.
sempre così.
copierà il vostro comportamento.
is going to copy your behavior.
and maybe help you resist them,
e forse potrebbe aiutarvi a resistere,
for any person and for any possible life
per chiunque e per ogni possibile vita
difficulties involved in doing this;
is going to get solved very quickly.
che si risolva velocemente.
we behave badly.
noi ci comportiamo male.
doesn't have to copy the behavior.
non deve copiare il comportamento.
any objective of its own.
the desires of one person, the user,
i desideri di una persona, l'utente,
the preferences of everybody.
le preferenze di ognuno.
amount of nastiness,
con una certa cattiveria,
that your nastiness, for example,
la vostra cattiveria, per esempio,
da agente doganale
and send your kids to school.
la famiglia e mandare i bambini a scuola.
it doesn't mean it's going to steal.
non significa che andrà a rubare.
send your kids to school.
a mandare i vostri bambini a scuola.
he took an action that lost the game.
ne ha fatta una che gli ha fatto perdere.
through a model of human cognition
con un modello di cognizione umana
limitations -- a very complicated model.
un modello molto complicato.
that we can work on understanding.
from my point of view as an AI researcher,
dal punto di vista di ricercatore di IA,
trade off, weigh up the preferences
alternare, soppesare le preferenze
moral philosophers have understood that,
filosofi morali lo hanno capito,
looking for collaboration.
cercando collaborazione.
when you get that wrong.
quando commettete uno sbaglio.
a conversation, for example,
intelligente
in a few years' time.
tra pochi anni.
to remind you about dinner tonight."
per ricordarti della cena stasera."
"What? What dinner?
"Cosa? Quale cena?
with the secretary-general at 7:30.
col segretario generale alle 7:30.
my recommendation."
la mia raccomandazione."
I can't just tell him I'm too busy."
che sono impegnato."
for his plane to be delayed."
Ho fatto ritardare il suo aereo."
for lunch tomorrow."
a pranzo domani."
there's a slight mistake going on.
si è verificato un piccolo errore.
i valori di mia moglie
dopo una dura giornata di lavoro,
after a hard day's work,
di pranzare."
Could you make some dinner?"
Puoi prepararmi la cena?"
who are in more urgent need than you."
che hanno un bisogno più urgente del tuo."
to working on them.
they're going to read everything
ho detto che leggeranno tutto ciò
is human beings doing things
è su uomini che fanno cose
of data to learn from.
da cui imparare.
strong economic incentive
economico molto forte
a casa.
e il robot deve sfamare i bambini,
and the robot has to feed the kids,
and there's nothing in the fridge.
e non c'è niente nel frigo.
the human value function properly,
i valori umani in modo corretto,
the nutritional value of the cat.
supera il suo valore nutrizionale.
for family dinner."
per la cena di famiglia."
of the domestic robot industry.
dell'industria del robot domestico.
to get this right
per farlo bene
alle macchine super intelligenti.
superintelligent machines.
the definition of AI
la definizione di IA
beneficial machines.
avremo macchine vantaggiose.
solo i nostri obiettivi,
about what those objectives are,
sui loro obiettivi,
su cosa vogliamo veramente.
that we really want.
we will learn to be better people.
impareremo ad essere persone migliori.
perché credo che stiano preparando
because I think they're setting up
sembra intuitivamente molto potente.
seems intuitively really powerful.
this idea that knowledge
l'idea che la conoscenza
and rewriting that programming?
e riscrivere la programmazione?
it to learn more, as I said,
imparare meglio, come ho detto,
as it becomes more correct,
quando diventerà più corretto,
to interpret it correctly.
per interpretarla correttamente.
that books are very biased
che i libri sono molto prevenuti
che fanno cose.
sui nostri obiettivi
just boil it down to one law,
limitarti a una legge,
a self-driving car
una macchina che si guida da sola
di cinque anni
to be able to switch off the car
sia capace di spegnere la macchina
and sensible the person is.
e sensibile sia la persona.
to be switched off.
a essere spenti.
random or even malicious,
o perfino malvagia,
to be switched off.
a essere spenti.
figure this out for us.
lo scopra per noi.
That was amazing.
È stata fantastica.
ABOUT THE SPEAKER
Stuart Russell - AI expertStuart Russell wrote the standard text on AI; now he thinks deeply on AI's future -- and the future of us humans, too.
Why you should listen
Stuart Russell is a professor (and formerly chair) of Electrical Engineering and Computer Sciences at University of California at Berkeley. His book Artificial Intelligence: A Modern Approach (with Peter Norvig) is the standard text in AI; it has been translated into 13 languages and is used in more than 1,300 universities in 118 countries. His research covers a wide range of topics in artificial intelligence including machine learning, probabilistic reasoning, knowledge representation, planning, real-time decision making, multitarget tracking, computer vision, computational physiology, global seismic monitoring and philosophical foundations.
He also works for the United Nations, developing a new global seismic monitoring system for the nuclear-test-ban treaty. His current concerns include the threat of autonomous weapons and the long-term future of artificial intelligence and its relation to humanity.
Stuart Russell | Speaker | TED.com