TED2018
Yasmin Green: How technology can fight extremism and online harassment
Yasmin Green: Como a tecnologia pode combater o extremismo e o assédio on-line
Filmed:
Readability: 4.6
2,460,759 views
A tecnologia pode tornar as pessoas mais seguras contra ameaças como extremismo violento, censura e perseguição? Nesta palestra esclarecedora, a tecnóloga Yasmin Green detalha os programas pioneiros no Jigsaw (uma unidade da Alphabet Inc., um conjunto de empresas que também inclui o Google) para combater a radicalização e o assédio on-line, incluindo um projeto que poderia dar aos comentaristas feedback em tempo real sobre como suas palavras podem soar, o que já aumentou espaços para o diálogo. "Se alguma vez pensamos que poderíamos construir uma internet isolada do lado escuro da humanidade, estávamos errados", diz Green. "Temos que nos dedicar a construir soluções tão humanas quanto os problemas que elas pretendem resolver."
Yasmin Green - Geopolitical technologist
Yasmin Green is the director of research and development for Jigsaw, a unit within Alphabet Inc. focused on solving global security challenges through technology. Full bio
Yasmin Green is the director of research and development for Jigsaw, a unit within Alphabet Inc. focused on solving global security challenges through technology. Full bio
Double-click the English transcript below to play the video.
00:13
My relationship with the internet
reminds me of the setup
reminds me of the setup
0
1131
4411
Minha relação com a internet
me lembra o roteiro
me lembra o roteiro
de um filme de terror clichê.
00:17
to a clichéd horror movie.
1
5566
1833
00:19
You know, the blissfully happy family
moves in to their perfect new home,
moves in to their perfect new home,
2
7867
4386
A radiante família feliz se muda
para a nova casa perfeita,
para a nova casa perfeita,
animada com seu futuro perfeito,
00:24
excited about their perfect future,
3
12277
2281
está ensolarado, os pássaros cantam...
00:26
and it's sunny outside
and the birds are chirping ...
and the birds are chirping ...
4
14582
3521
00:30
And then it gets dark.
5
18857
1839
E então começa a ficar sinistro.
00:32
And there are noises from the attic.
6
20720
2348
Há sons vindo do sótão.
E descobrimos que a nova casa perfeita
não é tão perfeita.
não é tão perfeita.
00:35
And we realize that that perfect
new house isn't so perfect.
new house isn't so perfect.
7
23092
4345
00:40
When I started working at Google in 2006,
8
28485
3131
Quando comecei a trabalhar
no Google em 2016
no Google em 2016
o Facebook tinha apenas dois anos
00:43
Facebook was just a two-year-old,
9
31640
1767
00:45
and Twitter hadn't yet been born.
10
33431
2012
e o Twitter ainda não tinha nascido.
00:47
And I was in absolute awe
of the internet and all of its promise
of the internet and all of its promise
11
35848
4410
Eu estava maravilhada pela internet
e toda sua promessa
e toda sua promessa
de nos aproximar,
00:52
to make us closer
12
40282
1437
00:53
and smarter
13
41743
1296
nos tornar mais espertos e mais livres.
00:55
and more free.
14
43063
1214
00:57
But as we were doing the inspiring work
of building search engines
of building search engines
15
45265
3714
Porém, ao nos dedicar à inspiradora
tarefa de construir máquinas de busca,
tarefa de construir máquinas de busca,
01:01
and video-sharing sites
and social networks,
and social networks,
16
49003
2886
sites de compartilhamento
de vídeo e redes sociais,
de vídeo e redes sociais,
01:04
criminals, dictators and terrorists
were figuring out
were figuring out
17
52907
4304
criminosos, ditadores e terroristas
estavam descobrindo
estavam descobrindo
01:09
how to use those same
platforms against us.
platforms against us.
18
57235
3202
como usar as mesmas
plataformas contra nós.
plataformas contra nós.
01:13
And we didn't have
the foresight to stop them.
the foresight to stop them.
19
61417
2455
E nós não previmos isso para detê-los.
01:16
Over the last few years, geopolitical
forces have come online to wreak havoc.
forces have come online to wreak havoc.
20
64746
5099
Nos últimos anos, forças geopolíticas
surgiram on-line para causar estragos.
surgiram on-line para causar estragos.
E, em resposta,
01:21
And in response,
21
69869
1169
o Google apoiou alguns colegas e eu
a criar um novo grupo chamado Jigsaw
a criar um novo grupo chamado Jigsaw
01:23
Google supported a few colleagues and me
to set up a new group called Jigsaw,
to set up a new group called Jigsaw,
22
71062
4778
com a missão de tornar
as pessoas mais seguras
as pessoas mais seguras
01:27
with a mandate to make people safer
from threats like violent extremism,
from threats like violent extremism,
23
75864
4596
de ameaças como
o extremismo violento,
o extremismo violento,
01:32
censorship, persecution --
24
80484
2078
censura, perseguição.
01:35
threats that feel very personal to me
because I was born in Iran,
because I was born in Iran,
25
83186
4117
Ameaças muito pessoais a mim,
pois eu nasci no Irã
pois eu nasci no Irã
e saí de lá após o período
de uma revolução violenta.
de uma revolução violenta.
01:39
and I left in the aftermath
of a violent revolution.
of a violent revolution.
26
87327
2929
01:43
But I've come to realize
that even if we had all of the resources
that even if we had all of the resources
27
91525
4346
Mas percebi que, mesmo
se tivéssemos todos os recursos
se tivéssemos todos os recursos
de todas as empresas
de tecnologia do mundo,
de tecnologia do mundo,
01:47
of all of the technology
companies in the world,
companies in the world,
28
95895
2858
01:51
we'd still fail
29
99595
1230
nós ainda iríamos falhar
01:53
if we overlooked one critical ingredient:
30
101586
2948
caso negligenciássemos
um ingrediente crítico:
um ingrediente crítico:
01:57
the human experiences of the victims
and perpetrators of those threats.
and perpetrators of those threats.
31
105653
5789
as experiências humanas das vítimas
e os autores dessas ameaças.
e os autores dessas ameaças.
Há muitos desafios sobre
os quais eu poderia falar hoje;
os quais eu poderia falar hoje;
02:04
There are many challenges
I could talk to you about today.
I could talk to you about today.
32
112935
2736
vou focar apenas dois.
02:07
I'm going to focus on just two.
33
115695
1504
02:09
The first is terrorism.
34
117623
2079
Primeiro, o terrorismo.
02:13
So in order to understand
the radicalization process,
the radicalization process,
35
121563
2557
Para entender o processo de radicalização,
nos encontramos com dezenas de ex-membros
de grupos extremistas violentos.
de grupos extremistas violentos.
02:16
we met with dozens of former members
of violent extremist groups.
of violent extremist groups.
36
124144
4287
02:21
One was a British schoolgirl,
37
129590
2483
Um era uma estudante britânica
02:25
who had been taken off of a plane
at London Heathrow
at London Heathrow
38
133049
3699
que havia sido retirada de um avião
em Londres-Heathrow,
em Londres-Heathrow,
enquanto tentava entrar na Síria
para se juntar ao EI.
para se juntar ao EI.
02:28
as she was trying to make her way
to Syria to join ISIS.
to Syria to join ISIS.
39
136772
4692
02:34
And she was 13 years old.
40
142281
1931
Ela só tinha 13 anos.
02:37
So I sat down with her and her father,
and I said, "Why?"
and I said, "Why?"
41
145792
4625
Então me sentei com ela
e seu pai e disse: "Por quê?"
e seu pai e disse: "Por quê?"
E ela respondeu:
02:42
And she said,
42
150441
1717
02:44
"I was looking at pictures
of what life is like in Syria,
of what life is like in Syria,
43
152182
3639
"Eu estava procurando por imagens
de como é a vida na Síria;
de como é a vida na Síria;
02:47
and I thought I was going to go
and live in the Islamic Disney World."
and live in the Islamic Disney World."
44
155845
3510
achei que eu estava indo viver
na Disneylândia islâmica".
na Disneylândia islâmica".
02:52
That's what she saw in ISIS.
45
160527
2084
Foi isso o que ela viu no Estado Islâmico.
Ela achou que iria conhecer e se casar
com um Brad Pitt jihadista,
com um Brad Pitt jihadista,
02:54
She thought she'd meet and marry
a jihadi Brad Pitt
a jihadi Brad Pitt
46
162635
3492
fazer compras no shopping o dia todo
e viver feliz para sempre.
e viver feliz para sempre.
02:58
and go shopping in the mall all day
and live happily ever after.
and live happily ever after.
47
166151
3058
03:02
ISIS understands what drives people,
48
170977
2824
O EI entende o que motiva as pessoas
e, cuidadosamente, constrói
uma mensagem para cada audiência.
uma mensagem para cada audiência.
03:05
and they carefully craft a message
for each audience.
for each audience.
49
173825
3544
03:11
Just look at how many languages
50
179122
1511
Basta ver em quantas línguas
eles traduzem sua propaganda.
eles traduzem sua propaganda.
03:12
they translate their
marketing material into.
marketing material into.
51
180657
2273
03:15
They make pamphlets,
radio shows and videos
radio shows and videos
52
183677
2661
Eles fazem planfetos,
programas de rádio e vídeos
programas de rádio e vídeos
03:18
in not just English and Arabic,
53
186362
1973
não só em inglês e árabe,
03:20
but German, Russian,
French, Turkish, Kurdish,
French, Turkish, Kurdish,
54
188359
4767
mas em alemão, russo,
francês, turco, curdo,
francês, turco, curdo,
hebraico
03:25
Hebrew,
55
193150
1672
e chinês mandarim.
03:26
Mandarin Chinese.
56
194846
1741
03:29
I've even seen an ISIS-produced
video in sign language.
video in sign language.
57
197309
4192
Cheguei até a ver um vídeo do EI
produzido em linguagem de sinais.
produzido em linguagem de sinais.
03:34
Just think about that for a second:
58
202605
1884
Apenas pensem nisso por um segundo:
o EI dedicou tempo e esforço
para garantir que sua mensagem
para garantir que sua mensagem
03:36
ISIS took the time and made the effort
59
204513
2308
03:38
to ensure their message is reaching
the deaf and hard of hearing.
the deaf and hard of hearing.
60
206845
3804
chegasse aos surdos
e deficientes auditivos.
e deficientes auditivos.
03:45
It's actually not tech-savviness
61
213143
2144
Não é a sagacidade tecnológica
a razão pela qual o EI
ganha corações e mentes.
ganha corações e mentes.
03:47
that is the reason why
ISIS wins hearts and minds.
ISIS wins hearts and minds.
62
215311
2595
03:49
It's their insight into the prejudices,
the vulnerabilities, the desires
the vulnerabilities, the desires
63
217930
4163
É a sua percepção dos preconceitos,
vulnerabilidades e desejos das pessoas
vulnerabilidades e desejos das pessoas
03:54
of the people they're trying to reach
64
222117
1774
que eles tentam alcançar que faz isso.
03:55
that does that.
65
223915
1161
03:57
That's why it's not enough
66
225718
1429
É por isso que não basta
que as plataformas on-line
que as plataformas on-line
03:59
for the online platforms
to focus on removing recruiting material.
to focus on removing recruiting material.
67
227171
4239
se concentrem em remover
material de recrutamento.
material de recrutamento.
04:04
If we want to have a shot
at building meaningful technology
at building meaningful technology
68
232518
3581
Se quisermos acertar na construção
de uma tecnologia relevante
de uma tecnologia relevante
que irá combater a radicalização
04:08
that's going to counter radicalization,
69
236123
1874
04:10
we have to start with the human
journey at its core.
journey at its core.
70
238021
2979
temos que começar
pela essência da jornada humana.
pela essência da jornada humana.
04:13
So we went to Iraq
71
241884
2187
Fomos ao Iraque
conversar com homens jovens
que aderiram à promessa do EI
que aderiram à promessa do EI
04:16
to speak to young men
who'd bought into ISIS's promise
who'd bought into ISIS's promise
72
244095
2831
de heroísmo e justiça,
04:18
of heroism and righteousness,
73
246950
3191
que pegaram em armas para lutar por eles
04:22
who'd taken up arms to fight for them
74
250165
1847
04:24
and then who'd defected
75
252036
1338
e desertaram após terem testemunhado
a brutalidade das regras do EI.
a brutalidade das regras do EI.
04:25
after they witnessed
the brutality of ISIS's rule.
the brutality of ISIS's rule.
76
253398
3021
04:28
And I'm sitting there in this makeshift
prison in the north of Iraq
prison in the north of Iraq
77
256880
3192
Eu estava sentada numa prisão
improvisada no norte do Iraque
improvisada no norte do Iraque
04:32
with this 23-year-old who had actually
trained as a suicide bomber
trained as a suicide bomber
78
260096
4550
com um jovem de 23 anos que foi
treinado para ser homem-bomba
treinado para ser homem-bomba
antes de ter desertado.
04:36
before defecting.
79
264670
1552
04:39
And he says,
80
267080
1158
E ele disse:
04:41
"I arrived in Syria full of hope,
81
269119
3220
"Eu cheguei na Síria cheio de esperança
e, imediatamente, tive duas de minhas
mais preciosas posses confiscadas:
mais preciosas posses confiscadas:
04:44
and immediately, I had two
of my prized possessions confiscated:
of my prized possessions confiscated:
82
272363
4365
meu passaporte e meu celular".
04:48
my passport and my mobile phone."
83
276752
2933
04:52
The symbols of his physical
and digital liberty
and digital liberty
84
280140
2406
Os ícones de sua
liberdade física e digital
liberdade física e digital
foram retirados dele em sua chegada.
04:54
were taken away from him on arrival.
85
282570
1760
04:57
And then this is the way he described
that moment of loss to me.
that moment of loss to me.
86
285248
3510
Foi assim que ele descreveu
aquele momento de perda para mim.
aquele momento de perda para mim.
05:01
He said,
87
289356
1586
Ele disse:
"Sabe, no Tom e Jerry,
05:02
"You know in 'Tom and Jerry,'
88
290966
2329
05:06
when Jerry wants to escape,
and then Tom locks the door
and then Tom locks the door
89
294192
3103
quando o Jerry quer fugir
e o Tom tranca a porta
e o Tom tranca a porta
e engole a chave,
05:09
and swallows the key
90
297319
1156
05:10
and you see it bulging out
of his throat as it travels down?"
of his throat as it travels down?"
91
298499
3551
e você a vê descendo garganta abaixo?"
05:14
And of course, I really could see
the image that he was describing,
the image that he was describing,
92
302446
3153
Claro, eu pude mesmo ver
a imagem que ele descrevia
a imagem que ele descrevia
e me conectei com o sentimento
que ele tentava transmitir,
que ele tentava transmitir,
05:17
and I really did connect with the feeling
that he was trying to convey,
that he was trying to convey,
93
305623
3661
05:21
which was one of doom,
94
309308
2021
que era de desgraça
05:23
when you know there's no way out.
95
311353
1789
quando você sabe que não há saída.
05:26
And I was wondering:
96
314551
1289
Eu fiquei pensando:
05:28
What, if anything,
could have changed his mind
could have changed his mind
97
316644
2682
"E se alguma coisa pudesse
tê-lo mudado de ideia
tê-lo mudado de ideia
quando ele saiu de casa?"
05:31
the day that he left home?
98
319350
1240
05:32
So I asked,
99
320614
1250
Então, perguntei:
"Se você soubesse tudo o que sabe agora
05:33
"If you knew everything that you know now
100
321888
3178
sobre o sofrimento, a corrupção,
a brutalidade, no dia em que saiu de casa,
a brutalidade, no dia em que saiu de casa,
05:37
about the suffering
and the corruption, the brutality --
and the corruption, the brutality --
101
325090
3051
05:40
that day you left home,
102
328165
1415
ainda assim você teria partido?"
05:41
would you still have gone?"
103
329604
1679
05:43
And he said, "Yes."
104
331786
1711
Ele respondeu: "Sim".
05:45
And I thought, "Holy crap, he said 'Yes.'"
105
333846
2282
E pensei: "Puxa vida, ele disse sim!"
05:48
And then he said,
106
336694
1219
E ele disse:
"Naquele ponto, eu tinha sofrido
tanta lavagem cerebral
tanta lavagem cerebral
05:49
"At that point, I was so brainwashed,
107
337937
3001
que eu não aceitava nenhuma
informação contrária;
informação contrária;
05:52
I wasn't taking in
any contradictory information.
any contradictory information.
108
340962
3244
05:56
I couldn't have been swayed."
109
344744
1555
não poderia ter sido
influenciado do contrário".
influenciado do contrário".
05:59
"Well, what if you knew
everything that you know now
everything that you know now
110
347235
2527
"Bom, e se você soubesse
tudo o que sabe agora
tudo o que sabe agora
seis meses antes do dia em que partiu?"
06:01
six months before the day that you left?"
111
349786
2098
06:05
"At that point, I think it probably
would have changed my mind."
would have changed my mind."
112
353345
3131
"Naquele instante, acho que eu,
provavelmente, teria mudado de ideia."
provavelmente, teria mudado de ideia."
06:10
Radicalization isn't
this yes-or-no choice.
this yes-or-no choice.
113
358138
3397
Radicalismo não é uma
escolha de sim ou não.
escolha de sim ou não.
06:14
It's a process, during which
people have questions --
people have questions --
114
362007
2977
É um processo durante
o qual as pessoas têm dúvidas
o qual as pessoas têm dúvidas
06:17
about ideology, religion,
the living conditions.
the living conditions.
115
365008
3776
sobre ideologia, religião,
condições de vida.
condições de vida.
Elas buscam respostas on-line,
06:20
And they're coming online for answers,
116
368808
2766
o que é uma oportunidade para alcançá-las.
06:23
which is an opportunity to reach them.
117
371598
1917
06:25
And there are videos online
from people who have answers --
from people who have answers --
118
373905
3014
Existem vídeos on-line de pessoas
que possuem respostas
que possuem respostas
desertores, por exemplo,
contando a história de sua jornada
contando a história de sua jornada
06:28
defectors, for example,
telling the story of their journey
telling the story of their journey
119
376943
2876
para dentro e fora da violência.
06:31
into and out of violence;
120
379843
1583
Histórias como a daquele homem
que conheci na prisão no Iraque.
que conheci na prisão no Iraque.
06:33
stories like the one from that man
I met in the Iraqi prison.
I met in the Iraqi prison.
121
381450
3487
06:37
There are locals who've uploaded
cell phone footage
cell phone footage
122
385914
2590
Há moradores que enviaram
imagens de celular
imagens de celular
de como é realmente a vida
no califado sob as regras do EI.
no califado sob as regras do EI.
06:40
of what life is really like
in the caliphate under ISIS's rule.
in the caliphate under ISIS's rule.
123
388528
3503
Há clérigos que estão compartilhando
interpretações pacíficas do Islã.
interpretações pacíficas do Islã.
06:44
There are clerics who are sharing
peaceful interpretations of Islam.
peaceful interpretations of Islam.
124
392055
3735
06:48
But you know what?
125
396830
1150
Essas pessoas, geralmente, não têm
a proeza que a propaganda do EI tem.
a proeza que a propaganda do EI tem.
06:50
These people don't generally have
the marketing prowess of ISIS.
the marketing prowess of ISIS.
126
398004
3020
06:54
They risk their lives to speak up
and confront terrorist propaganda,
and confront terrorist propaganda,
127
402049
4532
Eles arriscam suas vidas para rebater
e confrontar a propaganda terrorista,
e confrontar a propaganda terrorista,
e, então, tragicamente
não alcançam as pessoas
não alcançam as pessoas
06:58
and then they tragically
don't reach the people
don't reach the people
128
406605
2211
07:00
who most need to hear from them.
129
408840
1682
que mais precisam de ouvi-los.
07:03
And we wanted to see
if technology could change that.
if technology could change that.
130
411173
2612
Queríamos ver se a tecnologia
poderia mudar isso.
poderia mudar isso.
07:06
So in 2016, we partnered with Moonshot CVE
131
414205
4183
Em 2016, fizemos uma parceria
com a Moonshot CVE
com a Moonshot CVE
para testar uma nova abordagem
para combater o radicalismo
para combater o radicalismo
07:10
to pilot a new approach
to countering radicalization
to countering radicalization
132
418412
3180
chamada Método de Redirecionamento.
07:13
called the "Redirect Method."
133
421616
1780
07:16
It uses the power of online advertising
134
424453
3012
Ele usa o poder da propaganda on-line
para preencher a lacuna entre aqueles
suscetíveis à mensagem do EI
suscetíveis à mensagem do EI
07:19
to bridge the gap between
those susceptible to ISIS's messaging
those susceptible to ISIS's messaging
135
427489
4514
e as vozes confiáveis que estão
desbancando aquela mensagem.
desbancando aquela mensagem.
07:24
and those credible voices
that are debunking that messaging.
that are debunking that messaging.
136
432027
3760
07:28
And it works like this:
137
436633
1150
Funciona assim: alguém em busca
de material extremista,
de material extremista,
07:29
someone looking for extremist material --
138
437807
1961
digamos que ele busque
"Como me juntar ao EI?",
"Como me juntar ao EI?",
07:31
say they search
for "How do I join ISIS?" --
for "How do I join ISIS?" --
139
439792
2990
verá um anúncio aparecer
07:34
will see an ad appear
140
442806
2476
que o convida a assistir
um vídeo no Youtube
um vídeo no Youtube
07:37
that invites them to watch a YouTube video
of a cleric, of a defector --
of a cleric, of a defector --
141
445306
4882
de um clérigo, de um desertor,
07:42
someone who has an authentic answer.
142
450212
2310
de alguém que tenha
uma resposta autêntica.
uma resposta autêntica.
Esse direcionamento é baseado
não no perfil de quem eles são,
não no perfil de quem eles são,
07:44
And that targeting is based
not on a profile of who they are,
not on a profile of who they are,
143
452546
3623
mas na identificação de algo
que é diretamente relevante
que é diretamente relevante
07:48
but of determining something
that's directly relevant
that's directly relevant
144
456193
3053
à sua consulta ou dúvida.
07:51
to their query or question.
145
459270
1708
07:54
During our eight-week pilot
in English and Arabic,
in English and Arabic,
146
462122
2842
Durante as oito semanas do teste,
em inglês e em árabe,
em inglês e em árabe,
alcançamos mais de 300 mil pessoas
07:56
we reached over 300,000 people
147
464988
3279
que expressaram interesse
ou simpatia por um grupo jihadista.
ou simpatia por um grupo jihadista.
08:00
who had expressed an interest in
or sympathy towards a jihadi group.
or sympathy towards a jihadi group.
148
468291
5545
08:06
These people were now watching videos
149
474626
2264
Elas estavam, agora, vendo vídeos
que poderiam impedi-las
de fazer escolhas devastadoras.
de fazer escolhas devastadoras.
08:08
that could prevent them
from making devastating choices.
from making devastating choices.
150
476914
3340
08:13
And because violent extremism
isn't confined to any one language,
isn't confined to any one language,
151
481405
3727
Como o extremismo violento
não se limita a nenhum idioma,
não se limita a nenhum idioma,
religião ou ideologia,
08:17
religion or ideology,
152
485156
1804
o método de redirecionamento
está sendo implantado globalmente
está sendo implantado globalmente
08:18
the Redirect Method is now
being deployed globally
being deployed globally
153
486984
3501
08:22
to protect people being courted online
by violent ideologues,
by violent ideologues,
154
490509
3804
para proteger pessoas sendo cortejadas
on-line por idealistas violentos,
on-line por idealistas violentos,
08:26
whether they're Islamists,
white supremacists
white supremacists
155
494337
2596
sejam eles islâmicos,
supremacistas brancos,
supremacistas brancos,
ou outros extremistas violentos,
08:28
or other violent extremists,
156
496957
2103
com o objetivo de dar a elas
a chance de ouvir alguém
a chance de ouvir alguém
08:31
with the goal of giving them the chance
to hear from someone
to hear from someone
157
499084
2873
que esteve do outro lado dessa jornada.
08:33
on the other side of that journey;
158
501981
2091
Dar a chance de escolher
um caminho diferente.
um caminho diferente.
08:36
to give them the chance to choose
a different path.
a different path.
159
504096
2839
08:40
It turns out that often the bad guys
are good at exploiting the internet,
are good at exploiting the internet,
160
508749
5980
Às vezes, os vilões são bons
em explorar a internet,
em explorar a internet,
08:46
not because they're some kind
of technological geniuses,
of technological geniuses,
161
514753
3744
não porque eles sejam
gênios da tecnologia,
gênios da tecnologia,
08:50
but because they understand
what makes people tick.
what makes people tick.
162
518521
2985
mas porque eles entendem
o que motiva as pessoas.
o que motiva as pessoas.
08:54
I want to give you a second example:
163
522855
2369
Quero dar um segundo exemplo.
08:58
online harassment.
164
526019
1391
Assédio on-line.
09:00
Online harassers also work
to figure out what will resonate
to figure out what will resonate
165
528629
3363
Assediadores on-line também
trabalham para descobrir
trabalham para descobrir
o que vai repercutir em outro ser humano.
09:04
with another human being.
166
532016
1615
09:05
But not to recruit them like ISIS does,
167
533655
3110
Não para recrutá-los, como o EI faz,
09:08
but to cause them pain.
168
536789
1275
mas para causar-lhes dor.
09:11
Imagine this:
169
539259
1342
Imagine isso:
09:13
you're a woman,
170
541347
1659
você é uma mulher,
09:15
you're married,
171
543030
1413
casada,
e tem um filho.
09:16
you have a kid.
172
544467
1154
09:18
You post something on social media,
173
546834
1784
Você posta algo na mídia social.
09:20
and in a reply,
you're told that you'll be raped,
you're told that you'll be raped,
174
548642
2886
Em uma resposta, te dizem
que você será estuprada,
que você será estuprada,
09:24
that your son will be watching,
175
552577
1560
que seu filho irá assistir,
09:26
details of when and where.
176
554825
1856
detalhes de quando e onde.
09:29
In fact, your home address
is put online for everyone to see.
is put online for everyone to see.
177
557148
3143
Aliás, seu endereço é colocado
on-line para todo mundo ver.
on-line para todo mundo ver.
09:33
That feels like a pretty real threat.
178
561580
2007
Isso soa como uma ameaça bastante real.
09:37
Do you think you'd go home?
179
565113
1656
Você acha que iria para casa?
Você acha que continuaria
fazendo aquilo que estava fazendo
fazendo aquilo que estava fazendo
09:39
Do you think you'd continue doing
the thing that you were doing?
the thing that you were doing?
180
567999
3048
ou continuaria fazendo aquilo
que está irritando seu agressor?
que está irritando seu agressor?
09:43
Would you continue doing that thing
that's irritating your attacker?
that's irritating your attacker?
181
571071
3220
09:48
Online abuse has been this perverse art
182
576016
3096
Abuso on-line tem sido
essa arte perversa de descobrir
essa arte perversa de descobrir
09:51
of figuring out what makes people angry,
183
579136
3468
o que causa raiva nas pessoas,
o que as faz ter medo,
09:54
what makes people afraid,
184
582628
2132
o que as tornam inseguras,
09:56
what makes people insecure,
185
584784
1641
e, então, pressionar esses pontos
até que elas se calem.
até que elas se calem.
09:58
and then pushing those pressure points
until they're silenced.
until they're silenced.
186
586449
3067
10:02
When online harassment goes unchecked,
187
590333
2304
Quando o assédio on-line não é controlado,
a liberdade de expressão é sufocada.
10:04
free speech is stifled.
188
592661
1667
10:07
And even the people
hosting the conversation
hosting the conversation
189
595196
2127
Até mesmo as pessoas conduzindo o debate
jogam seus braços para cima e desistem,
jogam seus braços para cima e desistem,
10:09
throw up their arms and call it quits,
190
597347
1834
fechando tanto a seção
de comentários quanto os fóruns.
de comentários quanto os fóruns.
10:11
closing their comment sections
and their forums altogether.
and their forums altogether.
191
599205
2957
Isso significa que estamos
perdendo espaço on-line
perdendo espaço on-line
10:14
That means we're actually
losing spaces online
losing spaces online
192
602186
2849
para nos encontrar e trocar ideias.
10:17
to meet and exchange ideas.
193
605059
1987
10:19
And where online spaces remain,
194
607939
2163
E, naqueles que permanecem,
nos reduzimos a câmaras de ressonância
com pessoas que pensam como nós.
com pessoas que pensam como nós.
10:22
we descend into echo chambers
with people who think just like us.
with people who think just like us.
195
610126
4470
10:27
But that enables
the spread of disinformation;
the spread of disinformation;
196
615688
2499
Isso permite a disseminação
da desinformação,
da desinformação,
facilita a polarização.
10:30
that facilitates polarization.
197
618211
2184
10:34
What if technology instead
could enable empathy at scale?
could enable empathy at scale?
198
622508
5269
E se a tecnologia, ao invés disso,
pudesse possibilitar empatia em escala?
pudesse possibilitar empatia em escala?
10:40
This was the question
that motivated our partnership
that motivated our partnership
199
628451
2486
Essa foi a pergunta
que motivou nossa parceria
que motivou nossa parceria
com a equipe de combate
ao abuso do Google,
ao abuso do Google,
10:42
with Google's Counter Abuse team,
200
630961
1819
10:44
Wikipedia
201
632804
1178
Wikipedia
e jornais como o "New York Times".
10:46
and newspapers like the New York Times.
202
634006
1934
Queríamos ver se poderíamos fazer
modelos de aprendizado de máquina
modelos de aprendizado de máquina
10:47
We wanted to see if we could build
machine-learning models
machine-learning models
203
635964
2876
10:50
that could understand
the emotional impact of language.
the emotional impact of language.
204
638864
3606
que compreendessem o impacto
emocional da linguagem.
emocional da linguagem.
10:55
Could we predict which comments
were likely to make someone else leave
were likely to make someone else leave
205
643062
3610
Poderíamos prever quais
comentários eram suscetíveis
comentários eram suscetíveis
de fazer alguém deixar um debate on-line?
10:58
the online conversation?
206
646696
1374
11:00
And that's no mean feat.
207
648515
3887
Esse não é uma tarefa fácil.
Não é uma conquista trivial para
o time de IA conseguir algo como isso.
o time de IA conseguir algo como isso.
11:04
That's no trivial accomplishment
208
652426
1566
11:06
for AI to be able to do
something like that.
something like that.
209
654016
2563
Apenas considerem esses
dois exemplos de mensagem
dois exemplos de mensagem
11:08
I mean, just consider
these two examples of messages
these two examples of messages
210
656603
3729
que poderiam ter sido enviadas
a mim semana passada.
a mim semana passada.
11:12
that could have been sent to me last week.
211
660356
2224
11:15
"Break a leg at TED!"
212
663517
1879
"Merda pra você no TED!"
e...
11:17
... and
213
665420
1164
"Vou jogar merda em você no TED."
11:18
"I'll break your legs at TED."
214
666608
2126
(Risos)
11:20
(Laughter)
215
668758
1246
Você é humano,
11:22
You are human,
216
670028
1513
por isso esta diferença é óbvia,
11:23
that's why that's an obvious
difference to you,
difference to you,
217
671565
2210
mesmo as palavras sendo
praticamente as mesmas.
praticamente as mesmas.
11:25
even though the words
are pretty much the same.
are pretty much the same.
218
673799
2224
11:28
But for AI, it takes some training
to teach the models
to teach the models
219
676047
3079
Mas, para a IA, leva uma certa
prática ensinar os modelos
prática ensinar os modelos
a reconhecer essa diferença.
11:31
to recognize that difference.
220
679150
1571
11:32
The beauty of building AI
that can tell the difference
that can tell the difference
221
680745
3245
A beleza de se construir IA
capaz de fazer esta distinção
capaz de fazer esta distinção
é que a IA pode reduzir o tamanho
do fenômeno da toxidade on-line.
do fenômeno da toxidade on-line.
11:36
is that AI can then scale to the size
of the online toxicity phenomenon,
of the online toxicity phenomenon,
222
684014
5050
11:41
and that was our goal in building
our technology called Perspective.
our technology called Perspective.
223
689088
3287
Esse era nosso objetivo ao construir
nossa tecnologia chamada Perspective.
nossa tecnologia chamada Perspective.
11:45
With the help of Perspective,
224
693056
1427
Com a ajuda da Perspective,
11:46
the New York Times, for example,
225
694507
1583
o "New York Times", por exemplo,
aumentou espaços on-line para debate.
11:48
has increased spaces
online for conversation.
online for conversation.
226
696114
2487
11:51
Before our collaboration,
227
699005
1310
Antes de nossa colaboração,
eles só tinham comentários ativados
em apenas 10% dos seus artigos.
em apenas 10% dos seus artigos.
11:52
they only had comments enabled
on just 10 percent of their articles.
on just 10 percent of their articles.
228
700339
4305
11:57
With the help of machine learning,
229
705495
1644
Com a ajuda do aprendizado de máquina,
eles levaram o número para até 30%.
eles levaram o número para até 30%.
11:59
they have that number up to 30 percent.
230
707163
1897
12:01
So they've tripled it,
231
709084
1156
Ou seja, eles o triplicaram
e estamos, ainda, só começando.
e estamos, ainda, só começando.
12:02
and we're still just getting started.
232
710264
1917
12:04
But this is about way more than just
making moderators more efficient.
making moderators more efficient.
233
712872
3461
Isso vai muito além de apenas
tornar os moderadores mais eficientes.
tornar os moderadores mais eficientes.
12:10
Right now I can see you,
234
718076
1850
Nesse instante, eu consigo te ver
e avaliar como o que eu digo
está soando para você.
está soando para você.
12:11
and I can gauge how what I'm saying
is landing with you.
is landing with you.
235
719950
3294
12:16
You don't have that opportunity online.
236
724370
1879
Você não tem essa oportunidade on-line.
12:18
Imagine if machine learning
could give commenters,
could give commenters,
237
726558
3635
Imagine se o aprendizado de máquina
pudesse dar aos comentaristas,
pudesse dar aos comentaristas,
enquanto eles digitam,
12:22
as they're typing,
238
730217
1162
12:23
real-time feedback about how
their words might land,
their words might land,
239
731403
3347
feedback real sobre como
suas palavras podem soar,
suas palavras podem soar,
12:27
just like facial expressions do
in a face-to-face conversation.
in a face-to-face conversation.
240
735609
3024
tal como expressões faciais
o fazem em conversas cara a cara.
o fazem em conversas cara a cara.
12:32
Machine learning isn't perfect,
241
740926
1842
O aprendizado de máquina não é perfeito
12:34
and it still makes plenty of mistakes.
242
742792
2394
e ainda comete muitos enganos.
Mas se pudermos construir
uma tecnologia que compreenda
uma tecnologia que compreenda
12:37
But if we can build technology
243
745210
1557
12:38
that understands the emotional
impact of language,
impact of language,
244
746791
3293
o impacto emocional da linguagem,
poderemos construir empatia.
12:42
we can build empathy.
245
750108
1460
Isso significa poder haver
diálogo entre pessoas
diálogo entre pessoas
12:43
That means that we can have
dialogue between people
dialogue between people
246
751592
2425
com diferentes políticas,
12:46
with different politics,
247
754041
1816
diferentes visões de mundo,
diferentes valores.
diferentes valores.
12:47
different worldviews,
248
755881
1216
12:49
different values.
249
757121
1246
12:51
And we can reinvigorate the spaces online
that most of us have given up on.
that most of us have given up on.
250
759359
4775
E poderemos revigorar espaços on-line
de que a maioria de nós havia desistido.
de que a maioria de nós havia desistido.
12:57
When people use technology
to exploit and harm others,
to exploit and harm others,
251
765857
3785
Quando as pessoas usam a tecnologia
para explorar e prejudicar os outros,
para explorar e prejudicar os outros,
eles estão se alimentando dos nossos
temores humanos e vulnerabilidades.
temores humanos e vulnerabilidades.
13:01
they're preying on our human fears
and vulnerabilities.
and vulnerabilities.
252
769666
3642
13:06
If we ever thought
that we could build an internet
that we could build an internet
253
774461
3508
Se alguma vez pensamos
que poderíamos ter feito a internet
que poderíamos ter feito a internet
isolada do lado obscuro da humanidade,
13:09
insulated from the dark side of humanity,
254
777993
2578
estávamos errados.
13:12
we were wrong.
255
780595
1184
13:14
If we want today to build technology
256
782361
2270
Se quisermos construir uma tecnologia
que possa superar os desafios
que enfrentamos
que enfrentamos
13:16
that can overcome
the challenges that we face,
the challenges that we face,
257
784655
3127
temos que nos dedicar inteiramente
a compreender tais problemas
a compreender tais problemas
13:19
we have to throw our entire selves
into understanding the issues
into understanding the issues
258
787806
4043
e a construir soluções
que sejam tão humanas
que sejam tão humanas
13:23
and into building solutions
259
791873
1893
13:25
that are as human as the problems
they aim to solve.
they aim to solve.
260
793790
3782
quanto os problemas
que almejamos resolver.
que almejamos resolver.
13:30
Let's make that happen.
261
798071
1513
Vamos fazer isso acontecer.
13:31
Thank you.
262
799924
1150
Obrigada.
13:33
(Applause)
263
801098
3277
(Aplausos)
ABOUT THE SPEAKER
Yasmin Green - Geopolitical technologistYasmin Green is the director of research and development for Jigsaw, a unit within Alphabet Inc. focused on solving global security challenges through technology.
Why you should listen
Yasmin Green is the director of research and development for Jigsaw, a unit within Alphabet Inc. (formerly Google Ideas), focused on using tech tools to make the world safer, both on and offline. She has experience leading projects in some of the world’s toughest environments, including Iran, Syria, the UAE and Nigeria. In 2012, she led a multi-partner coalition to launch Against Violent Extremism, the world's first online network of former violent extremists and survivors of terrorism. Based on her own interviews with ISIS defectors and jailed recruits, last year Yasmin launched the Redirect Method, a new deployment of targeted advertising and video to confront online radicalization.
Green is a senior advisor on innovation to Oxford Analytica, a member of the Aspen Cyber Strategy Group, and until 2015 co-chaired the European Commission's Working Group on Online Radicalization. She was named one of Fortune's "40 Under 40" most influential young leaders in 2017, and in 2016 she was named one of Fast Company's "Most Creative People in Business."
Yasmin Green | Speaker | TED.com