TEDGlobal 2011
Ben Goldacre: Battling bad science
Ben Goldacre: Lluitar contra la mala ciència
Filmed:
Readability: 4.3
2,713,579 views
Cada dia apareixen articles amb consells nous sobre la salut, però com podem saber si són correctes? El metge i epidemiòleg Ben Goldacre ens mostra, a alta velocitat, les maneres com l'evidència pot ser distorsionada, des de les afirmacions més òbvies sobre la nutrició fins als trucs més subtils de la indústria farmacèutica.
Ben Goldacre - Debunker
Ben Goldacre unpicks dodgy scientific claims made by scaremongering journalists, dubious government reports, pharmaceutical corporations, PR companies and quacks. Full bio
Ben Goldacre unpicks dodgy scientific claims made by scaremongering journalists, dubious government reports, pharmaceutical corporations, PR companies and quacks. Full bio
Double-click the English transcript below to play the video.
00:15
So I'm a doctor, but I kind of slipped sideways into research,
0
0
3000
De fet sóc metge, però vaig desviar-me cap a la recerca,
00:18
and now I'm an epidemiologist.
1
3000
2000
i ara sóc epidemiòleg.
00:20
And nobody really knows what epidemiology is.
2
5000
2000
I ningú sap què és realment l'epidemiologia.
00:22
Epidemiology is the science of how we know in the real world
3
7000
3000
L'epidemiologia és la ciència sobre com sabem en el món real
00:25
if something is good for you or bad for you.
4
10000
2000
si una cosa és bona o dolenta per a tu.
00:27
And it's best understood through example
5
12000
2000
S'entén millor amb exemples,
00:29
as the science of those crazy, wacky newspaper headlines.
6
14000
5000
com ara la ciència d'aquests titulars estrafolaris dels diaris.
00:34
And these are just some of the examples.
7
19000
2000
I aquests són només alguns exemples.
00:36
These are from the Daily Mail. Every country in the world has a newspaper like this.
8
21000
3000
Aquest és del Daily Mail. Tots els països del món tenen un diari similar a aquest.
00:39
It has this bizarre, ongoing philosophical project
9
24000
3000
Estan duent a terme un estrany projecte filosòfic
00:42
of dividing all the inanimate objects in the world
10
27000
2000
de dividir tots els objectes inanimats del món
00:44
into the ones that either cause or prevent cancer.
11
29000
3000
en coses que causen o prevenen el càncer.
00:47
So here are some of the things they said cause cancer recently:
12
32000
2000
Segons ells, causen càncer:
00:49
divorce, Wi-Fi, toiletries and coffee.
13
34000
2000
el divorci, el Wi-Fi, els articles de tocador i el cafè.
00:51
Here are some of the things they say prevents cancer:
14
36000
2000
I, segons ells, prevenen el càncer:
00:53
crusts, red pepper, licorice and coffee.
15
38000
2000
la crosta de pa, el pebrot vermell, la regalèssia i el cafè.
00:55
So already you can see there are contradictions.
16
40000
2000
Com podeu veure, hi ha contradiccions.
00:57
Coffee both causes and prevents cancer.
17
42000
2000
El cafè tant causa com prevé el càncer.
00:59
And as you start to read on, you can see
18
44000
2000
I quan segueixes llegint, veus
01:01
that maybe there's some kind of political valence behind some of this.
19
46000
3000
que potser hi ha algun interès polític al darrere d'això.
01:04
So for women, housework prevents breast cancer,
20
49000
2000
En les dones, les feines de casa prevenen el càncer,
01:06
but for men, shopping could make you impotent.
21
51000
3000
però en els homes, anar de compres pot causar impotència.
01:09
So we know that we need to start
22
54000
3000
Així sabem que necessitem començar
01:12
unpicking the science behind this.
23
57000
3000
a examinar la ciència que hi ha darrere.
01:15
And what I hope to show
24
60000
2000
I espero demostrar
01:17
is that unpicking dodgy claims,
25
62000
2000
que examinar aquestes afirmacions dubtoses,
01:19
unpicking the evidence behind dodgy claims,
26
64000
2000
examinar l'evidència darrere aquestes afirmacions dubtoses,
01:21
isn't a kind of nasty carping activity;
27
66000
3000
no és una activitat criticaire malintencionada;
01:24
it's socially useful,
28
69000
2000
és socialment útil,
01:26
but it's also an extremely valuable
29
71000
2000
i també és una eina explicativa
01:28
explanatory tool.
30
73000
2000
extremadament valuosa.
01:30
Because real science is all about
31
75000
2000
Perquè la ciència real consisteix
01:32
critically appraising the evidence for somebody else's position.
32
77000
2000
a avaluar les dades en què es basa algú altre de manera crítica.
01:34
That's what happens in academic journals.
33
79000
2000
Això és el que es fa en els diaris acadèmics.
01:36
That's what happens at academic conferences.
34
81000
2000
Això és el que es fa en les conferències acadèmiques.
01:38
The Q&A session after a post-op presents data
35
83000
2000
La tanda de preguntes en acabar una presentació de dades
01:40
is often a blood bath.
36
85000
2000
sovint és un bany de sang.
01:42
And nobody minds that. We actively welcome it.
37
87000
2000
I a ningú li molesta. De fet, ens agrada.
01:44
It's like a consenting intellectual S&M activity.
38
89000
3000
És com una activitat intel·lectual sadomasoquista consentida.
01:47
So what I'm going to show you
39
92000
2000
Ara us ensenyaré
01:49
is all of the main things,
40
94000
2000
tot el principal,
01:51
all of the main features of my discipline --
41
96000
2000
les característiques principals de la meva disciplina:
01:53
evidence-based medicine.
42
98000
2000
la medicina basada en l'evidència.
01:55
And I will talk you through all of these
43
100000
2000
Us les explicaré totes
01:57
and demonstrate how they work,
44
102000
2000
i us demostraré com funcionen
01:59
exclusively using examples of people getting stuff wrong.
45
104000
3000
utilitzant exclusivament exemples de gent que s'ha equivocat.
02:02
So we'll start with the absolute weakest form of evidence known to man,
46
107000
3000
Començarem amb la forma més dèbil d'evidència coneguda per l'home:
02:05
and that is authority.
47
110000
2000
l'autoritat.
02:07
In science, we don't care how many letters you have after your name.
48
112000
3000
En la ciència, no ens importa quants títols tens.
02:10
In science, we want to know what your reasons are for believing something.
49
115000
3000
En la ciència, volem saber quines raons tens per creure alguna cosa.
02:13
How do you know that something is good for us
50
118000
2000
Com saps si una cosa és bona per a nosaltres
02:15
or bad for us?
51
120000
2000
o si és dolenta?
02:17
But we're also unimpressed by authority,
52
122000
2000
Però tampoc ens impressiona l'autoritat,
02:19
because it's so easy to contrive.
53
124000
2000
perquè és fàcil de fingir.
02:21
This is somebody called Dr. Gillian McKeith Ph.D,
54
126000
2000
Aquí tenim algú anomenat Dra. Gillian McKeith,
02:23
or, to give her full medical title, Gillian McKeith.
55
128000
3000
o, per donar-li el seu títol mèdic real, Gillian McKeith.
02:26
(Laughter)
56
131000
3000
(Rialles)
02:29
Again, every country has somebody like this.
57
134000
2000
De nou, tots els països tenen algú així.
02:31
She is our TV diet guru.
58
136000
2000
És la nostra guru de dietes televisiva.
02:33
She has massive five series of prime-time television,
59
138000
3000
Té cinc programes en horari de màxima audiència,
02:36
giving out very lavish and exotic health advice.
60
141000
3000
on dóna els seus consells de salut pròdigs i exòtics.
02:39
She, it turns out, has a non-accredited correspondence course Ph.D.
61
144000
3000
Resulta que té un curs de doctorat per correspondència no acreditat
02:42
from somewhere in America.
62
147000
2000
d'algun lloc dels Estats Units.
02:44
She also boasts that she's a certified professional member
63
149000
2000
També presumeix de ser membre professional certificat
02:46
of the American Association of Nutritional Consultants,
64
151000
2000
de l'Associació Americana d'Assessors Nutricionals,
02:48
which sounds very glamorous and exciting.
65
153000
2000
que sona molt glamurós i excitant.
02:50
You get a certificate and everything.
66
155000
2000
Fins i tot et donen un certificat.
02:52
This one belongs to my dead cat Hetti. She was a horrible cat.
67
157000
2000
Aquest és el de la meva difunta gata Hetti. Era una gata horrible.
02:54
You just go to the website, fill out the form,
68
159000
2000
Senzillament entres a la web, omples el formulari,
02:56
give them $60, and it arrives in the post.
69
161000
2000
pagues 60 dòlars i t'arriba per correu.
02:58
Now that's not the only reason that we think this person is an idiot.
70
163000
2000
Però aquesta no és l'única raó per la qual pensem que és idiota.
03:00
She also goes and says things like,
71
165000
2000
També perquè diu coses com:
03:02
you should eat lots of dark green leaves,
72
167000
2000
"Hauríeu de menjar moltes fulles verd fosc,
03:04
because they contain lots of chlorophyll, and that will really oxygenate your blood.
73
169000
2000
perquè contenen molta clorofil·la i oxigenaran la vostra sang".
03:06
And anybody who's done school biology remembers
74
171000
2000
Qualsevol que hagi fet biologia a l'escola recordarà
03:08
that chlorophyll and chloroplasts
75
173000
2000
que la clorofil·la i els cloroplasts
03:10
only make oxygen in sunlight,
76
175000
2000
només produeixen oxigen amb llum solar,
03:12
and it's quite dark in your bowels after you've eaten spinach.
77
177000
3000
i és bastant fosc en els teus intestins quan menges espinacs.
03:15
Next, we need proper science, proper evidence.
78
180000
3000
A més, necessitem ciència com cal, evidència com cal.
03:18
So, "Red wine can help prevent breast cancer."
79
183000
2000
Per exemple: "El vi negre ajuda a prevenir el càncer de pit."
03:20
This is a headline from the Daily Telegraph in the U.K.
80
185000
2000
Aquest és un titular del Daily Telegraph del Regne Unit:
03:22
"A glass of red wine a day could help prevent breast cancer."
81
187000
3000
"Un got de vi negre diari pot ajudar a prevenir el càncer de pit."
03:25
So you go and find this paper, and what you find
82
190000
2000
Així que agafes aquest diari, i hi trobes
03:27
is it is a real piece of science.
83
192000
2000
un article de ciència real.
03:29
It is a description of the changes in one enzyme
84
194000
3000
És la descripció dels canvis en un enzim
03:32
when you drip a chemical extracted from some red grape skin
85
197000
3000
quan degoteges un producte químic extret de la pell del raïm negre
03:35
onto some cancer cells
86
200000
2000
en unes cèl·lules cancerígenes
03:37
in a dish on a bench in a laboratory somewhere.
87
202000
3000
en un plat en una taula de laboratori en algun lloc.
03:40
And that's a really useful thing to describe
88
205000
2000
Això és un fet realment útil de descriure
03:42
in a scientific paper,
89
207000
2000
en un article científic,
03:44
but on the question of your own personal risk
90
209000
2000
però pel que fa al teu risc personal
03:46
of getting breast cancer if you drink red wine,
91
211000
2000
de tenir càncer de pit si beus vi negre,
03:48
it tells you absolutely bugger all.
92
213000
2000
no et diu res de res.
03:50
Actually, it turns out that your risk of breast cancer
93
215000
2000
De fet, resulta que el risc de tenir càncer de pit
03:52
actually increases slightly
94
217000
2000
s'incrementa lleugerament
03:54
with every amount of alcohol that you drink.
95
219000
2000
amb la quantitat d'alcohol que ingereixes.
03:56
So what we want is studies in real human people.
96
221000
4000
Així que el que cal son estudis en gent real.
04:00
And here's another example.
97
225000
2000
Aquí teniu un altre exemple.
04:02
This is from Britain's leading diet and nutritionist in the Daily Mirror,
98
227000
3000
Això és del dietista i nutricionista en cap del diari Daily Mirror,
04:05
which is our second biggest selling newspaper.
99
230000
2000
que és el segon diari en nombre de vendes al Regne Unit.
04:07
"An Australian study in 2001
100
232000
2000
"Un estudi australià del 2001
04:09
found that olive oil in combination with fruits, vegetables and pulses
101
234000
2000
va descobrir que l'oli d'oliva combinat amb fruites, verdures i llegums secs
04:11
offers measurable protection against skin wrinklings."
102
236000
2000
ofereix una protecció apreciable contra les arrugues de la pell."
04:13
And then they give you advice:
103
238000
2000
I aleshores t'aconsellen:
04:15
"If you eat olive oil and vegetables, you'll have fewer skin wrinkles."
104
240000
2000
"Si menges oli d'oliva i verdures, tindràs menys arrugues a la pell."
04:17
And they very helpfully tell you how to go and find the paper.
105
242000
2000
I t'ajuden dient on trobar aquest article.
04:19
So you go and find the paper, and what you find is an observational study.
106
244000
3000
Així que busques l'article, i el que trobes és un estudi observacional.
04:22
Obviously nobody has been able
107
247000
2000
Evidentment ningú ha pogut
04:24
to go back to 1930,
108
249000
2000
tornar al 1930,
04:26
get all the people born in one maternity unit,
109
251000
3000
agafar tota la gent nascuda en una unitat de maternitat,
04:29
and half of them eat lots of fruit and veg and olive oil,
110
254000
2000
i que la meitat mengessin molta fruita, verdures i oli d'oliva,
04:31
and then half of them eat McDonald's,
111
256000
2000
i que l'altra meitat mengés al McDonald's,
04:33
and then we see how many wrinkles you've got later.
112
258000
2000
i aleshores veuríem quantes arrugues acaben tenint.
04:35
You have to take a snapshot of how people are now.
113
260000
2000
Has de basar-te en dades de com és la gent ara.
04:37
And what you find is, of course,
114
262000
2000
I el que trobes, evidentment, és
04:39
people who eat veg and olive oil have fewer skin wrinkles.
115
264000
3000
que la gent que menja vegetals i oli d'oliva tenen menys arrugues.
04:42
But that's because people who eat fruit and veg and olive oil,
116
267000
3000
Però això és perquè la gent que menja fruites, vegetals i oli d'oliva
04:45
they're freaks, they're not normal, they're like you;
117
270000
3000
són rarets, no són normals, són com vosaltres;
04:48
they come to events like this.
118
273000
2000
vénen a actes com aquests.
04:50
They are posh, they're wealthy, they're less likely to have outdoor jobs,
119
275000
3000
Són elegants, són rics, és menys probable que treballin a l'aire lliure,
04:53
they're less likely to do manual labor,
120
278000
2000
menys probable que facin treball manual,
04:55
they have better social support, they're less likely to smoke --
121
280000
2000
tenen un suport social millor, és menys probable que fumin,
04:57
so for a whole host of fascinating, interlocking
122
282000
2000
així que per un nombre enorme de raons fascinants,
04:59
social, political and cultural reasons,
123
284000
2000
socials, polítiques i culturals,
05:01
they are less likely to have skin wrinkles.
124
286000
2000
és menys probable que tinguin arrugues.
05:03
That doesn't mean that it's the vegetables or the olive oil.
125
288000
2000
Això no vol dir que sigui a causa de les verdures o l'oli d'oliva.
05:05
(Laughter)
126
290000
2000
(Rialles)
05:07
So ideally what you want to do is a trial.
127
292000
3000
Així que l'ideal seria fer una prova.
05:10
And everybody thinks they're very familiar with the idea of a trial.
128
295000
2000
I tothom pensa que coneix bé en què consisteix una prova.
05:12
Trials are very old. The first trial was in the Bible -- Daniel 1:12.
129
297000
3000
Les proves són molt antigues. La primera està a la Bíblia, a Daniel 1:12.
05:15
It's very straightforward -- you take a bunch of people, you split them in half,
130
300000
2000
És molt fàcil: agafes un munt de gent, la divideixes per la meitat,
05:17
you treat one group one way, you treat the other group the other way,
131
302000
2000
tractes un grup d'una manera, i tractes l'altre grup d'una altra manera,
05:19
and a little while later, you follow them up
132
304000
2000
i una mica després, els fas un seguiment
05:21
and see what happened to each of them.
133
306000
2000
i veus què els ha passat a cadascun d'ells.
05:23
So I'm going to tell you about one trial,
134
308000
2000
Us explicaré una prova,
05:25
which is probably the most well-reported trial
135
310000
2000
que segurament ha sigut la més ben seguida
05:27
in the U.K. news media over the past decade.
136
312000
2000
per tots els mitjans del Regne Unit en la última dècada.
05:29
And this is the trial of fish oil pills.
137
314000
2000
I és la prova de les píndoles d'oli de peix.
05:31
And the claim was fish oil pills improve school performance and behavior
138
316000
2000
Deien que les píndoles d'oli de peix milloren els resultats escolars
05:33
in mainstream children.
139
318000
2000
i el comportament en la majoria de nens.
05:35
And they said, "We've done a trial.
140
320000
2000
Van dir: "Hem fet una prova.
05:37
All the previous trials were positive, and we know this one's gonna be too."
141
322000
2000
Les proves anteriors han estat positives, i sabem que aquesta també ho serà".
05:39
That should always ring alarm bells.
142
324000
2000
Això sempre hauria de fer sonar l'alarma.
05:41
Because if you already know the answer to your trial, you shouldn't be doing one.
143
326000
3000
Perquè si ja saps el resultat d'una prova, no l'hauries de fer.
05:44
Either you've rigged it by design,
144
329000
2000
O bé l'has manipulat en dissenyar-la,
05:46
or you've got enough data so there's no need to randomize people anymore.
145
331000
3000
o és que ja tens prou dades com per a no fer falta provar-ho en més gent.
05:49
So this is what they were going to do in their trial.
146
334000
3000
Això és el que farien en la seva prova.
05:52
They were taking 3,000 children,
147
337000
2000
Agafarien 3.000 nens,
05:54
they were going to give them all these huge fish oil pills,
148
339000
2000
els donarien totes aquestes píndoles enormes d'oli de peix,
05:56
six of them a day,
149
341000
2000
sis per dia,
05:58
and then a year later, they were going to measure their school exam performance
150
343000
3000
i, un any després, mesurarien els resultats dels seus exàmens escolars
06:01
and compare their school exam performance
151
346000
2000
i compararien els resultats dels exàmens
06:03
against what they predicted their exam performance would have been
152
348000
2000
amb els resultats que ells havien previst que obtindrien
06:05
if they hadn't had the pills.
153
350000
3000
si no haguessin pres les píndoles.
06:08
Now can anybody spot a flaw in this design?
154
353000
3000
Algú pot veure l'error en el seu disseny?
06:11
And no professors of clinical trial methodology
155
356000
3000
I si sou professors de metodologia d'assaigs clínics
06:14
are allowed to answer this question.
156
359000
2000
no contesteu la pregunta.
06:16
So there's no control; there's no control group.
157
361000
2000
Doncs que no hi ha cap control; no hi ha grup de control.
06:18
But that sounds really techie.
158
363000
2000
Però això sona massa científic.
06:20
That's a technical term.
159
365000
2000
És un terme tècnic.
06:22
The kids got the pills, and then their performance improved.
160
367000
2000
Els nens van prendre les píndoles, i els seus resultats van millorar.
06:24
What else could it possibly be if it wasn't the pills?
161
369000
3000
Què més podria ser, excepte les píndoles?
06:27
They got older. We all develop over time.
162
372000
3000
Es van fer grans. Tots ens anem desenvolupant.
06:30
And of course, also there's the placebo effect.
163
375000
2000
Per descomptat, també hi ha l'efecte placebo.
06:32
The placebo effect is one of the most fascinating things in the whole of medicine.
164
377000
2000
L'efecte placebo és una de les coses més fascinants de tota la medicina.
06:34
It's not just about taking a pill, and your performance and your pain getting better.
165
379000
3000
No és només que, per prendre una píndola, millori el teu estat o els teus resultats.
06:37
It's about our beliefs and expectations.
166
382000
2000
Es tracta de les nostres creences i expectatives.
06:39
It's about the cultural meaning of a treatment.
167
384000
2000
Es tracta del significat cultural d'un tractament.
06:41
And this has been demonstrated in a whole raft of fascinating studies
168
386000
3000
I això s'ha demostrat en un munt d'estudis fascinants
06:44
comparing one kind of placebo against another.
169
389000
3000
que comparen un tipus de placebo amb un altre.
06:47
So we know, for example, that two sugar pills a day
170
392000
2000
Sabem, per exemple, que dues píndoles de sucre al dia
06:49
are a more effective treatment for getting rid of gastric ulcers
171
394000
2000
són un tractament més efectiu per lliurar-se de les úlceres gàstriques
06:51
than one sugar pill.
172
396000
2000
que una píndola de sucre.
06:53
Two sugar pills a day beats one sugar pill a day.
173
398000
2000
Dues píndoles de sucre al dia són millors que una píndola.
06:55
And that's an outrageous and ridiculous finding, but it's true.
174
400000
3000
És una troballa indignant i ridícula, però certa.
06:58
We know from three different studies on three different types of pain
175
403000
2000
Sabem per tres estudis diferents en tres tipus de dolor diferent
07:00
that a saltwater injection is a more effective treatment for pain
176
405000
3000
que una injecció d'aigua salada és més efectiva per tractar el dolor
07:03
than taking a sugar pill, taking a dummy pill that has no medicine in it --
177
408000
4000
que una píndola de sucre, una píndola de mentida sense cap medicament,
07:07
not because the injection or the pills do anything physically to the body,
178
412000
3000
no perquè la injecció o les píndoles facin res físicament al cos,
07:10
but because an injection feels like a much more dramatic intervention.
179
415000
3000
sinó perquè una injecció sembla una intervenció molt més dràstica.
07:13
So we know that our beliefs and expectations
180
418000
2000
Sabem que les nostres creences i expectatives
07:15
can be manipulated,
181
420000
2000
poden ser manipulades,
07:17
which is why we do trials
182
422000
2000
i és per això que fem proves
07:19
where we control against a placebo --
183
424000
2000
on comparem amb un placebo,
07:21
where one half of the people get the real treatment
184
426000
2000
on a la meitat de gent se'ls dóna un tractament real
07:23
and the other half get placebo.
185
428000
2000
i a l'altra meitat els donen un placebo.
07:25
But that's not enough.
186
430000
3000
Però no n'hi ha prou amb això.
07:28
What I've just shown you are examples of the very simple and straightforward ways
187
433000
3000
El que us he ensenyat són exemples de les maneres tan senzilles i directes
07:31
that journalists and food supplement pill peddlers
188
436000
2000
en què periodistes, venedors de píndoles suplementàries
07:33
and naturopaths
189
438000
2000
i naturòpates
07:35
can distort evidence for their own purposes.
190
440000
3000
poden distorsionar les dades pels seus propòsits.
07:38
What I find really fascinating
191
443000
2000
El que em sembla més fascinant
07:40
is that the pharmaceutical industry
192
445000
2000
és que la indústria farmacèutica
07:42
uses exactly the same kinds of tricks and devices,
193
447000
2000
utilitza exactament el mateix tipus de trucs i enganys,
07:44
but slightly more sophisticated versions of them,
194
449000
3000
però amb versions una mica més sofisticades,
07:47
in order to distort the evidence that they give to doctors and patients,
195
452000
3000
per tal de distorsionar les dades que donen a doctors i pacients,
07:50
and which we use to make vitally important decisions.
196
455000
3000
i que nosaltres utilitzem per prendre decisions vitals.
07:53
So firstly, trials against placebo:
197
458000
2000
Primer, proves contra un placebo:
07:55
everybody thinks they know that a trial should be
198
460000
2000
tothom creu que una prova hauria de ser
07:57
a comparison of your new drug against placebo.
199
462000
2000
una comparació del teu nou medicament amb un placebo.
07:59
But actually in a lot of situations that's wrong.
200
464000
2000
Però, de fet, en molt casos això no és cert.
08:01
Because often we already have a very good treatment that is currently available,
201
466000
3000
Perquè, sovint, ja disposem d'un bon tractament disponible,
08:04
so we don't want to know that your alternative new treatment
202
469000
2000
així que no ens interessa si el teu nou tractament alternatiu
08:06
is better than nothing.
203
471000
2000
és millor que res.
08:08
We want to know that it's better than the best currently available treatment that we have.
204
473000
3000
Volem saber si és millor que el millor tractament de què disposem actualment.
08:11
And yet, repeatedly, you consistently see people doing trials
205
476000
3000
I malgrat això, repetidament veiem gent que encara fa proves
08:14
still against placebo.
206
479000
2000
comparant amb un placebo.
08:16
And you can get license to bring your drug to market
207
481000
2000
I pots obtenir una llicència per treure la teva medicina al mercat
08:18
with only data showing that it's better than nothing,
208
483000
2000
amb dades que només mostren que és millor que no res,
08:20
which is useless for a doctor like me trying to make a decision.
209
485000
3000
la qual cosa és inútil per un metge com jo que vol prendre una decisió.
08:23
But that's not the only way you can rig your data.
210
488000
2000
Però aquesta no és l'única manera de manipular les dades.
08:25
You can also rig your data
211
490000
2000
També pots manipular dades
08:27
by making the thing you compare your new drug against
212
492000
2000
comparant la teva nova medicina amb una cosa
08:29
really rubbish.
213
494000
2000
realment inútil.
08:31
You can give the competing drug in too low a dose,
214
496000
2000
Pots donar una dosi massa baixa del medicament competidor,
08:33
so that people aren't properly treated.
215
498000
2000
perquè la gent no sigui tractada com cal.
08:35
You can give the competing drug in too high a dose,
216
500000
2000
Pots donar una dosi massa alta del medicament competidor,
08:37
so that people get side effects.
217
502000
2000
per causar efectes secundaris.
08:39
And this is exactly what happened
218
504000
2000
I això és precisament el que va passar
08:41
which antipsychotic medication for schizophrenia.
219
506000
2000
amb una medicació antipsicòtica per a l'esquizofrènia.
08:43
20 years ago, a new generation of antipsychotic drugs were brought in
220
508000
3000
Fa 20 anys, va aparèixer una nova generació de medicaments antipsicòtics
08:46
and the promise was that they would have fewer side effects.
221
511000
3000
i el que prometien era tenir menys efectes secundaris.
08:49
So people set about doing trials of these new drugs
222
514000
2000
Així que es van començar a fer proves dels nous medicaments
08:51
against the old drugs,
223
516000
2000
comparant-les amb els antics,
08:53
but they gave the old drugs in ridiculously high doses --
224
518000
2000
però van donar els medicaments antics en una dosi ridículament alta:
08:55
20 milligrams a day of haloperidol.
225
520000
2000
20 mil·ligrams diaris d'haloperidol.
08:57
And it's a foregone conclusion,
226
522000
2000
I és una conclusió previsible,
08:59
if you give a drug at that high a dose,
227
524000
2000
si dones un medicament en una dosi tan alta,
09:01
that it will have more side effects and that your new drug will look better.
228
526000
3000
que causarà efectes secundaris i farà que el teu nou medicament quedi molt bé.
09:04
10 years ago, history repeated itself, interestingly,
229
529000
2000
Fa 10 anys, la història es va repetir
09:06
when risperidone, which was the first of the new-generation antipscyhotic drugs,
230
531000
3000
quan la patent de la risperidona, el primer d'aquests nous antipsicòtics,
09:09
came off copyright, so anybody could make copies.
231
534000
3000
va expirar, i tothom va poder copiar-la.
09:12
Everybody wanted to show that their drug was better than risperidone,
232
537000
2000
Tothom volia demostrar que el seu medicament era millor que la risperidona,
09:14
so you see a bunch of trials comparing new antipsychotic drugs
233
539000
3000
així que hi va haver un munt de proves de nous medicaments antipsicòtics
09:17
against risperidone at eight milligrams a day.
234
542000
2000
comparant-los amb 8 mil·ligrams diaris de risperidona.
09:19
Again, not an insane dose, not an illegal dose,
235
544000
2000
De nou, no una dosi absurda, ni il·legal,
09:21
but very much at the high end of normal.
236
546000
2000
però molt més alta del normal.
09:23
And so you're bound to make your new drug look better.
237
548000
3000
Així segur que el teu nou medicament semblarà millor.
09:26
And so it's no surprise that overall,
238
551000
3000
Per tant no és sorprenent que, en general,
09:29
industry-funded trials
239
554000
2000
les proves finançades per la indústria
09:31
are four times more likely to give a positive result
240
556000
2000
donen quatre vegades més sovint resultats positius
09:33
than independently sponsored trials.
241
558000
3000
que les proves finançades de manera independent.
09:36
But -- and it's a big but --
242
561000
3000
Però... i és un gran però...
09:39
(Laughter)
243
564000
2000
(Rialles)
09:41
it turns out,
244
566000
2000
resulta
09:43
when you look at the methods used by industry-funded trials,
245
568000
3000
que quan mires els mètodes utilitzats en proves de la indústria,
09:46
that they're actually better
246
571000
2000
de fet són millors
09:48
than independently sponsored trials.
247
573000
2000
que els de les proves independents.
09:50
And yet, they always manage to to get the result that they want.
248
575000
3000
Així i tot, sempre se les arreglen per obtenir el resultat que desitgen.
09:53
So how does this work?
249
578000
2000
Com pot ser?
09:55
How can we explain this strange phenomenon?
250
580000
3000
Com es pot explicar aquest estrany fet?
09:58
Well it turns out that what happens
251
583000
2000
Resulta que el que passa
10:00
is the negative data goes missing in action;
252
585000
2000
és que les dades negatives desapareixen en combat;
10:02
it's withheld from doctors and patients.
253
587000
2000
s'amaguen dels metges i dels pacients.
10:04
And this is the most important aspect of the whole story.
254
589000
2000
I aquest és l'aspecte més important de tota la història.
10:06
It's at the top of the pyramid of evidence.
255
591000
2000
És el cim de la piràmide de l'evidència.
10:08
We need to have all of the data on a particular treatment
256
593000
3000
Necessitem tenir totes les dades de cada tractament
10:11
to know whether or not it really is effective.
257
596000
2000
per saber si és o no efectiu de debò.
10:13
And there are two different ways that you can spot
258
598000
2000
I hi ha dues maneres diferents de veure
10:15
whether some data has gone missing in action.
259
600000
2000
si hi ha dades desaparegudes en combat.
10:17
You can use statistics, or you can use stories.
260
602000
3000
Pots utilitzar estadístiques o històries.
10:20
I personally prefer statistics, so that's what I'm going to do first.
261
605000
2000
Personalment prefereixo les estadístiques, per tant començaré amb elles.
10:22
This is something called funnel plot.
262
607000
2000
Això s'anomena gràfic en embut.
10:24
And a funnel plot is a very clever way of spotting
263
609000
2000
I un gràfic en embut és una manera molt intel·ligent de veure
10:26
if small negative trials have disappeared, have gone missing in action.
264
611000
3000
si petites proves negatives han desaparegut en combat.
10:29
So this is a graph of all of the trials
265
614000
2000
És un gràfic de totes les proves
10:31
that have been done on a particular treatment.
266
616000
2000
que s'han fet d'un tractament en concret.
10:33
And as you go up towards the top of the graph,
267
618000
2000
Quan puges fins a dalt del gràfic,
10:35
what you see is each dot is a trial.
268
620000
2000
veus que cada punt és una prova.
10:37
And as you go up, those are the bigger trials, so they've got less error in them.
269
622000
3000
En pujar, aquestes són proves més grans, amb menys grau d'error.
10:40
So they're less likely to be randomly false positives, randomly false negatives.
270
625000
3000
Per tant, són menys susceptibles de ser falsos positius o falsos negatius aleatoris.
10:43
So they all cluster together.
271
628000
2000
Així tots s'agrupen.
10:45
The big trials are closer to the true answer.
272
630000
2000
Les proves grans estan més a prop de la resposta real.
10:47
Then as you go further down at the bottom,
273
632000
2000
Si baixes cap a la base,
10:49
what you can see is, over on this side, the spurious false negatives,
274
634000
3000
el que trobes, en aquest costat, són falsos negatius espuris,
10:52
and over on this side, the spurious false positives.
275
637000
2000
i en aquest costat, falsos positius espuris.
10:54
If there is publication bias,
276
639000
2000
Si hi ha un biaix de publicació,
10:56
if small negative trials have gone missing in action,
277
641000
3000
si les petites proves negatives han desaparegut en combat,
10:59
you can see it on one of these graphs.
278
644000
2000
ho pots veure en un d'aquests gràfics.
11:01
So you can see here that the small negative trials
279
646000
2000
Aquí podeu veure que les petites proves negatives
11:03
that should be on the bottom left have disappeared.
280
648000
2000
que haurien de ser a baix a l'esquerra han desaparegut.
11:05
This is a graph demonstrating the presence of publication bias
281
650000
3000
Aquest gràfic demostra la presència d'un biaix de publicació
11:08
in studies of publication bias.
282
653000
2000
en estudis de biaixos de publicació.
11:10
And I think that's the funniest epidemiology joke
283
655000
2000
I aquesta és la broma més graciosa de l'epidemiologia
11:12
that you will ever hear.
284
657000
2000
que sentireu mai.
11:14
That's how you can prove it statistically,
285
659000
2000
Així és com ho pots demostrar estadísticament,
11:16
but what about stories?
286
661000
2000
però què hi ha de les històries?
11:18
Well they're heinous, they really are.
287
663000
2000
Doncs són atroces, de debò.
11:20
This is a drug called reboxetine.
288
665000
2000
Hi ha un medicament anomenat reboxetina.
11:22
This is a drug that I myself have prescribed to patients.
289
667000
2000
És un medicament que jo mateix he receptat a pacients.
11:24
And I'm a very nerdy doctor.
290
669000
2000
I sóc un metge molt estudiós.
11:26
I hope I try to go out of my way to try and read and understand all the literature.
291
671000
3000
Crec que intento fer tot el possible per llegir i entendre tota la bibliografia.
11:29
I read the trials on this. They were all positive. They were all well-conducted.
292
674000
3000
Vaig llegir-ne les proves. Totes eren positives. Totes estaven ben fetes.
11:32
I found no flaw.
293
677000
2000
No hi vaig trobar cap error.
11:34
Unfortunately, it turned out,
294
679000
2000
Per desgràcia, resulta
11:36
that many of these trials were withheld.
295
681000
2000
que moltes d'aquestes proves s'havien amagat.
11:38
In fact, 76 percent
296
683000
2000
De fet, un 76%
11:40
of all of the trials that were done on this drug
297
685000
2000
de totes les proves realitzades sobre aquest medicament
11:42
were withheld from doctors and patients.
298
687000
2000
s'havien amagat dels metges i pacients.
11:44
Now if you think about it,
299
689000
2000
Si hi penses,
11:46
if I tossed a coin a hundred times,
300
691000
2000
si llancés una moneda 100 vegades,
11:48
and I'm allowed to withhold from you
301
693000
2000
i pogués amagar-te'n
11:50
the answers half the times,
302
695000
2000
el resultat la meitat de vegades,
11:52
then I can convince you
303
697000
2000
podria convèncer-te
11:54
that I have a coin with two heads.
304
699000
2000
que tinc una moneda amb dues cares.
11:56
If we remove half of the data,
305
701000
2000
Si traiem la meitat de les dades,
11:58
we can never know what the true effect size of these medicines is.
306
703000
3000
mai podem saber quins són els efectes reals d'aquests medicaments.
12:01
And this is not an isolated story.
307
706000
2000
I aquesta no és una història aïllada.
12:03
Around half of all of the trial data on antidepressants has been withheld,
308
708000
4000
Aproximadament la meitat de les dades d'assaigs d'antidepressius s'han amagat,
12:07
but it goes way beyond that.
309
712000
2000
però encara va més lluny.
12:09
The Nordic Cochrane Group were trying to get a hold of the data on that
310
714000
2000
El Centre Cochrane Nòrdic volia aconseguir les dades sobre això
12:11
to bring it all together.
311
716000
2000
per posar-ho tot junt.
12:13
The Cochrane Groups are an international nonprofit collaboration
312
718000
3000
Els grups Cochrane són una organització internacional sense ànim de lucre
12:16
that produce systematic reviews of all of the data that has ever been shown.
313
721000
3000
que fa revisions sistemàtiques de totes les dades aparegudes.
12:19
And they need to have access to all of the trial data.
314
724000
3000
I necessiten poder accedir a totes les dades de les proves.
12:22
But the companies withheld that data from them,
315
727000
3000
Però les companyies els amaguen dades,
12:25
and so did the European Medicines Agency
316
730000
2000
i també ho va fer l'Agència Europea de Medicaments
12:27
for three years.
317
732000
2000
durant tres anys.
12:29
This is a problem that is currently lacking a solution.
318
734000
3000
És un problema que ara mateix no té solució.
12:32
And to show how big it goes, this is a drug called Tamiflu,
319
737000
3000
Per mostrar fins on pot arribar, hi ha una medicina anomenada Tamiflu,
12:35
which governments around the world
320
740000
2000
en la qual governs de tot el món
12:37
have spent billions and billions of dollars on.
321
742000
2000
s'han gastat milions i milions de dòlars.
12:39
And they spend that money on the promise
322
744000
2000
I s'han gastat els diners perquè els prometien
12:41
that this is a drug which will reduce the rate
323
746000
2000
que aquesta medicina reduiria la quantitat
12:43
of complications with flu.
324
748000
2000
de complicacions de la grip.
12:45
We already have the data
325
750000
2000
Ja tenim les dades
12:47
showing that it reduces the duration of your flu by a few hours.
326
752000
2000
que mostren que redueix la durada de la grip en unes hores.
12:49
But I don't really care about that. Governments don't care about that.
327
754000
2000
Però això no m'importa gaire. Als governs no els importa.
12:51
I'm very sorry if you have the flu, I know it's horrible,
328
756000
3000
Ho sento molt si tens la grip, sé que és horrible,
12:54
but we're not going to spend billions of dollars
329
759000
2000
però no ens gastarem milions de dòlars
12:56
trying to reduce the duration of your flu symptoms
330
761000
2000
per intentar reduir la durada dels símptomes de la teva grip
12:58
by half a day.
331
763000
2000
en mig dia.
13:00
We prescribe these drugs, we stockpile them for emergencies
332
765000
2000
Receptem aquestes medicines, les acumulem per a emergències,
13:02
on the understanding that they will reduce the number of complications,
333
767000
2000
perquè se suposa que reduiran el nombre de complicacions,
13:04
which means pneumonia and which means death.
334
769000
3000
és a dir, la pneumònia i la mort.
13:07
The infectious diseases Cochrane Group, which are based in Italy,
335
772000
3000
El Grup Cochrane de Malalties Infeccioses, amb seu a Itàlia,
13:10
has been trying to get
336
775000
2000
ha estat intentant aconseguir
13:12
the full data in a usable form out of the drug companies
337
777000
3000
totes les dades en forma utilitzable de les companyies farmacèutiques
13:15
so that they can make a full decision
338
780000
3000
per poder prendre una decisió completa
13:18
about whether this drug is effective or not,
339
783000
2000
sobre si aquesta medicina és efectiva o no,
13:20
and they've not been able to get that information.
340
785000
3000
i no han pogut aconseguir aquesta informació.
13:23
This is undoubtedly
341
788000
2000
Indubtablement, aquest és
13:25
the single biggest ethical problem
342
790000
3000
el problema ètic més important
13:28
facing medicine today.
343
793000
2000
a què s'enfronta avui la medicina.
13:30
We cannot make decisions
344
795000
3000
No podem prendre decisions
13:33
in the absence of all of the information.
345
798000
4000
en absència de tota la informació.
13:37
So it's a little bit difficult from there
346
802000
3000
Així doncs, és una mica difícil
13:40
to spin in some kind of positive conclusion.
347
805000
4000
extreure alguna conclusió positiva d'això.
13:44
But I would say this:
348
809000
4000
Però jo us diria:
13:48
I think that sunlight
349
813000
3000
crec que la llum del sol
13:51
is the best disinfectant.
350
816000
2000
és el millor desinfectant.
13:53
All of these things are happening in plain sight,
351
818000
3000
Tot això està passant a plena vista,
13:56
and they're all protected
352
821000
2000
i tot està protegit
13:58
by a force field of tediousness.
353
823000
3000
per un camp de força de tedi.
14:01
And I think, with all of the problems in science,
354
826000
2000
I crec que, amb tots els problemes de la ciència,
14:03
one of the best things that we can do
355
828000
2000
una de les millors coses que podem fer
14:05
is to lift up the lid,
356
830000
2000
és aixecar la tapadora,
14:07
finger around in the mechanics and peer in.
357
832000
2000
remenar la mecànica i fer-hi un cop d'ull.
14:09
Thank you very much.
358
834000
2000
Moltes gràcies.
14:11
(Applause)
359
836000
3000
(Aplaudiments)
ABOUT THE SPEAKER
Ben Goldacre - DebunkerBen Goldacre unpicks dodgy scientific claims made by scaremongering journalists, dubious government reports, pharmaceutical corporations, PR companies and quacks.
Why you should listen
"It was the MMR story that finally made me crack," begins the Bad Science manifesto, referring to the sensationalized -- and now-refuted -- link between vaccines and autism. With that sentence Ben Goldacre fired the starting shot of a crusade waged from the pages of The Guardian from 2003 to 2011, on an addicitve Twitter feed, and in bestselling books, including Bad Science and his latest, Bad Pharma, which puts the $600 billion global pharmaceutical industry under the microscope. What he reveals is a fascinating, terrifying mess.
Goldacre was trained in medicine at Oxford and London, and works as an academic in epidemiology. Helped along by this inexhaustible supply of material, he also travels the speaking circuit, promoting skepticism and nerdish curiosity with fire, wit, fast delivery and a lovable kind of exasperation. (He might even convince you that real science, sober reporting and reason are going to win in the end.)
As he writes, "If you're a journalist who misrepresents science for the sake of a headline, a politician more interested in spin than evidence, or an advertiser who loves pictures of molecules in little white coats, then beware: your days are numbered."
Ben Goldacre | Speaker | TED.com