TEDMED 2012
Ben Goldacre: What doctors don't know about the drugs they prescribe
Ben Goldacre: Det legene ikke vet om medisinene de foreskriver
Filmed:
Readability: 5
2,501,600 views
Når et nytt legemiddel testes, så bør resultatene fra studiene publiseres for resten av den legevitenskaplige verden. --Men dessverre, negative resultater eller resultater uten en klar konklusjon blir ikke rapportert, noe som etterlater leger og forskere i mørket. I denne engasjerende talen, forklarer doktor Ben Goldacre hvorfor disse urapporterte tilfellene av negative data er spesielt misledende og farlige.
Ben Goldacre - Debunker
Ben Goldacre unpicks dodgy scientific claims made by scaremongering journalists, dubious government reports, pharmaceutical corporations, PR companies and quacks. Full bio
Ben Goldacre unpicks dodgy scientific claims made by scaremongering journalists, dubious government reports, pharmaceutical corporations, PR companies and quacks. Full bio
Double-click the English transcript below to play the video.
00:16
Hi. So, this chap here,
0
671
2785
Hei. Så, denne karen her,
00:19
he thinks he can tell you the future.
1
3456
2262
han tror han kan fortelle deg fremtiden.
00:21
His name is Nostradamus, although here the Sun have
2
5718
1979
Han heter Nostradamus,
selv om avisen The Sun
selv om avisen The Sun
00:23
made him look a little bit like Sean Connery. (Laughter)
3
7697
3670
har fått ham til å se ut litt som Sean Connery.
(Latter)
(Latter)
00:27
And like most of you, I suspect, I don't really believe
4
11367
2903
Og som de fleste av dere, skulle jeg tro,
tror ikke jeg på
tror ikke jeg på
00:30
that people can see into the future.
5
14270
1108
at folk kan se inn i fremtiden.
00:31
I don't believe in precognition, and every now and then,
6
15378
2704
Jeg tror ikke på prekognisjon,
men en gang i blant
men en gang i blant
00:33
you hear that somebody has been able to predict something that happened in the future,
7
18082
3182
hører man om en som har greid å forutsi
noe som skjedde i fremtiden,
noe som skjedde i fremtiden,
00:37
and that's probably because it was a fluke, and we only
8
21264
3059
og det er sannsynligvis fordi det var flaks,
og vi hører kun
og vi hører kun
00:40
hear about the flukes and about the freaks.
9
24323
2615
om de som hadde flaks
og om de sære hendelsene.
og om de sære hendelsene.
00:42
We don't hear about all the times that people got stuff wrong.
10
26938
4079
Vi hører ikke om alle gangene
der folk bommet.
der folk bommet.
00:46
Now we expect that to happen with silly stories
11
31017
2160
Nå forventer vi jo at slik skjer
med tåpelige fortellinger
med tåpelige fortellinger
00:49
about precognition, but the problem is,
12
33177
3139
om prekognisjon, men problemet er,
00:52
we have exactly the same problem in academia
13
36316
3344
at vi har nøyaktig det samme problemet
i akademia
i akademia
00:55
and in medicine, and in this environment, it costs lives.
14
39660
4501
og i legevitenskapen,
og i dette miljøet koster det liv.
og i dette miljøet koster det liv.
01:00
So firstly, thinking just about precognition, as it turns out,
15
44161
3365
Så for det første, angående prekognisjon,
så viser det seg,
så viser det seg,
01:03
just last year a researcher called Daryl Bem conducted
16
47526
2529
senest i fjor gjennomførte en forsker
som heter Daryl Bem
som heter Daryl Bem
01:05
a piece of research where he found evidence
17
50055
1836
forskningsarbeid hvor han fant bevis
01:07
of precognitive powers in undergraduate students,
18
51891
3658
for prekognitive krefter i bachelorstudenter,
01:11
and this was published in a peer-reviewed academic journal
19
55549
2574
og dette ble publisert
i et fagfellevurdert vitenskaplig tidsskrift
i et fagfellevurdert vitenskaplig tidsskrift
01:14
and most of the people who read this just said, "Okay, well,
20
58123
2281
og de fleste av de som leste dette
sa bare: "OK, vel,
sa bare: "OK, vel,
01:16
fair enough, but I think that's a fluke, that's a freak, because I know
21
60404
2181
greit nok, men jeg tror det er tilfeldigheter,
en særhendelse, fordi jeg vet
en særhendelse, fordi jeg vet
01:18
that if I did a study where I found no evidence
22
62585
2834
at hvis jeg gjorde en studie
hvor jeg ikke fant bevis
hvor jeg ikke fant bevis
01:21
that undergraduate students had precognitive powers,
23
65419
2512
for at studentene hadde prekognitive krefter,
01:23
it probably wouldn't get published in a journal.
24
67931
3552
så ville det sannsynligvis ikke bli publisert
i et vitenskapelig tidsskrift.
i et vitenskapelig tidsskrift.
01:27
And in fact, we know that that's true, because
25
71483
2855
Og faktisk vet vi at det er sant, fordi
01:30
several different groups of research scientists tried
26
74338
2529
flere forskjellige grupper
av forskere forsøkte
av forskere forsøkte
01:32
to replicate the findings of this precognition study,
27
76867
3520
å gjenskape resultatene
av denne prekognisjonsstudien,
av denne prekognisjonsstudien,
01:36
and when they submitted it to the exact same journal,
28
80387
2635
og når de sendte resultatene
til det samme vitenskaplige tidsskrift,
til det samme vitenskaplige tidsskrift,
01:38
the journal said, "No, we're not interested in publishing
29
83022
3152
fikk de svar, "Nei,vi er ikke
interessert i å publisere replikasjon.
interessert i å publisere replikasjon.
01:42
replication. We're not interested in your negative data."
30
86174
4525
Vi er ikke interessert
i deres negative data."
i deres negative data."
01:46
So this is already evidence of how, in the academic
31
90699
2754
Så dette er allerede bevis på at,
i faglig litteratur
i faglig litteratur
01:49
literature, we will see a biased sample of the true picture
32
93453
4870
får vi et skjevt utvalg av det sanne bildet
01:54
of all of the scientific studies that have been conducted.
33
98323
3467
av alle de vitenskapelige studiene
som er utført.
som er utført.
01:57
But it doesn't just happen in the dry academic field of psychology.
34
101790
4429
Men det skjer ikke bare innen tørr
akademisk psykologi.
akademisk psykologi.
02:02
It also happens in, for example, cancer research.
35
106219
4367
Det skjer også, for eksempel,
i kreftforskning.
i kreftforskning.
02:06
So in March, 2012, just one month ago, some researchers
36
110586
4077
Så i mars 2012 rapporterte noen forskere
02:10
reported in the journal Nature how they had tried
37
114663
2896
i tidsskriftet Nature,
om at de hadde forsøkt
om at de hadde forsøkt
02:13
to replicate 53 different basic science studies looking at
38
117559
3846
å replikere 53 ulike grunnleggende
vitenskaplige studier, med tanke på
vitenskaplige studier, med tanke på
02:17
potential treatment targets in cancer,
39
121405
3555
potensielle behandlingsmål for kreft,
02:20
and out of those 53 studies, they were only able
40
124960
2638
og ut av de 53 studiene,
var de bare i stand til
var de bare i stand til
02:23
to successfully replicate six.
41
127598
3076
å replikere seks.
02:26
Forty-seven out of those 53 were unreplicable.
42
130674
4333
Førti-sju av de 53 var ureplikerbare.
02:30
And they say in their discussion that this is very likely
43
135007
3913
Og de skriver i sin diskusjon
at dette mest sannsynlig
at dette mest sannsynlig
02:34
because freaks get published.
44
138920
2639
er fordi bare særhendelser blir publisert.
02:37
People will do lots and lots and lots of different studies,
45
141559
2096
Det gjennomføres veldig mange
forskjellige studier,
forskjellige studier,
02:39
and the occasions when it works they will publish,
46
143655
2120
og ved de anledningene det fungerer
blir de publisert,
blir de publisert,
02:41
and the ones where it doesn't work they won't.
47
145775
1679
og når det ikke går,
blir de ikke publisert.
blir de ikke publisert.
02:43
And their first recommendation of how to fix this problem,
48
147454
3941
Og deres første anbefaling
for hvordan man løser dette problemet,
for hvordan man løser dette problemet,
02:47
because it is a problem, because it sends us all down blind alleys,
49
151395
3289
for det er et problem,
fordi det sender oss alle ned blindveier,
fordi det sender oss alle ned blindveier,
02:50
their first recommendation of how to fix this problem
50
154684
1706
deres første anbefaling for
hvordan man løser dette problemet
hvordan man løser dette problemet
02:52
is to make it easier to publish negative results in science,
51
156390
3393
er å gjøre det enklere å publisere
negative vitenskaplige resultater,
negative vitenskaplige resultater,
02:55
and to change the incentives so that scientists are
52
159783
2907
og å endre insentivene slik at forskere blir
02:58
encouraged to post more of their negative results in public.
53
162690
4352
oppfordret til å publisere flere av
sine negative resultater i offentligheten.
sine negative resultater i offentligheten.
03:02
But it doesn't just happen in the very dry world
54
167042
3852
Men det skjer ikke bare i
den veldig tørre verdenen
den veldig tørre verdenen
03:06
of preclinical basic science cancer research.
55
170894
3851
til preklinisk grunnleggende
vitenskaplig kreftforskning.
vitenskaplig kreftforskning.
03:10
It also happens in the very real, flesh and blood
56
174745
3657
Det skjer også i det svært reelle kjøtt og blod
03:14
of academic medicine. So in 1980,
57
178402
3591
til akademisk legevitenskap.
Så i 1980,
Så i 1980,
03:17
some researchers did a study on a drug called lorcainide,
58
181993
3008
gjorde noen forskere en studie
på et stoff som heter lorcainide,
på et stoff som heter lorcainide,
03:20
and this was an anti-arrhythmic drug,
59
185001
2331
og dette var et anti-arytmisk stoff,
03:23
a drug that suppresses abnormal heart rhythms,
60
187332
2251
et stoff som undertrykker
unormale hjerterytmer,
unormale hjerterytmer,
03:25
and the idea was, after people have had a heart attack,
61
189598
2228
og tanken var,
at etter folk har hatt et hjerteinfarkt,
at etter folk har hatt et hjerteinfarkt,
03:27
they're quite likely to have abnormal heart rhythms,
62
191826
1537
så er det stor sannsynlighet
for at de har unormale hjerterytmer,
for at de har unormale hjerterytmer,
03:29
so if we give them a drug that suppresses abnormal heart
63
193363
2377
så hvis vi gir dem et legemiddel
som undertrykker unormalehjerterytmer,
som undertrykker unormalehjerterytmer,
03:31
rhythms, this will increase the chances of them surviving.
64
195740
3713
vil dette øke sjansene deres for å overleve.
03:35
Early on its development, they did a very small trial,
65
199453
3008
Tidlig i utviklingen,
gjorde de en svært liten studie,
gjorde de en svært liten studie,
03:38
just under a hundred patients.
66
202461
1644
like under hundre pasienter.
03:40
Fifty patients got lorcainide, and of those patients, 10 died.
67
204105
3652
Femti pasienter fikk lorcainide,
og av disse pasientene, døde 10.
og av disse pasientene, døde 10.
03:43
Another 50 patients got a dummy placebo sugar pill
68
207757
3043
50 andre pasienter fikk en placebo sukkerpille
03:46
with no active ingredient, and only one of them died.
69
210800
2958
uten aktive ingredienser,
og bare én av dem døde.
og bare én av dem døde.
03:49
So they rightly regarded this drug as a failure,
70
213758
2649
Så de betraktet med rette
dette legemiddelet som en fiasko,
dette legemiddelet som en fiasko,
03:52
and its commercial development was stopped, and because
71
216407
2869
og dens kommersiell utvikling ble stoppet.
Og fordi
Og fordi
03:55
its commercial development was stopped, this trial was never published.
72
219276
4348
den kommersielle utviklingen ble stoppet,
ble denne studien aldri publisert.
ble denne studien aldri publisert.
03:59
Unfortunately, over the course of the next five, 10 years,
73
223624
5397
Uheldigvis, i løpet av de neste 5-10 årene,
04:04
other companies had the same idea about drugs that would
74
229021
3825
hadde andre selskaper
den samme ideen om legemidler
den samme ideen om legemidler
04:08
prevent arrhythmias in people who have had heart attacks.
75
232846
2592
som skulle forhindre arytmi
i folk som har hatt hjerteinfarkt.
i folk som har hatt hjerteinfarkt.
04:11
These drugs were brought to market. They were prescribed
76
235438
1720
Disse legemiddlene kom ut på markedet.
De ble foreskrevet
De ble foreskrevet
04:13
very widely because heart attacks are a very common thing,
77
237158
3412
i stort omfang, fordi hjerteinfarkt
er en veldig vanlig ting,
er en veldig vanlig ting,
04:16
and it took so long for us to find out that these drugs
78
240570
3843
og det tok så lang tid for oss
å finne ut at disse stoffene
å finne ut at disse stoffene
04:20
also caused an increased rate of death
79
244413
2911
også forårsaket en økt dødsrate
04:23
that before we detected that safety signal,
80
247324
2747
at før vi oppdaget det faresignalet,
04:25
over 100,000 people died unnecessarily in America
81
250071
6051
hadde over 100.000 mennesker
dødd unødvendig i Amerika
dødd unødvendig i Amerika
04:32
from the prescription of anti-arrhythmic drugs.
82
256122
3451
på grunn av foreskrivning av
anti-arytmiske medikamenter.
anti-arytmiske medikamenter.
04:35
Now actually, in 1993,
83
259573
3598
Faktisk, i 1993,
04:39
the researchers who did that 1980 study, that early study,
84
263171
3560
publiserte forskerne som gjorde
den tidlige 1980 studien,
den tidlige 1980 studien,
04:42
published a mea culpa, an apology to the scientific community,
85
266731
3841
en mea culpa, en unnskyldning
til det vitenskapelige samfunnet,
til det vitenskapelige samfunnet,
04:46
in which they said, "When we carried out our study in 1980,
86
270572
3125
hvor de sa,
"Da vi gjennomførte vår studie i 1980,
"Da vi gjennomførte vår studie i 1980,
04:49
we thought that the increased death rate that occurred
87
273697
1936
trodde vi at den økte dødeligheten
som dukket opp
som dukket opp
04:51
in the lorcainide group was an effect of chance."
88
275633
3358
i lorcainide gruppen var en tilfeldighet."
04:54
The development of lorcainide was abandoned for commercial reasons,
89
278991
2032
Utviklingen av lorcainide ble avsluttet
av kommersielle grunner,
av kommersielle grunner,
04:56
and this study was never published;
90
281023
1638
og denne studien ble aldri utgitt;
04:58
it's now a good example of publication bias.
91
282661
2386
den er nå et godt eksempel
på publikasjonsskjevhet.
på publikasjonsskjevhet.
05:00
That's the technical term for the phenomenon where
92
285047
1891
Det er den tekniske betegnelsen
på fenomenet
på fenomenet
05:02
unflattering data gets lost, gets unpublished, is left
93
286938
4238
der lite flatterende data går tapt,
forblir upublisert,
forblir upublisert,
05:07
missing in action, and they say the results described here
94
291176
3371
forsvinner, og de sier at
resultatene som er beskrevet her
resultatene som er beskrevet her
05:10
"might have provided an early warning of trouble ahead."
95
294547
4808
"kunne ha gitt et tidlig varsel
om problemer som skulle komme."
om problemer som skulle komme."
05:15
Now these are stories from basic science.
96
299355
3213
Disse er historier
fra grunnleggende vitenskap.
fra grunnleggende vitenskap.
05:18
These are stories from 20, 30 years ago.
97
302568
4787
De er historier fra 20-30 år tilbake.
05:23
The academic publishing environment is very different now.
98
307355
3147
Det akademiske publiseringsmiljøet
er svært annerledes nå.
er svært annerledes nå.
05:26
There are academic journals like "Trials," the open access journal,
99
310502
3995
Det finnes akademiske tidsskrifter
som "Trials," et "åpen tilgang" tidsskrift
som "Trials," et "åpen tilgang" tidsskrift
05:30
which will publish any trial conducted in humans
100
314497
2655
som vil publisere hver en studie
gjort på mennesker
gjort på mennesker
05:33
regardless of whether it has a positive or a negative result.
101
317152
3303
uavhengig av om den har
positivt eller negativt resultat.
positivt eller negativt resultat.
05:36
But this problem of negative results that go missing in action
102
320455
3969
Men problemet med negative resultater
som forsvinner
som forsvinner
05:40
is still very prevalent. In fact it's so prevalent
103
324424
3559
er fortsatt svært utbredt.
Faktisk er det så utbredt
Faktisk er det så utbredt
05:43
that it cuts to the core of evidence-based medicine.
104
327983
5851
at det skjærer til kjernen
av bevisbasert legevitenskap.
av bevisbasert legevitenskap.
05:49
So this is a drug called reboxetine, and this is a drug
105
333834
3015
Så dette er et legemiddel som heter reboxetine,
og dette er et legemiddel
og dette er et legemiddel
05:52
that I myself have prescribed. It's an antidepressant.
106
336849
2535
som jeg selv har foreskrevet.
Det er en antidepressant.
Det er en antidepressant.
05:55
And I'm a very nerdy doctor, so I read all of the studies
107
339384
2536
Og jeg er en veldig nerdete lege,
så jeg leste alle studiene
så jeg leste alle studiene
05:57
that I could on this drug. I read the one study that was published
108
341920
3052
jeg kunne om dette stoffet.
Jeg leste den ene studien som ble publisert
Jeg leste den ene studien som ble publisert
06:00
that showed that reboxetine was better than placebo,
109
344972
2947
som viste at reboxetine var bedre enn placebo,
06:03
and I read the other three studies that were published
110
347919
1864
og jeg leste de andre tre studiene
som ble publisert
som ble publisert
06:05
that showed that reboxetine was just as good as any other antidepressant,
111
349783
3571
som viste at reboxetine var like god
som noen annen antidepressant,
som noen annen antidepressant,
06:09
and because this patient hadn't done well on those other antidepressants,
112
353354
2187
og fordi denne pasienten ikke hadde vist
bedring på andre medisiner,
bedring på andre medisiner,
06:11
I thought, well, reboxetine is just as good. It's one to try.
113
355541
2466
tenkte jeg, vel, reboxetine er like god.
Den er verdt å prøve.
Den er verdt å prøve.
06:13
But it turned out that I was misled. In fact,
114
358007
3392
Men det viste seg at jeg var villedet.
Faktisk,
Faktisk,
06:17
seven trials were conducted comparing reboxetine
115
361399
2449
så var syv studier utført
som sammenlignet reboxetine
som sammenlignet reboxetine
06:19
against a dummy placebo sugar pill. One of them
116
363848
2712
med en placebo sukkerpille.
En av dem
En av dem
06:22
was positive and that was published, but six of them
117
366560
2312
var positiv, og ble publisert,
men seks av dem
men seks av dem
06:24
were negative and they were left unpublished.
118
368872
4048
var negative og forble upubliserte.
06:28
Three trials were published comparing reboxetine
119
372920
1739
Tre forsøk som sammenlignet reboxetine
06:30
against other antidepressants in which reboxetine
120
374659
2226
med andre antidepressiva fant at
06:32
was just as good, and they were published,
121
376885
1793
reboxetine var like god, ble publisert,
06:34
but three times as many patients' worth of data was collected
122
378678
4389
men data fra tre ganger så mange pasienter,
06:38
which showed that reboxetine was worse than
123
383067
1871
som viste at reboxetine var dårligere enn
06:40
those other treatments, and those trials were not published.
124
384938
4701
de andre midlene, ble ikke publisert.
06:45
I felt misled.
125
389639
3759
Jeg følte meg villedet.
06:49
Now you might say, well, that's an extremely unusual example,
126
393398
2130
Nå tenker du kanskje, vel, dette er
et ekstremt uvanlig eksempel,
et ekstremt uvanlig eksempel,
06:51
and I wouldn't want to be guilty of the same kind of
127
395528
2008
og jeg vil ikke gjøre meg skyldig i samme type
06:53
cherry-picking and selective referencing
128
397536
2981
selektive utvelgelse av fakta og referanser
06:56
that I'm accusing other people of.
129
400517
1791
som jeg beskylder andre folk for.
06:58
But it turns out that this phenomenon of publication bias
130
402308
1884
Men det viser seg at dette fenomenet
med publikasjonsskjevhet
med publikasjonsskjevhet
07:00
has actually been very, very well studied.
131
404192
2127
faktisk har vært veldig grundig studert.
07:02
So here is one example of how you approach it.
132
406319
2218
Så er her et eksempel på
hvordan man tilnærmer seg det.
hvordan man tilnærmer seg det.
07:04
The classic model is, you get a bunch of studies where
133
408537
2440
Den klassiske metoden er
at du tar for deg mange studier
at du tar for deg mange studier
07:06
you know that they've been conducted and completed,
134
410977
2185
som du vet er blitt fullført,
07:09
and then you go and see if they've been published anywhere
135
413162
2321
og så ser du om de har blitt publisert
07:11
in the academic literature. So this took all of the trials
136
415483
2863
i den akademiske litteraturen.
Så her tok man alle forsøkene
Så her tok man alle forsøkene
07:14
that had ever been conducted on antidepressants
137
418346
2154
som noen gang hadde vært gjennomført
på antidepressiva
på antidepressiva
07:16
that were approved over a 15-year period by the FDA.
138
420500
3642
og som var godkjent av FDA
over en 15 årsperiode.
over en 15 årsperiode.
07:20
They took all of the trials which were submitted to the FDA as part of the approval package.
139
424142
3756
Altså, alle forsøk som ble sendt til FDA
som en del av godkjenningspakkene.
som en del av godkjenningspakkene.
07:23
So that's not all of the trials that were ever conducted on these drugs,
140
427898
3200
Så det er ikke alle forsøk som er gjennomført
på disse legemidlene.
på disse legemidlene.
07:26
because we can never know if we have those,
141
431098
2098
for vi kan ikke vite om vi har alle disse,
07:29
but it is the ones that were conducted in order to get the marketing authorization.
142
433196
3494
Men det er de som ble gjennomført
for å få tillatelse til å selge legemidlene.
for å få tillatelse til å selge legemidlene.
07:32
And then they went to see if these trials had been published
143
436690
2349
Så sjekket de om disse forsøkene
hadde blitt publisert
hadde blitt publisert
07:34
in the peer-reviewed academic literature. And this is what they found.
144
439039
2572
i fagfellesvurdert akademisk litteratur.
Og dette er det de fant.
Og dette er det de fant.
07:37
It was pretty much a 50-50 split. Half of these trials
145
441611
3169
Det var en ganske klar 50-50 deling.
07:40
were positive, half of them were negative, in reality.
146
444780
3597
Halvparten av studiene var positive,
halvparten var negative.
halvparten var negative.
07:44
But when they went to look for these trials in the peer-reviewed academic literature,
147
448377
4741
Men da de så etter disse studiene
i den akademiske faglitteraturen,
i den akademiske faglitteraturen,
07:49
what they found was a very different picture.
148
453118
2234
så fant de en helt annen verden.
07:51
Only three of the negative trials were published,
149
455352
4372
Bare tre negative forsøk var publisert,
07:55
but all but one of the positive trials were published.
150
459724
4642
men alle unntatt ett av de positive.
08:00
Now if we just flick back and forth between those two,
151
464366
3761
Nå, om vi blar frem og tilbake mellom de to,
08:04
you can see what a staggering difference there was
152
468127
2594
så ser vi en urovekkende forskjell
08:06
between reality and what doctors, patients,
153
470721
3450
mellom virkeligheten
og hva leger, pasienter,
og hva leger, pasienter,
08:10
commissioners of health services, and academics
154
474171
2622
utøverne av helsetjenester,
og akademikere kunne få se
og akademikere kunne få se
08:12
were able to see in the peer-reviewed academic literature.
155
476793
3281
i den akademiske litteraturen.
08:15
We were misled, and this is a systematic flaw
156
480074
4454
Vi ble villedet,
og dette er en systematisk svakhet
og dette er en systematisk svakhet
08:20
in the core of medicine.
157
484528
3330
i kjernen av legevitenskapen.
08:23
In fact, there have been so many studies conducted on
158
487858
2663
Faktisk har det vært
så mange studier gjennomført
så mange studier gjennomført
08:26
publication bias now, over a hundred, that they've been
159
490521
3384
på publikasjonsskjevhet nå,
mer enn hundre, at de har blitt
mer enn hundre, at de har blitt
08:29
collected in a systematic review, published in 2010,
160
493905
3194
samlet i en systematisk gjennomgang,
publisert i 2010,
publisert i 2010,
08:32
that took every single study on publication bias
161
497099
2766
som tok for seg hver eneste studie
om publikasjonsskjevhet
om publikasjonsskjevhet
08:35
that they could find.
162
499865
1299
som de kunne finne.
08:37
Publication bias affects every field of medicine.
163
501164
2852
Publikasjonsskjevhet påvirker
alle områder i legevitenskapen.
alle områder i legevitenskapen.
08:39
About half of all trials, on average, go missing in action,
164
504016
4313
Omtrent halvparten av alle studier,
i gjennomsnitt, forsvinner,
i gjennomsnitt, forsvinner,
08:44
and we know that positive findings are around twice as likely
165
508329
3058
og vi vet at det er
rundt dobbelt så stor sannsynlighet
rundt dobbelt så stor sannsynlighet
08:47
to be published as negative findings.
166
511387
3054
for at positive funn blir publisert
som negativte funn.
som negativte funn.
08:50
This is a cancer at the core of evidence-based medicine.
167
514441
4061
Dette er en kreftsvulst i kjernen
av evidensbasert legevitenskap.
av evidensbasert legevitenskap.
08:54
If I flipped a coin 100 times but then
168
518502
3871
Hvis jeg kastet en mynt 100 ganger,
08:58
withheld the results from you from half of those tosses,
169
522373
3259
men så tilbakeholdt resultatene fra deg
fra halvparten av de gangene,
fra halvparten av de gangene,
09:01
I could make it look as if I had a coin that always came up heads.
170
525632
3400
så kunne jeg få det til å se ut
som om mynten alltid landet på krone.
som om mynten alltid landet på krone.
09:04
But that wouldn't mean that I had a two-headed coin.
171
529032
1806
Men det ville ikke betydd
at jeg hadde en to-kronet mynt.
at jeg hadde en to-kronet mynt.
09:06
That would mean that I was a chancer
172
530853
1712
Det ville bety at jeg var en lurendreier
09:08
and you were an idiot for letting me get away with it. (Laughter)
173
532565
3114
og at du var en idiot som lot seg lure.
(Latter)
(Latter)
09:11
But this is exactly what we blindly tolerate
174
535679
3637
Men dette er nøyaktig det vi blindt tolererer
09:15
in the whole of evidence-based medicine.
175
539316
3789
i hele den evidensbaserte legevitenskapen.
09:19
And to me, this is research misconduct.
176
543105
4432
Og for meg, så er dette uredelighet
og forsømmelse i forskningen.
og forsømmelse i forskningen.
09:23
If I conducted one study and I withheld
177
547537
2743
Hvis jeg gjennomførte én studie,
og jeg holdt tilbake
og jeg holdt tilbake
09:26
half of the data points from that one study,
178
550280
3000
halvparten av dataene fra den ene studien,
09:29
you would rightly accuse me, essentially, of research fraud.
179
553280
4707
så ville du med rette beskylde meg
for forskningssvindel.
for forskningssvindel.
09:33
And yet, for some reason, if somebody conducts
180
557987
2783
Men av en eller annen grunn,
hvis noen gjennomfører
hvis noen gjennomfører
09:36
10 studies but only publishes the five that give the result that they want,
181
560770
4558
10 studier, men bare publiserer de fem
som har gitt ønsket resultat,
som har gitt ønsket resultat,
09:41
we don't consider that to be research misconduct.
182
565328
2788
så anser vi det ikke
for å være uredelig forskning.
for å være uredelig forskning.
09:44
And when that responsibility is diffused between
183
568116
2567
Og når dette ansvaret er spredt mellom
09:46
a whole network of researchers, academics,
184
570683
3161
et helt nettverk av forskere, akademikere,
09:49
industry sponsors, journal editors, for some reason
185
573844
3528
industrisponsorer og tidsskriftsredaktører,
så av en eller annen grunn
så av en eller annen grunn
09:53
we find it more acceptable,
186
577372
1453
finner vi det mer akseptabelt,
09:54
but the effect on patients is damning.
187
578825
3675
men effekten på pasientene er dramatisk.
09:58
And this is happening right now, today.
188
582500
5018
Og dette skjer akkurat nå, i dag.
10:03
This is a drug called Tamiflu. Tamiflu is a drug
189
587518
2711
Dette er et legemiddel som heter Tamiflu.
Tamiflu er en medisin
Tamiflu er en medisin
10:06
which governments around the world have spent billions
190
590229
2596
som regjeringer over hele verden
har brukt milliarder
har brukt milliarder
10:08
and billions of dollars on stockpiling,
191
592825
2572
på milliarder av dollar på å hamstre opp,
10:11
and we've stockpiled Tamiflu in panic,
192
595397
3148
og vi har hamstret Tamiflu i panikk,
10:14
in the belief that it will reduce the rate of complications of influenza.
193
598545
3949
i den tro at det ville redusere
komplikasjoner fra influensa.
komplikasjoner fra influensa.
10:18
Complications is a medical euphemism for pneumonia
194
602494
2684
Komplikasjoner er en medisinsk
eufemisme for lungebetennelse
eufemisme for lungebetennelse
10:21
and death. (Laughter)
195
605178
4814
og død. (Latter)
10:25
Now when the Cochrane systematic reviewers
196
609992
3208
Så, når Cochranes
systematiske vurderingsteam
systematiske vurderingsteam
10:29
were trying to collect together all of the data from all
197
613200
2525
prøvde å samle alle data fra alle
10:31
of the trials that had ever been conducted on whether Tamiflu actually did this or not,
198
615725
3648
studiene som hadde undersøkt
om Tamiflu faktisk gjorde dette,
om Tamiflu faktisk gjorde dette,
10:35
they found that several of those trials were unpublished.
199
619373
2951
så oppdaget de at flere av disse studiene
var upubliserte.
var upubliserte.
10:38
The results were unavailable to them.
200
622324
1842
Resultatene var utilgjengelig for dem.
10:40
And when they started obtaining the writeups of those trials through various different means,
201
624166
3964
Og da de begynte å skaffe loggene
fra studiene gjennom ulike kanaler,
fra studiene gjennom ulike kanaler,
10:44
through Freedom of Information Act requests, through
202
628130
1682
gjennom "Freedom of Information Act"
forespørsler, gjennom
forespørsler, gjennom
10:45
harassing various different organizations, what they found was inconsistent.
203
629812
4809
å sjikanere ulike organisasjoner,
så var det de fant inkonsekvent.
så var det de fant inkonsekvent.
10:50
And when they tried to get a hold of the clinical study reports,
204
634621
2466
Og da de prøvde å få tak i
de kliniske forsøksrapportene,
de kliniske forsøksrapportene,
10:52
the 10,000-page long documents that have
205
637087
3046
10 000-siders dokumenter som har
10:56
the best possible rendition of the information,
206
640133
3600
den mest fullstendige informasjon,
10:59
they were told they weren't allowed to have them.
207
643733
2888
ble de nektet dem.
11:02
And if you want to read the full correspondence
208
646621
2683
Dere kan lese hele korrespondansen
11:05
and the excuses and the explanations given by the drug company,
209
649304
3290
med farmasøytfirmaets unnskyldninger
og bortforklaringer
og bortforklaringer
11:08
you can see that written up in this week's edition
210
652594
2717
i denne ukens utgave
11:11
of PLOS Medicine.
211
655311
4367
av "PLOS Medicine".
11:15
And the most staggering thing of all of this, to me,
212
659678
3859
Det verste med alt dette, for meg,
11:19
is that not only is this a problem, not only do we recognize
213
663537
3299
er at ikke bare er dette et problem,
ikke bare anerkjenner vi
ikke bare anerkjenner vi
11:22
that this is a problem, but we've had to suffer fake fixes.
214
666836
4195
at dette er et problem,
men vi har måttet tåle falske løsninger.
men vi har måttet tåle falske løsninger.
11:26
We've had people pretend that this is a problem that's been fixed.
215
671031
3058
Vi har måttet tåle at folk
later som at dette problemet er løst.
later som at dette problemet er løst.
11:29
First of all, we had trials registers, and everybody said,
216
674089
2188
Først fikk vi registre for studiene,
og alle sa:
og alle sa:
11:32
oh, it's okay. We'll get everyone to register their trials, they'll post the protocol,
217
676277
3603
Nå er det ordnet. Alle studier skal registreres
og alle protokoller fremlegges,
og alle protokoller fremlegges,
11:35
they'll say what they're going to do before they do it,
218
679880
2024
og si hva de skal gjøre før de gjør det,
11:37
and then afterwards we'll be able to check and see if all the trials which
219
681904
2121
så etterpå kan vi kontrollere
om alle studiene
om alle studiene
11:39
have been conducted and completed have been published.
220
684025
2468
som har vært gjennomført har blitt publisert.
11:42
But people didn't bother to use those registers.
221
686493
2196
Men folk gadd ikke å bruke registrene.
11:44
And so then the International Committee of Medical Journal Editors came along,
222
688689
2619
Deretter kom "International Committee
of Medical Journal Editors" på banen,
of Medical Journal Editors" på banen,
11:47
and they said, oh, well, we will hold the line.
223
691308
1543
og de sa, ja vel, vi skal holde fortet.
11:48
We won't publish any journals, we won't publish any trials,
224
692851
2633
Vi vil ikke publisere noen studier
11:51
unless they've been registered before they began.
225
695484
2682
om de ikke var registrert før oppstart.
11:54
But they didn't hold the line. In 2008, a study was conducted
226
698166
3531
Men de holdt ikke fortet.
I 2008, ble en studie utført
I 2008, ble en studie utført
11:57
which showed that half of all of trials published by journals
227
701697
3015
som viste at halvparten av alle
studier publisert av tidsskrifter
studier publisert av tidsskrifter
12:00
edited by members of the ICMJE
228
704712
2667
med redaktører som var
medlemmer av ICMJE
medlemmer av ICMJE
12:03
weren't properly registered, and a quarter of them weren't registered at all.
229
707379
4813
ikke var riktig registrert, og
en fjerdedel var ikke registrert i det hele tatt.
en fjerdedel var ikke registrert i det hele tatt.
12:08
And then finally, the FDA Amendment Act was passed
230
712192
2801
Og så til slutt, ble
"FDA Amendment Act" vedtatt
"FDA Amendment Act" vedtatt
12:10
a couple of years ago saying that everybody who conducts
231
714993
2349
for et par år siden,
som krever at alle som gjennomfører
som krever at alle som gjennomfører
12:13
a trial must post the results of that trial within one year.
232
717342
3443
en studie må offentliggjøre resultatet
av den studien innen ett år.
av den studien innen ett år.
12:16
And in the BMJ, in the first edition of January, 2012,
233
720785
4096
Og i tidsskriftet "BMJ",
i januar 2012,
i januar 2012,
12:20
you can see a study which looks to see if people kept
234
724881
2704
kan du se en studie som sjekket
om folk overholdt
om folk overholdt
12:23
to that ruling, and it turns out that only one in five
235
727585
3719
den kjennelsen, og det viser seg
at bare én av fem
at bare én av fem
12:27
have done so.
236
731304
2864
har gjort det.
12:30
This is a disaster.
237
734168
3283
Dette er en katastrofe.
12:33
We cannot know the true effects of the medicines
238
737451
3564
Vi kan ikke vite de sanne virkningene
av legemidlene
av legemidlene
12:36
that we prescribe if we do not have access
239
741015
3216
vi foreskriver hvis vi ikke har tilgang
12:40
to all of the information.
240
744231
3180
til all informasjonen.
12:43
And this is not a difficult problem to fix.
241
747411
3959
Og dette er ikke en vanskelig nøtt å løse.
12:47
We need to force people to publish all trials
242
751370
5128
Vi må tvinge folk til å publisere alle studier
12:52
conducted in humans, including the older trials,
243
756498
2971
gjennomført på mennesker,
inkludert eldre studier,
inkludert eldre studier,
12:55
because the FDA Amendment Act only asks that you publish the trials conducted after 2008,
244
759469
3945
fordi "FDA loven" krever bare publikasjon
av studier utført etter 2008
av studier utført etter 2008
12:59
and I don't know what world it is in which we're only
245
763414
2613
og jeg vet ikke i hvilken verden vi
13:01
practicing medicine on the basis of trials that completed in the past two years.
246
766027
4456
praktiserer legeyrket på grunnlag av
forsøk fra bare de siste to år.
forsøk fra bare de siste to år.
13:06
We need to publish all trials in humans,
247
770483
2105
Vi må publisere alle studier på mennesker,
13:08
including the older trials, for all drugs in current use,
248
772588
3074
også eldre studier,
for alle legemidler som er i bruk,
for alle legemidler som er i bruk,
13:11
and you need to tell everyone you know
249
775662
2916
og du trenger å fortelle alle du kjenner
13:14
that this is a problem and that it has not been fixed.
250
778578
3442
at dette er et problem,
og at det ikke er blitt fikset.
og at det ikke er blitt fikset.
13:17
Thank you very much. (Applause)
251
782020
2951
Takk for meg. (Applaus)
13:20
(Applause)
252
784971
3273
(Applaus)
ABOUT THE SPEAKER
Ben Goldacre - DebunkerBen Goldacre unpicks dodgy scientific claims made by scaremongering journalists, dubious government reports, pharmaceutical corporations, PR companies and quacks.
Why you should listen
"It was the MMR story that finally made me crack," begins the Bad Science manifesto, referring to the sensationalized -- and now-refuted -- link between vaccines and autism. With that sentence Ben Goldacre fired the starting shot of a crusade waged from the pages of The Guardian from 2003 to 2011, on an addicitve Twitter feed, and in bestselling books, including Bad Science and his latest, Bad Pharma, which puts the $600 billion global pharmaceutical industry under the microscope. What he reveals is a fascinating, terrifying mess.
Goldacre was trained in medicine at Oxford and London, and works as an academic in epidemiology. Helped along by this inexhaustible supply of material, he also travels the speaking circuit, promoting skepticism and nerdish curiosity with fire, wit, fast delivery and a lovable kind of exasperation. (He might even convince you that real science, sober reporting and reason are going to win in the end.)
As he writes, "If you're a journalist who misrepresents science for the sake of a headline, a politician more interested in spin than evidence, or an advertiser who loves pictures of molecules in little white coats, then beware: your days are numbered."
Ben Goldacre | Speaker | TED.com