TEDMED 2012
Ben Goldacre: What doctors don't know about the drugs they prescribe
Ben Goldacre: Was Ärzte über die Medikamente, die sie verschreiben, nicht wissen
Filmed:
Readability: 5
2,501,600 views
Wenn ein neues Medikament getestet wird, sollen die Ergebnisse der Versuche allen Medizinern zugänglich gemacht werden -- außer dass negative oder nicht eindeutige Ergebnisse meistens nicht veröffentlicht werden und so Ärzte und Forscher darüber im Unklaren gelassen werden.
In diesem leidenschaftlichen Vortrag erklärt Ben Goldacre, warum diese unveröffentlichten Fälle negativer Daten besonders irreführend und gefährlich sind.
Ben Goldacre - Debunker
Ben Goldacre unpicks dodgy scientific claims made by scaremongering journalists, dubious government reports, pharmaceutical corporations, PR companies and quacks. Full bio
Ben Goldacre unpicks dodgy scientific claims made by scaremongering journalists, dubious government reports, pharmaceutical corporations, PR companies and quacks. Full bio
Double-click the English transcript below to play the video.
00:16
Hi. So, this chap here,
0
671
2785
Hi. Dieser Kerl hier glaubt,
00:19
he thinks he can tell you the future.
1
3456
2262
er kann euch die Zukunft vorhersagen.
00:21
His name is Nostradamus, although here the Sun have
2
5718
1979
Sein Name ist Nostradamus, auch wenn ihn die Sun
00:23
made him look a little bit like Sean Connery. (Laughter)
3
7697
3670
hier eher ein bisschen wie
Sean Connery aussehen lässt.
Sean Connery aussehen lässt.
00:27
And like most of you, I suspect, I don't really believe
4
11367
2903
Und wie die meisten von euch
glaube ich nicht so wirklich,
glaube ich nicht so wirklich,
00:30
that people can see into the future.
5
14270
1108
dass Menschen in die Zukunft sehen können.
00:31
I don't believe in precognition, and every now and then,
6
15378
2704
Ich glaube nicht an die sogenannte Präkognition.
Immer wieder hört man,
Immer wieder hört man,
00:33
you hear that somebody has been able to predict something that happened in the future,
7
18082
3182
dass jemand etwas vorhersagen konnte,
was dann tatsächlich passierte.
was dann tatsächlich passierte.
00:37
and that's probably because it was a fluke, and we only
8
21264
3059
Das war dann wahrscheinlich
bloß Zufall. Aber wir hören nur
bloß Zufall. Aber wir hören nur
00:40
hear about the flukes and about the freaks.
9
24323
2615
von solchen Zufällen
und Glückstreffern.
und Glückstreffern.
00:42
We don't hear about all the times that people got stuff wrong.
10
26938
4079
Wir hören nichts von all den Fällen, in denen Leute
etwas Falsches behauptet haben.
etwas Falsches behauptet haben.
00:46
Now we expect that to happen with silly stories
11
31017
2160
Das erwarten wir bei solchen albernen Geschichten
00:49
about precognition, but the problem is,
12
33177
3139
über Zukunftsvorhersagen,
aber das Problem ist,
aber das Problem ist,
00:52
we have exactly the same problem in academia
13
36316
3344
dass wir genau das gleiche Problem in der Wissenschaft
00:55
and in medicine, and in this environment, it costs lives.
14
39660
4501
und der Medizin haben,
und dort kostet es Leben.
und dort kostet es Leben.
01:00
So firstly, thinking just about precognition, as it turns out,
15
44161
3365
Erstens, noch zum Thema Hellsehen:
01:03
just last year a researcher called Daryl Bem conducted
16
47526
2529
Erst letztes Jahr hat tatsächlich
ein Forscher namens Daryl Bem
ein Forscher namens Daryl Bem
01:05
a piece of research where he found evidence
17
50055
1836
eine Studie durchgeführt
und fand darin Hinweise
und fand darin Hinweise
01:07
of precognitive powers in undergraduate students,
18
51891
3658
auf hellseherische Fähigkeiten bei Studenten.
01:11
and this was published in a peer-reviewed academic journal
19
55549
2574
Das wurde in einer wissenschaftlichen
Fachzeitschrift veröffentlicht.
Fachzeitschrift veröffentlicht.
01:14
and most of the people who read this just said, "Okay, well,
20
58123
2281
Und die meisten Leser sagten nur: "Okay,
01:16
fair enough, but I think that's a fluke, that's a freak, because I know
21
60404
2181
gut und schön, aber ich denke,
das ist bloß Zufall, weil ich weiß,
das ist bloß Zufall, weil ich weiß,
01:18
that if I did a study where I found no evidence
22
62585
2834
dass eine Studie,
in der keine Beweise
in der keine Beweise
01:21
that undergraduate students had precognitive powers,
23
65419
2512
für hellseherische Fähigkeiten
unter Studenten gefunden wurden,
unter Studenten gefunden wurden,
01:23
it probably wouldn't get published in a journal.
24
67931
3552
wahrscheinlich nicht in einer Fachzeitschrift
veröffentlicht werden würde.
veröffentlicht werden würde.
01:27
And in fact, we know that that's true, because
25
71483
2855
Und wir wissen tatsächlich,
dass das stimmt,
dass das stimmt,
01:30
several different groups of research scientists tried
26
74338
2529
denn eine ganze Reihe
von Forschern versuchte,
von Forschern versuchte,
01:32
to replicate the findings of this precognition study,
27
76867
3520
die Ergebnisse dieser Hellseher-Studie zu wiederholen,
01:36
and when they submitted it to the exact same journal,
28
80387
2635
und als sie das bei genau
derselben Zeitschrift einreichten,
derselben Zeitschrift einreichten,
01:38
the journal said, "No, we're not interested in publishing
29
83022
3152
sagten die: "Nein, wir sind nicht an
Wiederholungsstudien interessiert.
Wiederholungsstudien interessiert.
01:42
replication. We're not interested in your negative data."
30
86174
4525
Wir wollen Ihre negativen Daten nicht."
01:46
So this is already evidence of how, in the academic
31
90699
2754
Das ist also schon ein Beweis dafür, wie wir
01:49
literature, we will see a biased sample of the true picture
32
93453
4870
in der akademischen Literatur ein schiefes Bild
01:54
of all of the scientific studies that have been conducted.
33
98323
3467
all der tatsächlich durchgeführten
wissenschaftlichen Studien sehen.
wissenschaftlichen Studien sehen.
01:57
But it doesn't just happen in the dry academic field of psychology.
34
101790
4429
Aber das passiert nicht nur im trockenen
Forschungsfeld der Psychologie.
Forschungsfeld der Psychologie.
02:02
It also happens in, for example, cancer research.
35
106219
4367
Das passiert zum Beispiel auch in der Krebsforschung.
02:06
So in March, 2012, just one month ago, some researchers
36
110586
4077
Im März 2012, vor erst einem Monat, berichteten
02:10
reported in the journal Nature how they had tried
37
114663
2896
einige Forscher in der Fachzeitschrift Nature,
wie sie versucht hatten,
wie sie versucht hatten,
02:13
to replicate 53 different basic science studies looking at
38
117559
3846
53 verschiedene grundlegende Studien zu wiederholen,
02:17
potential treatment targets in cancer,
39
121405
3555
die mögliche Behandlungsziele bei Krebs untersuchten.
02:20
and out of those 53 studies, they were only able
40
124960
2638
Von diesen 53 Studien konnten sie nur
02:23
to successfully replicate six.
41
127598
3076
sechs erfolgreich wiederholen.
02:26
Forty-seven out of those 53 were unreplicable.
42
130674
4333
47 von diesen 53 ließen sich nicht
mit denselben Ergebnissen wiederholen.
mit denselben Ergebnissen wiederholen.
02:30
And they say in their discussion that this is very likely
43
135007
3913
Und sie sagen in ihrem Fazit,
das sei auch sehr wahrscheinlich,
das sei auch sehr wahrscheinlich,
02:34
because freaks get published.
44
138920
2639
weil außergewöhnliche Ergebnisse
eben veröffentlicht werden.
eben veröffentlicht werden.
02:37
People will do lots and lots and lots of different studies,
45
141559
2096
Menschen führen sehr viele
verschiedene Studien durch
verschiedene Studien durch
02:39
and the occasions when it works they will publish,
46
143655
2120
und die, bei denen etwas
herauskommt, veröffentlichen sie,
herauskommt, veröffentlichen sie,
02:41
and the ones where it doesn't work they won't.
47
145775
1679
und die, bei denen nichts herauskommt,
veröffentlichen sie nicht.
veröffentlichen sie nicht.
02:43
And their first recommendation of how to fix this problem,
48
147454
3941
Ihre erste Empfehlung, wie man
dieses Problem lösen könnte –
dieses Problem lösen könnte –
02:47
because it is a problem, because it sends us all down blind alleys,
49
151395
3289
und es ist ein Problem,
weil es uns in die Sackgasse führt –
weil es uns in die Sackgasse führt –
02:50
their first recommendation of how to fix this problem
50
154684
1706
ihre erste Empfehlung,
dieses Problem zu lösen, ist,
dieses Problem zu lösen, ist,
02:52
is to make it easier to publish negative results in science,
51
156390
3393
die Veröffentlichung negativer
Forschungsergebnisse zu vereinfachen
Forschungsergebnisse zu vereinfachen
02:55
and to change the incentives so that scientists are
52
159783
2907
und die Anreize zu ändern,
um Wissenschaftler dazu
um Wissenschaftler dazu
02:58
encouraged to post more of their negative results in public.
53
162690
4352
zu ermutigen, der Öffentlichkeit
mehr negative Ergebnisse zu zeigen.
mehr negative Ergebnisse zu zeigen.
03:02
But it doesn't just happen in the very dry world
54
167042
3852
Aber das passiert nicht nur
in der staubtrockenen Welt
in der staubtrockenen Welt
03:06
of preclinical basic science cancer research.
55
170894
3851
der vorklinischen Grundlagenkrebsforschung.
03:10
It also happens in the very real, flesh and blood
56
174745
3657
Das passiert auch in der realen tatsächlichen
03:14
of academic medicine. So in 1980,
57
178402
3591
klinischen Forschung.
Im Jahr 1980
Im Jahr 1980
03:17
some researchers did a study on a drug called lorcainide,
58
181993
3008
führten ein paar Forscher eine Studie
zu einem Medikament namens Lorcainid durch.
zu einem Medikament namens Lorcainid durch.
03:20
and this was an anti-arrhythmic drug,
59
185001
2331
Das war ein Medikament
gegen Herzrhythmusstörungen,
gegen Herzrhythmusstörungen,
03:23
a drug that suppresses abnormal heart rhythms,
60
187332
2251
ein Medikament, das anormale
Herzrhythmen verhindert.
Herzrhythmen verhindert.
03:25
and the idea was, after people have had a heart attack,
61
189598
2228
Die Idee war, dass Menschen
nach einem Herzinfarkt
nach einem Herzinfarkt
03:27
they're quite likely to have abnormal heart rhythms,
62
191826
1537
recht wahrscheinlich
anormale Herzrhythmen haben.
anormale Herzrhythmen haben.
03:29
so if we give them a drug that suppresses abnormal heart
63
193363
2377
Wenn wir ihnen also ein Medikament geben,
das anormale Rhyhmen verhindert,
das anormale Rhyhmen verhindert,
03:31
rhythms, this will increase the chances of them surviving.
64
195740
3713
dann erhöht das ihre Überlebenschancen.
03:35
Early on its development, they did a very small trial,
65
199453
3008
Ganz früh in dieser Entwicklung
machten sie einen sehr kleinen Versuch
machten sie einen sehr kleinen Versuch
03:38
just under a hundred patients.
66
202461
1644
mit weniger als hundert Patienten.
03:40
Fifty patients got lorcainide, and of those patients, 10 died.
67
204105
3652
50 Patienten bekamen Lorcainid
und von denen starben zehn.
und von denen starben zehn.
03:43
Another 50 patients got a dummy placebo sugar pill
68
207757
3043
50 andere bekamen einen Placebo,
03:46
with no active ingredient, and only one of them died.
69
210800
2958
ein Bonbon ohne Inhaltsstoff,
und von denen starb nur einer.
und von denen starb nur einer.
03:49
So they rightly regarded this drug as a failure,
70
213758
2649
Also betrachteten sie aus guten Gründen
dieses Medikament als gescheitert
dieses Medikament als gescheitert
03:52
and its commercial development was stopped, and because
71
216407
2869
und die Entwicklung für den Markt wurde gestoppt.
03:55
its commercial development was stopped, this trial was never published.
72
219276
4348
Da die Entwicklung für den Markt gestoppt wurde,
wurde dieser Versuch nie veröffentlicht.
wurde dieser Versuch nie veröffentlicht.
03:59
Unfortunately, over the course of the next five, 10 years,
73
223624
5397
Leider hatten im Laufe der
nächsten fünf bis zehn Jahre
nächsten fünf bis zehn Jahre
04:04
other companies had the same idea about drugs that would
74
229021
3825
andere Firmen dieselbe Idee für ein Medikament,
04:08
prevent arrhythmias in people who have had heart attacks.
75
232846
2592
das Herzrhythmusstörungen bei
Herzinfarktpatienten verhindern soll.
Herzinfarktpatienten verhindern soll.
04:11
These drugs were brought to market. They were prescribed
76
235438
1720
Diese Medikamente wurden
auf den Markt gebracht. Sie wurden
auf den Markt gebracht. Sie wurden
04:13
very widely because heart attacks are a very common thing,
77
237158
3412
sehr häufig verschrieben,
weil Herzinfarkte sehr oft vorkommen.
weil Herzinfarkte sehr oft vorkommen.
04:16
and it took so long for us to find out that these drugs
78
240570
3843
Es dauerte lange, bis wir herausfanden,
dass diese Medikamente
dass diese Medikamente
04:20
also caused an increased rate of death
79
244413
2911
auch zu mehr Sterbefällen führten.
04:23
that before we detected that safety signal,
80
247324
2747
Und dass bevor wir dieses Warnsignal hörten,
04:25
over 100,000 people died unnecessarily in America
81
250071
6051
mehr als 100.000 Menschen in Amerika unnötig
04:32
from the prescription of anti-arrhythmic drugs.
82
256122
3451
durch die Verschreibung von Medikamenten
gegen Herzrhythmusstörungen starben.
gegen Herzrhythmusstörungen starben.
04:35
Now actually, in 1993,
83
259573
3598
Im Jahr 1993 veröffentlichten die Forscher,
04:39
the researchers who did that 1980 study, that early study,
84
263171
3560
die diese erste Studie von 1980 durchgeführt hatten,
04:42
published a mea culpa, an apology to the scientific community,
85
266731
3841
ein Mea Culpa, ein Schuldgeständnis
an die wissenschaftliche Gemeinschaft,
an die wissenschaftliche Gemeinschaft,
04:46
in which they said, "When we carried out our study in 1980,
86
270572
3125
und sagten: "Als wir 1980
unsere Studie durchführten,
unsere Studie durchführten,
04:49
we thought that the increased death rate that occurred
87
273697
1936
dachten wir, dass die erhöhte Sterberate
04:51
in the lorcainide group was an effect of chance."
88
275633
3358
in der Lorcainid-Gruppe
ein Zufallseffekt war."
ein Zufallseffekt war."
04:54
The development of lorcainide was abandoned for commercial reasons,
89
278991
2032
Die Entwicklung von Lorcainid wurde
aus wirtschaftlichen Gründen aufgegeben
aus wirtschaftlichen Gründen aufgegeben
04:56
and this study was never published;
90
281023
1638
und diese Studie wurde nie veröffentlicht;
04:58
it's now a good example of publication bias.
91
282661
2386
nun ist sie ein gutes Beispiel für "Publikationsbias"
05:00
That's the technical term for the phenomenon where
92
285047
1891
Das ist der Fachbegriff für das Phänomen,
05:02
unflattering data gets lost, gets unpublished, is left
93
286938
4238
dass unliebsame Daten verloren gehen,
nicht veröffentlicht werden, verschollen bleiben.
nicht veröffentlicht werden, verschollen bleiben.
05:07
missing in action, and they say the results described here
94
291176
3371
Und sie sagen, dass die Ergebnisse,
die eben beschrieben waren,
die eben beschrieben waren,
05:10
"might have provided an early warning of trouble ahead."
95
294547
4808
"vielleicht ein erstes Warnsignal
für künftige Probleme gewesen wären".
für künftige Probleme gewesen wären".
05:15
Now these are stories from basic science.
96
299355
3213
Dies sind nun Geschichten
aus der Grundlagenforschung.
aus der Grundlagenforschung.
05:18
These are stories from 20, 30 years ago.
97
302568
4787
Sie liegen 20, 30 Jahre zurück.
05:23
The academic publishing environment is very different now.
98
307355
3147
Die Welt der wissenschaftlichen Publikationen
sieht heute ganz anders aus.
sieht heute ganz anders aus.
05:26
There are academic journals like "Trials," the open access journal,
99
310502
3995
Es gibt wissenschaftliche Fachzeitschriften
wie die Open-Access-Zeitschrift "Trials",
wie die Open-Access-Zeitschrift "Trials",
05:30
which will publish any trial conducted in humans
100
314497
2655
die jeden Versuch an Menschen veröffentlicht,
05:33
regardless of whether it has a positive or a negative result.
101
317152
3303
egal ob das Ergebnis positiv oder negativ ist.
05:36
But this problem of negative results that go missing in action
102
320455
3969
Aber das Problem, dass negative
Ergebnisse verloren gehen,
Ergebnisse verloren gehen,
05:40
is still very prevalent. In fact it's so prevalent
103
324424
3559
besteht immer noch.
Es ist sogar so verbreitet,
Es ist sogar so verbreitet,
05:43
that it cuts to the core of evidence-based medicine.
104
327983
5851
dass es auch die Grundlagen
der evidenzbasierten Medizin betrifft.
der evidenzbasierten Medizin betrifft.
05:49
So this is a drug called reboxetine, and this is a drug
105
333834
3015
Es gibt ein Medikament
names Reboxetin,
ein Medikament,
names Reboxetin,
ein Medikament,
05:52
that I myself have prescribed. It's an antidepressant.
106
336849
2535
das ich selbst schon verschrieben habe,
ein Antidepressivum.
ein Antidepressivum.
05:55
And I'm a very nerdy doctor, so I read all of the studies
107
339384
2536
Ich bin ein sehr streberhafter Doktor,
also las ich alle Studien,
also las ich alle Studien,
05:57
that I could on this drug. I read the one study that was published
108
341920
3052
die ich zu diesem Medikament finden konnte.
Ich habe eine veröffentlichte Studie gelesen,
Ich habe eine veröffentlichte Studie gelesen,
06:00
that showed that reboxetine was better than placebo,
109
344972
2947
die zeigte, dass Reboxetin
besser als Placebos wirkte,
besser als Placebos wirkte,
06:03
and I read the other three studies that were published
110
347919
1864
und ich las die drei anderen veröffentlichten Studien,
06:05
that showed that reboxetine was just as good as any other antidepressant,
111
349783
3571
die zeigten, dass Reboxetin genauso gut
wie jedes andere Antodepressivum war.
wie jedes andere Antodepressivum war.
06:09
and because this patient hadn't done well on those other antidepressants,
112
353354
2187
Weil einer meiner Patienten nicht gut
auf die anderen Antidepressiva ansprach,
auf die anderen Antidepressiva ansprach,
06:11
I thought, well, reboxetine is just as good. It's one to try.
113
355541
2466
dachte ich, okay, Reboxetin ist
genauso gut. Versuchen wir's.
genauso gut. Versuchen wir's.
06:13
But it turned out that I was misled. In fact,
114
358007
3392
Aber es stellte sich heraus,
dass ich falsch lag.
dass ich falsch lag.
06:17
seven trials were conducted comparing reboxetine
115
361399
2449
Tatsächlich wurden sieben Versuche
durchgeführt, in denen Reboxetin
durchgeführt, in denen Reboxetin
06:19
against a dummy placebo sugar pill. One of them
116
363848
2712
mit einem Placebo verglichen wurde.
Eine dieser Studien
Eine dieser Studien
06:22
was positive and that was published, but six of them
117
366560
2312
war positiv und wurde veröffentlicht,
aber die sechs anderen
aber die sechs anderen
06:24
were negative and they were left unpublished.
118
368872
4048
waren negativ und blieben unveröffentlicht.
06:28
Three trials were published comparing reboxetine
119
372920
1739
Drei Versuche wurden veröffentlicht,
in denen Reboxetin
in denen Reboxetin
06:30
against other antidepressants in which reboxetine
120
374659
2226
mit anderen Antidepressiva
verglichen wurde, und in denen
verglichen wurde, und in denen
06:32
was just as good, and they were published,
121
376885
1793
es genauso gut wirkte wie die anderen.
Die wurden auch veröffentlicht.
Die wurden auch veröffentlicht.
06:34
but three times as many patients' worth of data was collected
122
378678
4389
Aber dreimal mehr Patientendaten wurden erhoben,
06:38
which showed that reboxetine was worse than
123
383067
1871
die zeigten, dass Reboxtin schlechter wirkte als
06:40
those other treatments, and those trials were not published.
124
384938
4701
diese anderen Medikamente,
und diese Versuche wurden nicht veröffentlicht.
und diese Versuche wurden nicht veröffentlicht.
06:45
I felt misled.
125
389639
3759
Ich fühlte mich getäuscht.
06:49
Now you might say, well, that's an extremely unusual example,
126
393398
2130
Nun sagen Sie vielleicht: "Naja,
das ist ein extrem ungewöhnliches Beispiel",
das ist ein extrem ungewöhnliches Beispiel",
06:51
and I wouldn't want to be guilty of the same kind of
127
395528
2008
und ich will mich nicht derselben
06:53
cherry-picking and selective referencing
128
397536
2981
Erbsenzählerei schuldig machen,
06:56
that I'm accusing other people of.
129
400517
1791
die ich an anderen kritisiere.
06:58
But it turns out that this phenomenon of publication bias
130
402308
1884
Aber es stellt sich heraus,
dass dieses Phänomen der Publikationsbias
dass dieses Phänomen der Publikationsbias
07:00
has actually been very, very well studied.
131
404192
2127
tatsächlich sehr sehr gründlich erforscht ist.
07:02
So here is one example of how you approach it.
132
406319
2218
Hier ist ein Beispiel,
wie man das macht.
wie man das macht.
07:04
The classic model is, you get a bunch of studies where
133
408537
2440
Das klassische Fall ist dieser:
Man nimmt sich einen Haufen Studien,
Man nimmt sich einen Haufen Studien,
07:06
you know that they've been conducted and completed,
134
410977
2185
von denen man weiß,
dass sie vollständig durchgeführt wurden.
dass sie vollständig durchgeführt wurden.
07:09
and then you go and see if they've been published anywhere
135
413162
2321
Dann schaut man, ob sie noch woanders
in der wissenschaftlichen Literatur
in der wissenschaftlichen Literatur
07:11
in the academic literature. So this took all of the trials
136
415483
2863
veröffentlicht wurden.
Eine dieser Untersuchungen
betrachtete alle Versuche,
Eine dieser Untersuchungen
betrachtete alle Versuche,
07:14
that had ever been conducted on antidepressants
137
418346
2154
die jemals zu Antidepressiva
durchgeführt wurden
durchgeführt wurden
07:16
that were approved over a 15-year period by the FDA.
138
420500
3642
und die über einen Zeitraum von 15 Jahren
von der FDA, der US-Arzneimittelbehörde,
zugelassen wurden.
von der FDA, der US-Arzneimittelbehörde,
zugelassen wurden.
07:20
They took all of the trials which were submitted to the FDA as part of the approval package.
139
424142
3756
Sie nahmen sich alle Versuche vor,
die im Zuge ihrer Zulassung
bei der FDA eingereicht wurden.
die im Zuge ihrer Zulassung
bei der FDA eingereicht wurden.
07:23
So that's not all of the trials that were ever conducted on these drugs,
140
427898
3200
Das sind nicht alle Versuche,
die jemals zu diesen Medikamenten
durchgeführt wurden,
die jemals zu diesen Medikamenten
durchgeführt wurden,
07:26
because we can never know if we have those,
141
431098
2098
weil wir nie wissen können,
ob die vorliegen,
ob die vorliegen,
07:29
but it is the ones that were conducted in order to get the marketing authorization.
142
433196
3494
aber wir haben die, die durchgeführt wurden,
um die Zulassung für den Markt zu bekommen.
um die Zulassung für den Markt zu bekommen.
07:32
And then they went to see if these trials had been published
143
436690
2349
Und dann schauten sie,
ob diese Versuche alle
ob diese Versuche alle
07:34
in the peer-reviewed academic literature. And this is what they found.
144
439039
2572
in der etablierten geprüften wissenschaftlichen
Literatur veröffentlicht wurden.
Und dabei fanden sie Folgendes heraus:
Literatur veröffentlicht wurden.
Und dabei fanden sie Folgendes heraus:
07:37
It was pretty much a 50-50 split. Half of these trials
145
441611
3169
Es war ungefähr 50-50.
In Wahrheit war die Hälfte
In Wahrheit war die Hälfte
07:40
were positive, half of them were negative, in reality.
146
444780
3597
dieser Versuche positiv,
die Hälfte negativ.
die Hälfte negativ.
07:44
But when they went to look for these trials in the peer-reviewed academic literature,
147
448377
4741
Aber als sie diese Versuche
in den großen Veröffentlichungen suchten,
in den großen Veröffentlichungen suchten,
07:49
what they found was a very different picture.
148
453118
2234
fanden Sie ein ganz anderes Bild vor.
07:51
Only three of the negative trials were published,
149
455352
4372
Nur drei der negativen Versuche
waren veröffentlicht worden,
waren veröffentlicht worden,
07:55
but all but one of the positive trials were published.
150
459724
4642
aber bis auf einen
alle positiven Versuche.
alle positiven Versuche.
08:00
Now if we just flick back and forth between those two,
151
464366
3761
Wenn wir jetzt zwischen
diesen beiden Darstellungen
hin und her springen,
diesen beiden Darstellungen
hin und her springen,
08:04
you can see what a staggering difference there was
152
468127
2594
sehen Sie den riesigen Unterschied
08:06
between reality and what doctors, patients,
153
470721
3450
zwischen der Realität
und dem was Ärzte, Patienten,
und dem was Ärzte, Patienten,
08:10
commissioners of health services, and academics
154
474171
2622
Verantwortliche im Gesundheitswesen
und Akademiker
und Akademiker
08:12
were able to see in the peer-reviewed academic literature.
155
476793
3281
in der Fachliteratur sehen konnten.
08:15
We were misled, and this is a systematic flaw
156
480074
4454
Wir wurden getäuscht
und dies ist ein systematischer Fehler
und dies ist ein systematischer Fehler
08:20
in the core of medicine.
157
484528
3330
mitten im Herzen der Medizin.
08:23
In fact, there have been so many studies conducted on
158
487858
2663
Tatsächlich wurden mittlerweile
so viele Studien zur
so viele Studien zur
08:26
publication bias now, over a hundred, that they've been
159
490521
3384
Publikationsbias gemacht,
über 100, dass sie inzwischen
über 100, dass sie inzwischen
08:29
collected in a systematic review, published in 2010,
160
493905
3194
in einer systematischen Übersicht gesammelt
und im Jahr 2010 veröffentlicht wurden.
und im Jahr 2010 veröffentlicht wurden.
08:32
that took every single study on publication bias
161
497099
2766
Hier ist jede einzelne Studie
über Publikationsbias erfasst,
über Publikationsbias erfasst,
08:35
that they could find.
162
499865
1299
die sie finden konnten.
08:37
Publication bias affects every field of medicine.
163
501164
2852
Publikationsbias betrifft
jeden Bereich der Medizin.
jeden Bereich der Medizin.
08:39
About half of all trials, on average, go missing in action,
164
504016
4313
Durchschnittlich etwa die Hälfte
aller Studien geht unter
aller Studien geht unter
08:44
and we know that positive findings are around twice as likely
165
508329
3058
und wir wissen,
dass positive Ergebnisse
etwa zweimal so oft
dass positive Ergebnisse
etwa zweimal so oft
08:47
to be published as negative findings.
166
511387
3054
veröffentlicht werden wie negative.
08:50
This is a cancer at the core of evidence-based medicine.
167
514441
4061
Das ist ein Geschwür inmitten der
evidenzbasierten Medizin.
evidenzbasierten Medizin.
08:54
If I flipped a coin 100 times but then
168
518502
3871
Wenn ich hundertmal
eine Münze werfe, aber dann
eine Münze werfe, aber dann
08:58
withheld the results from you from half of those tosses,
169
522373
3259
jedes zweite Ergebnis für mich behalte,
09:01
I could make it look as if I had a coin that always came up heads.
170
525632
3400
dann kann ich so tun, als lande meine Münze
immer mit dem Kopf nach oben.
immer mit dem Kopf nach oben.
09:04
But that wouldn't mean that I had a two-headed coin.
171
529032
1806
Aber das hieße nicht,
dass ich eine Münze mit Kopf
auf beiden Seiten habe.
dass ich eine Münze mit Kopf
auf beiden Seiten habe.
09:06
That would mean that I was a chancer
172
530853
1712
Sondern das hieße,
dass ich ein Hallodri bin,
dass ich ein Hallodri bin,
09:08
and you were an idiot for letting me get away with it. (Laughter)
173
532565
3114
und dass ihr Idioten seid,
weil ihr es mir durchgehen lasst.
weil ihr es mir durchgehen lasst.
09:11
But this is exactly what we blindly tolerate
174
535679
3637
Aber genau das lassen wir blind durchgehen,
09:15
in the whole of evidence-based medicine.
175
539316
3789
in der gesamten evidenzbasierten Medizin.
09:19
And to me, this is research misconduct.
176
543105
4432
Und für mich ist das
wissenschaftliches Fehlverhalten.
wissenschaftliches Fehlverhalten.
09:23
If I conducted one study and I withheld
177
547537
2743
Wenn ich eine Studie durchführe
und die Hälfte der Datenpunkte
und die Hälfte der Datenpunkte
09:26
half of the data points from that one study,
178
550280
3000
aus dieser einen Studie vorenthalten würde,
09:29
you would rightly accuse me, essentially, of research fraud.
179
553280
4707
dann würdet ihr mich zu Recht
des wissenschaftlichen Betrugs beschuldigen.
des wissenschaftlichen Betrugs beschuldigen.
09:33
And yet, for some reason, if somebody conducts
180
557987
2783
Aber wenn aus irgendeinem Grund
jemand zehn Studien durchführt,
jemand zehn Studien durchführt,
09:36
10 studies but only publishes the five that give the result that they want,
181
560770
4558
aber nur die fünf davon veröffentlicht,
die die gewünschten Ergebnisse hervorbringen,
die die gewünschten Ergebnisse hervorbringen,
09:41
we don't consider that to be research misconduct.
182
565328
2788
dann betrachten wir das nicht
als wissenschaftliches Fehlverhalten.
als wissenschaftliches Fehlverhalten.
09:44
And when that responsibility is diffused between
183
568116
2567
Und wenn diese Verantwortung
dann auch noch unter
dann auch noch unter
09:46
a whole network of researchers, academics,
184
570683
3161
einem ganzen Netzwerk
von Forschern, Akademikern,
von Forschern, Akademikern,
09:49
industry sponsors, journal editors, for some reason
185
573844
3528
Industriesponsoren, Herausgebern verteilt ist, dann
09:53
we find it more acceptable,
186
577372
1453
finden wir es irgendwie eher vertretbar.
09:54
but the effect on patients is damning.
187
578825
3675
Aber die Auswirkungen für die Patienten sind vernichtend.
09:58
And this is happening right now, today.
188
582500
5018
Und das passiert jetzt gerade, heute.
10:03
This is a drug called Tamiflu. Tamiflu is a drug
189
587518
2711
Das ist ein Medikament namens Tamiflu.
Tamiflu ist ein Medikament,
Tamiflu ist ein Medikament,
10:06
which governments around the world have spent billions
190
590229
2596
für das Regierungen auf der
ganzen Welt viele Milliarden
ganzen Welt viele Milliarden
10:08
and billions of dollars on stockpiling,
191
592825
2572
auf Vorrat ausgegeben haben.
10:11
and we've stockpiled Tamiflu in panic,
192
595397
3148
Wir haben Tamiflu in Panik gehortet,
10:14
in the belief that it will reduce the rate of complications of influenza.
193
598545
3949
im Glauben, dass es
die Häufigkeit von Komplikationen
bei Grippeerkrankungen reduziert.
die Häufigkeit von Komplikationen
bei Grippeerkrankungen reduziert.
10:18
Complications is a medical euphemism for pneumonia
194
602494
2684
Komplikationen ist
der medizinische Euphemismus
für Lungenentzündung
der medizinische Euphemismus
für Lungenentzündung
10:21
and death. (Laughter)
195
605178
4814
und Tod.
(Lachen)
(Lachen)
10:25
Now when the Cochrane systematic reviewers
196
609992
3208
Als nun die Cochrane-Gutachter
für ihre systematische Übersicht
für ihre systematische Übersicht
10:29
were trying to collect together all of the data from all
197
613200
2525
versuchten, alle Daten aus allen Versuchen
zusammen zu bekommen,
zusammen zu bekommen,
10:31
of the trials that had ever been conducted on whether Tamiflu actually did this or not,
198
615725
3648
die jemals zur Wirkung von Tamiflu
durchgeführt worden waren,
durchgeführt worden waren,
10:35
they found that several of those trials were unpublished.
199
619373
2951
fanden sie heraus,
dass einige dieser Versuche
nie veröffentlicht wurden.
dass einige dieser Versuche
nie veröffentlicht wurden.
10:38
The results were unavailable to them.
200
622324
1842
Die Ergebnisse waren ihnen nicht zugänglich.
10:40
And when they started obtaining the writeups of those trials through various different means,
201
624166
3964
Und als sie anfingen,
die Berichte zu diesen Versuchen
über viele verschiedene Wege zu bekommen,
die Berichte zu diesen Versuchen
über viele verschiedene Wege zu bekommen,
10:44
through Freedom of Information Act requests, through
202
628130
1682
durch das Gesetz über
die Auskunftspflicht
öffentlicher Einrichtungen,
die Auskunftspflicht
öffentlicher Einrichtungen,
10:45
harassing various different organizations, what they found was inconsistent.
203
629812
4809
durch Bedrängen diverser Organisationen,
waren ihre Erkenntnisse widersprüchlich.
waren ihre Erkenntnisse widersprüchlich.
10:50
And when they tried to get a hold of the clinical study reports,
204
634621
2466
Und als sie versuchten, an die
klinischen Versuchsberichte zu kommen,
klinischen Versuchsberichte zu kommen,
10:52
the 10,000-page long documents that have
205
637087
3046
diese 10.000-Seiten langen Dokumente,
10:56
the best possible rendition of the information,
206
640133
3600
die die bestmögliche Darstellung
der Informationen liefern,
der Informationen liefern,
10:59
they were told they weren't allowed to have them.
207
643733
2888
sagte man ihnen, dass sie sie
nicht einsehen dürften.
nicht einsehen dürften.
11:02
And if you want to read the full correspondence
208
646621
2683
Wenn Sie den kompletten Austausch
11:05
and the excuses and the explanations given by the drug company,
209
649304
3290
und die Entschuldigungen und Erklärungen
der Pharmafirmen lesen wollen,
der Pharmafirmen lesen wollen,
11:08
you can see that written up in this week's edition
210
652594
2717
können Sie das in der dieswöchigen Ausgabe
11:11
of PLOS Medicine.
211
655311
4367
von PLOS Medicine lesen.
11:15
And the most staggering thing of all of this, to me,
212
659678
3859
Das Erstaunlichste an all dem
ist für mich Folgendes:
ist für mich Folgendes:
11:19
is that not only is this a problem, not only do we recognize
213
663537
3299
Dies ist nicht nur ein erkennbares
und erkanntes Problem,
und erkanntes Problem,
11:22
that this is a problem, but we've had to suffer fake fixes.
214
666836
4195
sondern wir mussten bisher
mit wirkungslosen Lösungen dafür leben.
mit wirkungslosen Lösungen dafür leben.
11:26
We've had people pretend that this is a problem that's been fixed.
215
671031
3058
Wir ließen die Menschen so tun,
als sei das ein gelöstes Problem.
als sei das ein gelöstes Problem.
11:29
First of all, we had trials registers, and everybody said,
216
674089
2188
Erst hatten wir Versuchsregister
und jeder sagte:
und jeder sagte:
11:32
oh, it's okay. We'll get everyone to register their trials, they'll post the protocol,
217
676277
3603
"Oh, Problem gelöst. Wir lassen alle
ihre Versuche registrieren,
sie veröffentlichen den Bericht,
ihre Versuche registrieren,
sie veröffentlichen den Bericht,
11:35
they'll say what they're going to do before they do it,
218
679880
2024
sie sagen, was sie vorhaben,
bevor sie damit anfangen,
bevor sie damit anfangen,
11:37
and then afterwards we'll be able to check and see if all the trials which
219
681904
2121
und nachher können wir prüfen,
ob alle Versuche,
ob alle Versuche,
11:39
have been conducted and completed have been published.
220
684025
2468
die komplett durchgeführt wurden,
auch veröffentlicht wurden.
auch veröffentlicht wurden.
11:42
But people didn't bother to use those registers.
221
686493
2196
Aber niemand hatte Lust auf diese Register.
11:44
And so then the International Committee of Medical Journal Editors came along,
222
688689
2619
Also kam das Internationale Komitee der Herausgeber
medizinischer Fachzeitschriften daher
medizinischer Fachzeitschriften daher
11:47
and they said, oh, well, we will hold the line.
223
691308
1543
und sagte: "Naja, wir bleiben da weiter dran.
11:48
We won't publish any journals, we won't publish any trials,
224
692851
2633
Wir veröffentlichen in unseren Zeitschriften keine Versuche,
11:51
unless they've been registered before they began.
225
695484
2682
die nicht vorher registriert wurden."
11:54
But they didn't hold the line. In 2008, a study was conducted
226
698166
3531
Aber sie blieben nicht dran.
2008 wurde eine Studie durchgeführt,
2008 wurde eine Studie durchgeführt,
11:57
which showed that half of all of trials published by journals
227
701697
3015
die zeigte, dass die Hälfte aller Versuche,
die in Zeitschriften veröffentlicht wurden,
die in Zeitschriften veröffentlicht wurden,
12:00
edited by members of the ICMJE
228
704712
2667
die von Mitgliedern dieses Komitees,
des ICMJE, herausgegen werden,
des ICMJE, herausgegen werden,
12:03
weren't properly registered, and a quarter of them weren't registered at all.
229
707379
4813
nicht ordentlich registriert worden waren. Und dass
ein Viertel davon überhaupt nicht registriert war.
ein Viertel davon überhaupt nicht registriert war.
12:08
And then finally, the FDA Amendment Act was passed
230
712192
2801
Und dann schließlich wurde
die FDA-Gesetzesnovellierung verabschiedet –
die FDA-Gesetzesnovellierung verabschiedet –
12:10
a couple of years ago saying that everybody who conducts
231
714993
2349
vor ein paar Jahren – die besagte,
dass jeder, der einen Versuch durchführt,
dass jeder, der einen Versuch durchführt,
12:13
a trial must post the results of that trial within one year.
232
717342
3443
die Ergebnisse innerhalb
eines Jahres veröffentlichen muss.
eines Jahres veröffentlichen muss.
12:16
And in the BMJ, in the first edition of January, 2012,
233
720785
4096
Im British Medical Journal,
in der ersten Ausgabe vom Januar 2012,
in der ersten Ausgabe vom Januar 2012,
12:20
you can see a study which looks to see if people kept
234
724881
2704
können Sie eine Studie darüber lesen,
ob sich jemand an diese Regel
ob sich jemand an diese Regel
12:23
to that ruling, and it turns out that only one in five
235
727585
3719
gehalten hat, und es stellt
sich heraus, dass nur jeder fünfte
sich heraus, dass nur jeder fünfte
12:27
have done so.
236
731304
2864
das getan hat.
12:30
This is a disaster.
237
734168
3283
Das ist ein Desaster.
12:33
We cannot know the true effects of the medicines
238
737451
3564
Wir können die wahren Auswirkungen der Medikamente,
12:36
that we prescribe if we do not have access
239
741015
3216
die wir verschreiben nicht kennen,
wenn wir keinen Zugang
wenn wir keinen Zugang
12:40
to all of the information.
240
744231
3180
zu all diesen Informationen haben.
12:43
And this is not a difficult problem to fix.
241
747411
3959
Es ist nicht schwer,
dieses Problem zu lösen.
dieses Problem zu lösen.
12:47
We need to force people to publish all trials
242
751370
5128
Wir müssen die Leute dazu zwingen,
alle Versuche an Menschen
alle Versuche an Menschen
12:52
conducted in humans, including the older trials,
243
756498
2971
zu veröffentlichen, einschließlich
der älteren Versuche,
der älteren Versuche,
12:55
because the FDA Amendment Act only asks that you publish the trials conducted after 2008,
244
759469
3945
weil das FDA-Gesetz das nur
für die Versuche nach 2008 verlangt.
für die Versuche nach 2008 verlangt.
12:59
and I don't know what world it is in which we're only
245
763414
2613
Ich weiß nicht, in was für einer Welt
wir leben, in der wir nur
wir leben, in der wir nur
13:01
practicing medicine on the basis of trials that completed in the past two years.
246
766027
4456
Medizin auf der Basis von Versuchen
der letzten zwei Jahre praktizieren.
der letzten zwei Jahre praktizieren.
13:06
We need to publish all trials in humans,
247
770483
2105
Wir müssen alle Versuche an Menschen veröffentlichen,
13:08
including the older trials, for all drugs in current use,
248
772588
3074
einschließlich der älteren Versuche,
für alle Medikamente,
die zur Zeit in Gebrauch sind.
für alle Medikamente,
die zur Zeit in Gebrauch sind.
13:11
and you need to tell everyone you know
249
775662
2916
Sie sollten jedem, den Sie kennen, sagen,
13:14
that this is a problem and that it has not been fixed.
250
778578
3442
dass wir hier ein Problem haben,
das noch nicht gelöst ist.
das noch nicht gelöst ist.
13:17
Thank you very much. (Applause)
251
782020
2951
Vielen vielen Dank.
(Applaus.)
(Applaus.)
13:20
(Applause)
252
784971
3273
(Applaus.)
ABOUT THE SPEAKER
Ben Goldacre - DebunkerBen Goldacre unpicks dodgy scientific claims made by scaremongering journalists, dubious government reports, pharmaceutical corporations, PR companies and quacks.
Why you should listen
"It was the MMR story that finally made me crack," begins the Bad Science manifesto, referring to the sensationalized -- and now-refuted -- link between vaccines and autism. With that sentence Ben Goldacre fired the starting shot of a crusade waged from the pages of The Guardian from 2003 to 2011, on an addicitve Twitter feed, and in bestselling books, including Bad Science and his latest, Bad Pharma, which puts the $600 billion global pharmaceutical industry under the microscope. What he reveals is a fascinating, terrifying mess.
Goldacre was trained in medicine at Oxford and London, and works as an academic in epidemiology. Helped along by this inexhaustible supply of material, he also travels the speaking circuit, promoting skepticism and nerdish curiosity with fire, wit, fast delivery and a lovable kind of exasperation. (He might even convince you that real science, sober reporting and reason are going to win in the end.)
As he writes, "If you're a journalist who misrepresents science for the sake of a headline, a politician more interested in spin than evidence, or an advertiser who loves pictures of molecules in little white coats, then beware: your days are numbered."
Ben Goldacre | Speaker | TED.com