ABOUT THE SPEAKER
Andreas Schleicher - Education surveyor
What makes a great school system? To find out, Andreas Schleicher administers a test to compare student performance around the world.

Why you should listen

First, a few acronyms: Andreas Schleicher heads the Program for International Student Assessment (PISA) at the Organization for Economic Co-operation and Development (OECD). What it means is: He's designed a test, given to hundreds of thousands of 15-year-olds around the world (the most recent covered almost 70 nations), that offers unprecedented insight into how well national education systems are preparing their students for adult life. As The Atlantic puts it, the PISA test "measured not students’ retention of facts, but their readiness for 'knowledge worker' jobs—their ability to think critically and solve real-world problems."

The results of the PISA test, given every three years, are fed back to governments and schools so they can work on improving their ranking. And the data has inspired Schleicher to become a vocal advocate for the policy changes that, his research suggests, make for great schools.

Get Andreas Schleicher's slide deck from this talk >>

More profile about the speaker
Andreas Schleicher | Speaker | TED.com
TEDGlobal 2012

Andreas Schleicher: Use data to build better schools

安德里亞斯‧施萊歇爾 (Andreas Schleicher): 用統計資料來建立更好的學校

Filmed:
788,000 views

我們如何衡量一個學校體系成功的原因?安德里亞斯‧施萊歇爾向我們介紹 PISA 評量,這是對全球各國進行排名的評量計劃,並運用測驗資料來幫助學校改革。你可以在演講中找到自己國家的排名,並瞭解是什麼因素讓某些體系的表現較好。
- Education surveyor
What makes a great school system? To find out, Andreas Schleicher administers a test to compare student performance around the world. Full bio

Double-click the English transcript below to play the video.

00:16
Radical激進 openness透明度 is still a distant遙遠 future未來
0
595
3120
「激進式開放」仍然是遙遠的未來
00:19
in the field領域 of school學校 education教育.
1
3715
2296
在學校教育的領域裡
00:21
We have such這樣 a hard time figuring盤算 out
2
6011
1889
我們花了很多精力才瞭解到
00:23
that learning學習 is not a place地點 but an activity活動.
3
7900
4221
學習不是一個場所
而是一種活動
00:28
But I want to tell you the story故事 of PISAPISA,
4
12121
3471
我想告訴你有關
國際學生能力評量計劃 (PISA) 的故事
00:31
OECD's經合組織 test測試 to measure測量 the knowledge知識 and skills技能
5
15592
2378
它是經濟合作發展組織 (OECD) 的一項測驗
00:33
of 15-year-olds- 年的孩子 around the world世界,
6
17970
1629
衡量全球 15 歲學生的知識及技能
00:35
and it's really a story故事 of how international國際 comparisons對比
7
19599
4522
而它確實說明了這種國際層次的比較
00:40
have globalized全球化 the field領域 of education教育 that we usually平時 treat對待
8
24121
3275
得以讓我們平日當做國家內政的
00:43
as an affair事務 of domestic國內 policy政策.
9
27396
2935
教育領域進一步全球化
00:46
Look at how the world世界 looked看著 in the 1960s,
10
30331
2424
讓我們來看看 1960 年代
00:48
in terms條款 of the proportion比例 of people
11
32755
1831
世界各國的人口
00:50
who had completed完成 high school學校.
12
34586
2740
完成高中教育的比例
00:53
You can see the United聯合的 States狀態 ahead of everyone大家 else其他,
13
37326
3820
你可以看到美國傲視群雄
00:57
and much of the economic經濟 success成功 of the United聯合的 States狀態
14
41146
2713
而許多美國的經濟成就
00:59
draws on its long-standing由來已久 advantage優點
15
43859
2744
歸功於這種長久以來
01:02
as the first mover in education教育.
16
46603
2872
作為教育先驅者的優勢
01:05
But in the 1970s, some countries國家 caught抓住 up.
17
49475
3223
但在 1970 年代,一些國家急起直追
01:08
In the 1980s, the global全球 expansion擴張
18
52698
2689
到了 1980 年代
01:11
of the talent天賦 pool continued繼續.
19
55387
2596
全球的人才數量持續成長
01:13
And the world世界 didn't stop in the 1990s.
20
57983
3700
1990 年代也毫不減勢
01:17
So in the '60s, the U.S. was first.
21
61683
2024
所以美國在 60 年代是第 1 名
01:19
In the '90s, it was 13th,
22
63707
2936
到了 90 年代變成第 13 名
01:22
and not because standards標準 had fallen墮落,
23
66643
2401
這並不是因為美國的水準下降了
01:24
but because they had risen上升 so much faster更快 elsewhere別處.
24
69044
3755
而是因為其他國家迅速地追上
01:28
Korea韓國 shows節目 you what's possible可能 in education教育.
25
72799
3530
韓國讓我們看見教育的可能性
01:32
Two generations ago, Korea韓國 had the standard標準 of living活的
26
76329
2945
在兩個世代以前,韓國的生活水準
01:35
of Afghanistan阿富汗 today今天,
27
79274
2431
相當於今天的阿富汗
01:37
and was one of the lowest最低 education教育 performers表演者.
28
81705
4141
在教育方面的排名倒數
01:41
Today今天, every一切 young年輕 Korean朝鮮的 finishes飾面 high school學校.
29
85846
5552
現在每一個韓國青少年都能完成高中教育
01:47
So this tells告訴 us that, in a global全球 economy經濟,
30
91398
2976
這告訴我們在全球經濟中
01:50
it is no longer national國民 improvement起色 that's the benchmark基準 for success成功,
31
94374
4581
國家的進步不再是成功的指標
01:54
but the best最好 performing執行 education教育 systems系統 internationally國際.
32
98955
5181
擁有國際上最好的教育體系才是
02:00
The trouble麻煩 is that
33
104136
2443
問題是
02:02
measuring測量 how much time people spend in school學校
34
106579
1870
衡量學生在校的時間
02:04
or what degree they have got is not always
35
108449
2024
或他們獲得的學位
02:06
a good way of seeing眼看 what they can actually其實 do.
36
110473
5024
並非總是判斷他們實力的好方法
02:11
Look at the toxic有毒的 mix混合 of unemployed失業的 graduates畢業生 on our streets街道,
37
115497
3673
看看街上那麼多找不到工作的畢業生
02:15
while employers雇主 say they cannot不能 find the people
38
119170
2194
而雇主們卻在抱怨
02:17
with the skills技能 they need.
39
121364
3799
找不到擁有合適技能的人才
02:21
And that tells告訴 you that better degrees don't automatically自動 translate翻譯
40
125163
3664
這就說明了更高的學歷無法自動轉化為
02:24
into better skills技能 and better jobs工作 and better lives生活.
41
128827
4370
更好的技能、更好的工作以及更好的生活
02:29
So with PISAPISA, we try to change更改 this
42
133197
2609
有了 PISA,我們試著去改變這樣的情況
02:31
by measuring測量 the knowledge知識 and skills技能
43
135806
1871
讓學生的知識和技能
02:33
of people directly.
44
137677
3436
以直接的方式來衡量
02:37
And we took a very special特別 angle角度 to this.
45
141113
1898
我們採用一個非常特別的觀點
02:38
We were less interested有興趣 in whether是否 students學生們 can simply只是
46
143011
2482
我們比較不在意
02:41
reproduce複製 what they have learned學到了 in school學校,
47
145493
3101
學生是否能複製在校所學
02:44
but we wanted to test測試 whether是否 they can extrapolate推斷
48
148594
2716
我們比較想評比的是
02:47
from what they know
49
151310
1913
他們能否從所學中舉一反三
02:49
and apply應用 their knowledge知識 in novel小說 situations情況.
50
153223
3879
以及在新環境中運用他們的知識
02:53
Now, some people have criticized批評 us for this.
51
157102
2832
有些人批評這樣的方法
02:55
They say, you know, such這樣 a way of measuring測量 outcomes結果
52
159934
1947
他們說這種衡量結果的方式
02:57
is terribly可怕 unfair不公平 to people, because we test測試 students學生們
53
161881
2812
對學生極為不公平
因為我們的測驗
03:00
with problems問題 they haven't沒有 seen看到 before.
54
164693
2973
是他們從未見過的問題
03:03
But if you take that logic邏輯, you know,
55
167666
2041
但是如果你認同那樣的邏輯
03:05
you should consider考慮 life unfair不公平, because
56
169707
2928
你應該認為生活就是不公平的
03:08
the test測試 of truth真相 in life is not whether是否 we can remember記得
57
172635
3189
因為生活中對真理的測驗
並不在於
03:11
what we learned學到了 in school學校,
58
175824
1120
我們是否記得在學校學過什麼
03:12
but whether是否 we are prepared準備 for change更改,
59
176944
3321
而是在於我們是否為改變做好了準備
03:16
whether是否 we are prepared準備 for jobs工作 that haven't沒有 been created創建,
60
180265
2421
我們是否準備好去面對各種新工作
03:18
to use technologies技術 that haven't沒有 been invented發明,
61
182686
2346
去運用尚未發明的科技
03:20
to solve解決 problems問題 we just can't anticipate預料 today今天.
62
185032
4917
去解決今天無法預期的問題
03:25
And once一旦 hotly激烈 contested爭議,
63
189949
2185
經過激烈的爭論後
03:28
our way of measuring測量 outcomes結果 has actually其實 quickly很快 become成為 the standard標準.
64
192134
3437
我們衡量結果的方法
很快就成為了標準
03:31
In our latest最新 assessment評定 in 2009,
65
195571
2242
在 2009 年最新的評量中
03:33
we measured測量 74 school學校 systems系統
66
197813
3412
我們衡量了 74 個學校體系
03:37
that together一起 cover 87 percent百分 of the economy經濟.
67
201225
3587
共涵蓋了 87% 的經濟體
03:40
This chart圖表 shows節目 you the performance性能 of countries國家.
68
204812
3674
這張圖顯示了各國的得分
03:44
In red, sort分類 of below下面 OECD經合組織 average平均.
69
208486
2887
紅色是低於 OECD 平均值的
03:47
Yellow黃色 is so-so一般般, and in green綠色 are the countries國家 doing really well.
70
211373
3376
黃色是中等,而綠色是表現優秀的國家
03:50
You can see Shanghai上海, Korea韓國, Singapore新加坡 in Asia亞洲;
71
214749
4354
你們可以發現
亞洲的上海、韓國、新加坡
03:55
Finland芬蘭 in Europe歐洲;
72
219103
1690
歐洲的芬蘭
03:56
Canada加拿大 in North America美國 doing really well.
73
220793
4366
以及北美洲的加拿大
都有很好的表現
04:01
You can also see that there is a gap間隙 of almost幾乎
74
225159
2441
你們也可以看到
04:03
three and a half school學校 years年份 between之間
75
227600
2077
在上海和智利的 15 歲少年之間
04:05
15-year-olds- 年的孩子 in Shanghai上海 and 15-year-olds- 年的孩子 in Chile智利,
76
229677
3368
有幾乎 3.5 個學年的差距
04:08
and the gap間隙 grows成長 to seven school學校 years年份
77
233045
2705
而差距會擴大為 7 個學年
04:11
when you include包括 the countries國家 with really poor較差的 performance性能.
78
235750
3623
如果包含了那些表現很差的國家
04:15
There's a world世界 of difference區別 in the way in which哪一個
79
239373
2471
世界各國為年輕人面對今日經濟發展
04:17
young年輕 people are prepared準備 for today's今天的 economy經濟.
80
241844
5202
所做的準備不同
04:22
But I want to introduce介紹 a second第二 important重要 dimension尺寸
81
247046
3546
但我想要把第二個重要的特點
04:26
into this picture圖片.
82
250592
2221
加入這個現象中
04:28
Educators教育 like to talk about equity公平.
83
252813
4375
教育界人士喜歡討論公平
04:33
With PISAPISA, we wanted to measure測量 how they actually其實 deliver交付 equity公平,
84
257188
3710
我們想用 PISA 來衡量
他們究竟如何實現公平
04:36
in terms條款 of ensuring確保 that people
85
260898
2227
如何確保所有的學生
04:39
from different不同 social社會 backgrounds背景 have equal等於 chances機會.
86
263125
3440
來自不同的社會背景都擁有平等的機會
04:42
And we see that in some countries國家, the impact碰撞
87
266565
1735
我們看到在一些國家
04:44
of social社會 background背景 on learning學習 outcomes結果
88
268300
1879
社會背景對學習成果的影響
04:46
is very, very strong強大.
89
270179
1138
非常巨大
04:47
Opportunities機會 are unequally不平等 distributed分散式.
90
271317
2918
機會的分配是不平等的
04:50
A lot of potential潛在 of young年輕 children孩子 is wasted浪費.
91
274235
3615
許多有潛力的孩子們被忽略了
04:53
We see in other countries國家 that it matters事項 much less
92
277850
3068
我們看到在其他國家
04:56
into which哪一個 social社會 context上下文 you're born天生.
93
280918
3493
成長背景的影響小了許多
05:00
We all want to be there, in the upper right quadrant象限,
94
284411
2395
我們都希望自己屬於右上角的那個象限
05:02
where performance性能 is strong強大 and learning學習 opportunities機會 are equally一樣 distributed分散式.
95
286806
4496
學生表現優秀而且學習機會均等
05:07
Nobody沒有人, and no country國家, can afford給予 to be there,
96
291302
2671
沒有人也沒有任何一個國家
想要在那裡(左下角象限)
05:09
where performance性能 is poor較差的
97
293973
1381
不僅學生表現差
05:11
and there are large social社會 disparities差距.
98
295354
3345
而且社會差距過大
05:14
And then we can debate辯論, you know, is it better
99
298699
2155
然後要討論的是
(剩下的兩個象限)哪個比較好
05:16
to be there, where performance性能 is strong強大
100
300854
1799
是要屬於成績好
05:18
at the price價錢 of large disparities差距?
101
302653
2960
但社會差距大的象限?
05:21
Or do we want to focus焦點 on equity公平 and accept接受 mediocrity庸人?
102
305613
5619
還是要注重平等但接受平庸?
05:27
But actually其實, if you look at how countries國家 come out on this picture圖片,
103
311232
2982
但實際上
如果你去檢視圖上的各個國家
05:30
you see there are a lot of countries國家 that actually其實
104
314214
2743
可以發現有很多國家
05:32
are combining結合 excellence卓越 with equity公平.
105
316957
4768
能夠兼顧優秀和公平
05:37
In fact事實, one of the most important重要 lessons教訓 from this comparison對照
106
321725
2608
事實上,這個比較結果
讓我們上了重要的一課
05:40
is that you don't have to compromise妥協 equity公平
107
324333
3106
那就是無需犧牲公平
05:43
to achieve實現 excellence卓越.
108
327439
2847
來達到優秀
05:46
These countries國家 have moved移動 on from providing提供 excellence卓越
109
330286
2439
這些國家從少數人優秀
05:48
for just some to providing提供 excellence卓越 for all,
110
332725
3269
進步到所有人優秀
05:51
a very important重要 lesson.
111
335994
1972
這是一個非常重要的發現
05:53
And that also challenges挑戰 the paradigms範式 of many許多 school學校 systems系統
112
337966
4976
這也挑戰了很多學校體系的範例
05:58
that believe they are mainly主要 there to sort分類 people.
113
342942
4303
他們認為學校的存在
主要是為了把學生分類
06:03
And ever since以來 those results結果 came來了 out, policymakers政策制定者,
114
347245
2512
這些測驗結果發佈後
世界各國的政治決策者
06:05
educators教育工作者, researchers研究人員 from around the world世界
115
349757
1977
教育工作者和研究人員
06:07
have tried試著 to figure數字 out
116
351734
1361
都想試著去找出
06:08
what's behind背後 the success成功 of those systems系統.
117
353095
3430
那些體系的成功有什麼訣竅
06:12
But let's step back for a moment時刻
118
356525
1824
讓我們退一步來看
06:14
and focus焦點 on the countries國家 that actually其實 started開始 PISAPISA,
119
358349
3014
並聚焦於那些發展 PISA 的國家
06:17
and I'm giving them a colored有色 bubble泡沫 now.
120
361363
2546
我用彩色的泡泡來代表他們
06:19
And I'm making製造 the size尺寸 of the bubble泡沫
121
363909
3492
並讓泡泡的大小
06:23
proportional成比例的
122
367401
1542
按比例
06:24
to the amount of money that countries國家 spent花費 on students學生們.
123
368943
3795
反映出這些國家花費
在學生身上的金錢多寡
06:28
If money would tell you everything
124
372738
1552
如果金錢能夠說明
06:30
about the quality質量 of learning學習 outcomes結果,
125
374290
2079
學習成果的品質
06:32
you would find all the large bubbles泡泡 at the top最佳, no?
126
376369
3331
你就該看到所有的大泡泡
都在上面,不是嗎?
06:35
But that's not what you see.
127
379700
2545
但事實並非如此
06:38
Spending開支 per student學生 only explains說明 about,
128
382245
2305
對每位學生的花費
06:40
well, less than 20 percent百分
129
384550
2296
只解釋了不到 20%
06:42
of the performance性能 variation變異 among其中 countries國家,
130
386846
3518
國家之間表現差異的原因
06:46
and Luxembourg盧森堡, for example, the most expensive昂貴 system系統,
131
390364
2290
譬如,盧森堡是最昂貴的體系
06:48
doesn't do particularly尤其 well.
132
392654
2464
但並非表現最好
06:51
What you see is that two countries國家 with similar類似 spending開支
133
395118
2376
你會發現花費相近的兩個國家
06:53
achieve實現 very different不同 results結果.
134
397494
1920
結果卻非常不同
06:55
You also see -- and I think that's one of the most encouraging鼓舞人心的 findings發現 --
135
399414
4249
你也會看到──而我認為這是
一個非常鼓舞人心的發現──
06:59
that we no longer live生活 in a world世界 that is neatly整潔 divided分為
136
403663
3589
我們的世界已不再是涇渭分明
07:03
between之間 rich豐富 and well-educated受過良好教育 countries國家,
137
407252
2690
不再分成富裕且教育良好的國家
07:05
and poor較差的 and badly-educated嚴重的教育 ones那些,
138
409942
2320
以及貧窮且教育糟糕的國家
07:08
a very, very important重要 lesson.
139
412262
3595
這是非常非常重要的一課
07:11
Let's look at this in greater更大 detail詳情.
140
415857
2582
讓我們更詳細地來看
07:14
The red dot shows節目 you
141
418439
1806
紅點表示
07:16
spending開支 per student學生 relative相對的 to a country's wealth財富.
142
420245
4457
對每位學生的花費占一個國家財富的比例
07:20
One way you can spend money is by paying付款 teachers教師 well,
143
424702
2807
投入金錢的方式之一是提高教師收入
07:23
and you can see Korea韓國 investing投資 a lot
144
427509
2505
你可以看到韓國大量地投入
07:25
in attracting吸引 the best最好 people into the teaching教學 profession職業.
145
430014
3024
來吸引最優秀的人才成為專業教師
07:28
And Korea韓國 also invests投資 into long school學校 days,
146
433038
1926
韓國也投入長時間的上課天數
07:30
which哪一個 drives驅動器 up costs成本 further進一步.
147
434964
2756
進一步提高了成本
07:33
Last but not least最小, Koreans韓國人 want their teachers教師
148
437720
2140
還有,韓國希望老師們
07:35
not only to teach but also to develop發展.
149
439860
2280
除了傳授知識,還要去培養及開發
07:38
They invest投資 in professional專業的 development發展 and collaboration合作
150
442140
2335
他們投入專業的發展與合作專案
07:40
and many許多 other things.
151
444475
2080
以及其他許多項目
07:42
All that costs成本 money.
152
446555
1641
這些都要花錢
07:44
How can Korea韓國 afford給予 all of this?
153
448196
2670
韓國如何負擔這些?
07:46
The answer回答 is, students學生們 in Korea韓國 learn學習 in large classes.
154
450866
3740
答案是大班教育
07:50
This is the blue藍色 bar酒吧 which哪一個 is driving主動 costs成本 down.
155
454606
4468
就是這條藍色的圓柱使得成本下降
07:54
You go to the next下一個 country國家 on the list名單, Luxembourg盧森堡,
156
459074
2895
再來看看旁邊的盧森堡
07:57
and you can see the red dot is exactly究竟 where it is for Korea韓國,
157
461969
3103
這個紅點與韓國在一模一樣的位置
08:00
so Luxembourg盧森堡 spends the same相同 per student學生 as Korea韓國 does.
158
465072
3533
這表示盧森堡在每位學生身上的花費與韓國相當
08:04
But, you know, parents父母 and teachers教師 and policymakers政策制定者
159
468605
2894
但盧森堡的家長、教師和政策制定者
08:07
in Luxembourg盧森堡 all like small classes.
160
471499
2447
都喜歡小班教學
08:09
You know, it's very pleasant愉快 to walk步行 into a small class.
161
473946
2768
因為走進一個小班級的感覺很舒服
08:12
So they have invested投資 all their money into there,
162
476714
1904
所以他們把錢都投入在那裡
08:14
and the blue藍色 bar酒吧, class size尺寸, is driving主動 costs成本 up.
163
478618
3346
藍色的這一條,也就是班級大小
使得成本上升
08:17
But even Luxembourg盧森堡 can spend its money only once一旦,
164
481964
4161
但即使是盧森堡也無法將金錢重複使用
08:22
and the price價錢 for this is that
165
486125
2205
而代價就是
08:24
teachers教師 are not paid支付 particularly尤其 well.
166
488330
2104
教師的收入沒有特別好
08:26
Students學生們 don't have long hours小時 of learning學習.
167
490434
2679
學生的上學時間不長
08:29
And basically基本上, teachers教師 have little time to do anything else其他 than teaching教學.
168
493113
3242
基本上,老師除了教書之外
並沒有時間去做其他事情
08:32
So you can see two countries國家 spent花費 their money very differently不同,
169
496355
3681
所以你可以看到
兩個國家花錢的方式非常不一樣
08:35
and actually其實 how they spent花費 their money
170
500036
2320
而實際上他們如何用錢
08:38
matters事項 a lot more than how much they invest投資 in education教育.
171
502356
6003
比用了多少錢
對教育有更多的影響
08:44
Let's go back to the year 2000.
172
508359
2554
讓我們回到 2000 年
08:46
Remember記得, that was the year before the iPodiPod的 was invented發明.
173
510913
3995
記住,這一年 iPod 還沒有出現
08:50
This is how the world世界 looked看著 then
174
514908
2124
這是當時世界各國的樣子
08:52
in terms條款 of PISAPISA performance性能.
175
517032
4261
以 PISA 測驗結果來看
08:57
The first thing you can see is that the bubbles泡泡 were a lot smaller, no?
176
521293
2815
首先,你會注意到
所有的泡泡都小了許多,對吧?
09:00
We spent花費 a lot less on education教育,
177
524108
1631
那時我們在教育上的花費少了許多
09:01
about 35 percent百分 less on education教育.
178
525739
2072
大約少了35%
09:03
So you ask yourself你自己, if education教育 has become成為 so much more expensive昂貴,
179
527811
3745
我們自問:如果已經在教育上投入了這麼多的錢
09:07
has it become成為 so much better?
180
531556
3353
它是不是也跟著改善了許多?
09:10
And the bitter truth真相 really is that, you know,
181
534909
2999
但讓人難堪的事實是
09:13
not in many許多 countries國家.
182
537908
2445
沒有多少個國家真的如此
09:16
But there are some countries國家 which哪一個 have seen看到
183
540353
2083
不過有一些國家
09:18
impressive有聲有色 improvements改進.
184
542436
2948
已經有了不起的進步
09:21
Germany德國, my own擁有 country國家, in the year 2000,
185
545384
3796
我的母國德國,在 2000 年
09:25
featured精選 in the lower降低 quadrant象限,
186
549180
1888
屬於底下的那個象限
09:26
below下面 average平均 performance性能, large social社會 disparities差距.
187
551068
3165
成績低於平均,社會差距大
09:30
And remember記得, Germany德國, we used to be one of those countries國家
188
554233
2003
要知道,德國曾經是一個
09:32
that comes out very well when you just count計數 people who have degrees.
189
556236
3728
在擁有學位的國民數量上
名列前茅的國家
09:35
Very disappointing令人失望 results結果.
190
559964
1761
測驗結果讓人非常失望
09:37
People were stunned目瞪口呆 by the results結果.
191
561725
2737
人們感到震驚
09:40
And for the very first time, the public上市 debate辯論 in Germany德國
192
564462
3791
史無前例地,德國的公眾辯論
09:44
was dominated佔主導地位 for months個月 by education教育,
193
568253
3706
圍繞教育話題進行了數月
09:47
not tax, not other kinds of issues問題, but education教育
194
571959
2734
不是稅收,不是其他問題,而是教育
09:50
was the center中央 of the public上市 debate辯論.
195
574693
2551
成為了公眾議題的焦點
09:53
And then policymakers政策制定者 began開始 to respond響應 to this.
196
577244
3219
後來政策制定者開始做出應對
09:56
The federal聯邦 government政府 dramatically顯著 raised上調 its investment投資 in education教育.
197
580463
4230
聯邦政府大幅增加教育投資
10:00
A lot was doneDONE to increase增加 the life chances機會 of students學生們
198
584693
3629
努力提供更多機會
10:04
with an immigrant移民 background背景 or from social社會 disadvantage壞處.
199
588322
2962
給來自移民家庭或社會弱勢群體的學生
10:07
And what's really interesting有趣 is that this wasn't just about
200
591284
4508
有趣的是,這不僅是
10:11
optimizing優化 existing現有 policies政策,
201
595792
3759
使現有的體制更完善
10:15
but data數據 transformed改造 some of the beliefs信仰 and paradigms範式
202
599551
3413
同時也轉變了一些信念及範例
10:18
underlying底層 German德語 education教育.
203
602964
1787
那原本是德國教育的基礎
10:20
For example, traditionally傳統, the education教育 of the very young年輕 children孩子
204
604751
3886
譬如,幼兒教育在傳統上
10:24
was seen看到 as the business商業 of families家庭, and you would have cases
205
608637
2618
被認為是家庭的職責
而且你能看到在許多例子中
10:27
where women婦女 were seen看到 as neglecting何罪? their family家庭 responsibilities責任
206
611255
3032
當婦女把孩子送到幼稚園
10:30
when they sent發送 their children孩子 to kindergarten幼兒園.
207
614287
3088
會被視為忽視家庭職責
10:33
PISAPISA has transformed改造 that debate辯論,
208
617375
2648
PISA 轉變了這個爭論
10:35
and pushed early childhood童年 education教育 right at the center中央
209
620023
2773
並且促使幼兒早期教育成為
10:38
of public上市 policy政策 in Germany德國.
210
622796
2392
德國公眾政策的核心
10:41
Or traditionally傳統, the German德語 education教育 divides分歧 children孩子
211
625188
3701
還有,傳統上德國的教育
10:44
at the age年齡 of 10, very young年輕 children孩子,
212
628889
2748
把 10 歲的小孩,很小的年紀
10:47
between之間 those deemed認為 to pursue追求 careers職業生涯 of knowledge知識 workers工人
213
631637
4189
區分為將來會成為知識工作者的人
10:51
and those who would end結束 up working加工 for the knowledge知識 workers工人,
214
635826
3350
以及將來為知識工作者工作的人
10:55
and that mainly主要 along沿 socioeconomic社會經濟 lines,
215
639176
2476
這樣的區分主要是依循社會經濟的路線
10:57
and that paradigm範例 is being存在 challenged挑戰 now too.
216
641652
4168
而這種典範現在也遇到了挑戰
11:01
A lot of change更改.
217
645820
2484
發生了許多改變
11:04
And the good news新聞 is, nine years年份 later後來,
218
648304
2954
好消息是,九年之後
11:07
you can see improvements改進 in quality質量 and equity公平.
219
651258
3099
你們可以看到品質和公平都有所改善
11:10
People have taken採取 up the challenge挑戰, doneDONE something about it.
220
654357
2276
人們接受了挑戰並採取行動
11:12
Or take Korea韓國, at the other end結束 of the spectrum光譜.
221
656633
2128
再來看看屬於最高象限的韓國
11:14
In the year 2000, Korea韓國 did already已經 very well,
222
658761
2545
在 2000 年,韓國已經有很好的表現
11:17
but the Koreans韓國人 were concerned關心 that only a small share分享
223
661306
3325
但韓國人擔心,只有小部分的學生
11:20
of their students學生們 achieved實現 the really high levels水平 of excellence卓越.
224
664631
4359
達到非常優異的成績
11:24
They took up the challenge挑戰,
225
668990
1814
他們接受了挑戰
11:26
and Korea韓國 was able能夠 to double the proportion比例 of students學生們
226
670804
3534
並在十年內讓閱讀表現優秀的學生
11:30
achieving實現 excellence卓越 in one decade in the field領域 of reading.
227
674338
4402
比例增加了一倍
11:34
Well, if you only focus焦點 on your brightest students學生們,
228
678740
2553
如果你只集中於培養最聰明的學生
11:37
you know what happens發生 is disparities差距 grow增長,
229
681293
1919
你知道這會造成社會差距擴大
11:39
and you can see this bubble泡沫 moving移動 slightly to the other direction方向,
230
683212
3800
你會看到泡泡稍微朝另一個方向移動
11:42
but still, an impressive有聲有色 improvement起色.
231
687012
2711
不過這仍是很好的改進
11:45
A major重大的 overhaul翻修 of Poland's波蘭 education教育
232
689723
2586
一項對波蘭教育的重大檢討
11:48
helped幫助 to dramatically顯著 reduce減少 between之間 variability變化性 among其中 schools學校,
233
692309
3633
協助大幅降低了學校之間的差異
11:51
turn around many許多 of the lowest-performing最低表演 schools學校,
234
695942
2694
徹底改變了許多表現差的學校
11:54
and raise提高 performance性能 by over half a school學校 year.
235
698636
4834
成績提高超過半個學年
11:59
And you can see other countries國家 as well.
236
703470
1791
其他國家也是
12:01
Portugal葡萄牙 was able能夠 to consolidate鞏固 its fragmented支離破碎 school學校 system系統,
237
705261
2943
葡萄牙得以整合七零八落的學校體制
12:04
raise提高 quality質量 and improve提高 equity公平,
238
708204
2992
提升品質並增進公平
12:07
and so did Hungary匈牙利.
239
711196
1876
匈牙利也是如此
12:08
So what you can actually其實 see, there's been a lot of change更改.
240
713072
3431
所以確實可以看到很多的改變
12:12
And even those people who complain抱怨 and say that
241
716503
2933
甚至那些抱怨說
12:15
the relative相對的 standing常設 of countries國家
242
719436
1689
國家之間的排名高低
12:17
on something like PISAPISA is just an artifact神器 of culture文化,
243
721125
3422
譬如 PISA 測驗結果
不過是一種人工產物,來自於文化
12:20
of economic經濟 factors因素, of social社會 issues問題,
244
724547
3042
經濟因素、社會問題
12:23
of homogeneity同質化 of societies社會, and so on,
245
727589
3062
社會均一性等因素
12:26
these people must必須 now concede承認 that education教育 improvement起色 is possible可能.
246
730651
4842
這些人現在必須承認教育改革是可能的
12:31
You know, Poland波蘭 hasn't有沒有 changed its culture文化.
247
735493
3040
大家知道,波蘭並沒有改變它的文化
12:34
It didn't change更改 its economy經濟. It didn't change更改
248
738533
2504
也沒有改變它的經濟
12:36
the compositions成分 of its population人口.
249
741037
2092
也沒有改變它的人口結構
12:39
It didn't fire its teachers教師. It changed its education教育 policies政策
250
743129
2854
他們沒有開除教師
而是改變了教育政策
12:41
and practice實踐. Very impressive有聲有色.
251
745983
2640
和教育實務,非常了不起
12:44
And all that raises加薪, of course課程, the question: What can we learn學習
252
748623
2965
所有這些產生了一個問題:
12:47
from those countries國家 in the green綠色 quadrant象限
253
751588
2104
我們能從綠色象限的國家中學到什麼?
12:49
who have achieved實現 high levels水平 of equity公平,
254
753692
2275
這些國家創造了高水準的平等
12:51
high levels水平 of performance性能, and raised上調 outcomes結果?
255
755967
3732
優秀的表現,並且提升了成果
12:55
And, of course課程, the question is, can what works作品 in one context上下文
256
759699
3914
當然,問題在於:在某個國家的成功經驗
12:59
provide提供 a model模型 elsewhere別處?
257
763613
2716
能否複製於另一個國家?
13:02
Of course課程, you can't copy複製 and paste education教育 systems系統 wholesale批發,
258
766329
3330
當然的,你不能複製整個教育體系
13:05
but these comparisons對比 have identified確定 a range範圍 of factors因素
259
769659
3927
但這些比較結果辨識出了一些要素
13:09
that high-performing高性能 systems系統 share分享.
260
773586
3321
是表現優異的體系共同擁有的
13:12
Everybody每個人 agrees同意 that education教育 is important重要.
261
776907
2560
每個人都認同教育是重要的
13:15
Everybody每個人 says that.
262
779467
1987
每個人都這麼說
13:17
But the test測試 of truth真相 is, how do you weigh稱重 that priority優先
263
781454
3255
但事實上這個評量顯示出:
如何去衡量教育和其他事務
13:20
against反對 other priorities優先?
264
784709
2296
的先後順序?
13:22
How do countries國家 pay工資 their teachers教師
265
787005
2013
國家付給老師的薪水
13:24
relative相對的 to other highly高度 skilled技能的 workers工人?
266
789018
3105
如何和其他高技術勞工比較?
13:28
Would you want your child兒童 to become成為 a teacher老師
267
792123
2485
父母希望孩子當老師
13:30
rather than a lawyer律師?
268
794608
2112
還是做律師?
13:32
How do the media媒體 talk about schools學校 and teachers教師?
269
796720
2002
媒體上是怎麼談論學校和教師的?
13:34
Those are the critical危急 questions問題, and what we have learned學到了
270
798722
2505
這些都是至關重要的問題
13:37
from PISAPISA is that, in high-performing高性能 education教育 systems系統,
271
801227
4094
而我們從 PISA 學到
在高績效的教育體系中
13:41
the leaders領導者 have convinced相信 their citizens公民 to make choices選擇
272
805321
3550
領導者讓市民相信並選擇
13:44
that value education教育, their future未來,
273
808871
2378
要重視教育、重視未來
13:47
more than consumption消費 today今天.
274
811249
2672
更甚於今天的消費
13:49
And you know what's interesting有趣? You won't慣於 believe it,
275
813921
2046
有趣的是,你可能不會相信
13:51
but there are countries國家 in which哪一個 the most attractive有吸引力 place地點
276
815967
2986
有些國家最吸引人的地方
13:54
to be is not the shopping購物 center中央 but the school學校.
277
818953
2920
並不是購物中心,而是學校
13:57
Those things really exist存在.
278
821873
2267
這樣的事情真的存在
14:00
But placing配售 a high value on education教育
279
824140
1973
但只重視教育
14:02
is just part部分 of the picture圖片.
280
826113
2851
還不夠
14:04
The other part部分 is the belief信仰 that all children孩子
281
828964
3029
另外還要相信所有的孩子
14:07
are capable of success成功.
282
831993
3435
都能成功
14:11
You have some countries國家 where students學生們
283
835428
1761
有些國家的學生
14:13
are segregated隔離 early in their ages年齡.
284
837189
2239
從小就被分班了
14:15
You know, students學生們 are divided分為 up,
285
839428
2046
學生被區隔
14:17
reflecting反映 the belief信仰 that only some children孩子
286
841474
2335
反映出人們相信只有某些孩子
14:19
can achieve實現 world-class世界級 standards標準.
287
843809
3552
能達到世界級的水準
14:23
But usually平時 that is linked關聯 to very strong強大 social社會 disparities差距.
288
847361
4055
而這通常和很嚴重的社會不平等有關
14:27
If you go to Japan日本 in Asia亞洲, or Finland芬蘭 in Europe歐洲,
289
851416
3384
如果你去亞洲的日本,或歐洲的芬蘭
14:30
parents父母 and teachers教師 in those countries國家
290
854800
2106
這些國家的父母和教師
14:32
expect期望 every一切 student學生 to succeed成功,
291
856906
3911
希望每個孩子都能成材
14:36
and you can see that actually其實 mirrored鏡像 in student學生 behavior行為.
292
860817
3492
你會發現這種信念
真的會投射在學生的行為上
14:40
When we asked students學生們 what counts計數
293
864309
2716
當我們問學生們
14:42
for success成功 in mathematics數學,
294
867025
2736
要怎麼學好數學
14:45
students學生們 in North America美國 would typically一般 tell us,
295
869761
2392
北美的學生通常回答
14:48
you know, it's all about talent天賦.
296
872153
1546
這跟天賦有關
14:49
If I'm not born天生 as a genius天才 in math數學, I'd better study研究 something else其他.
297
873699
4626
如果我生下來就不是數學天才
那麼我最好去學別的科目
14:54
Nine out of 10 Japanese日本 students學生們 say
298
878325
2726
而日本學生 10 個裡面有 9 個會回答
14:56
that it depends依靠 on my own擁有 investment投資, on my own擁有 effort功夫,
299
881051
4246
要靠我自己的投入,我自己的努力
15:01
and that tells告訴 you a lot about the system系統 that is around them.
300
885297
4735
這說明了很多有關他們所處的體系
15:05
In the past過去, different不同 students學生們 were taught in similar類似 ways方法.
301
890032
4809
在過去,不同的學生接受相似的教學方法
15:10
High performers表演者 on PISAPISA embrace擁抱 diversity多樣
302
894841
3332
PISA 得分高的國家接受多樣性
15:14
with differentiated分化 pedagogical教學 practices做法.
303
898173
3748
採用差異化的教學方法
15:17
They realize實現 that
304
901921
1976
他們知道
15:19
ordinary普通 students學生們 have extraordinary非凡 talents人才,
305
903897
3144
平凡的學生有非凡的才能
15:22
and they personalize個性化 learning學習 opportunities機會.
306
907041
3360
他們讓學習機會因人而異
15:26
High-performing高性能 systems系統 also share分享
307
910401
2036
高績效系統也都擁有
15:28
clear明確 and ambitious有雄心 standards標準 across橫過 the entire整個 spectrum光譜.
308
912437
3606
明確且雄心勃勃的全方位標準
15:31
Every一切 student學生 knows知道 what matters事項.
309
916043
2202
每一個學生都知道什麼才是最重要的
15:34
Every一切 student學生 knows知道 what's required需要 to be successful成功.
310
918245
4087
每一個學生都知道成功需要什麼
15:38
And nowhere無處 does the quality質量 of an education教育 system系統
311
922332
2865
而教育系統的品質
15:41
exceed超過 the quality質量 of its teachers教師.
312
925197
2443
取決於系統中教師的品質
15:43
High-performing高性能 systems系統 are very careful小心
313
927640
3068
高績效系統非常注重
15:46
in how they recruit and select選擇 their teachers教師
314
930708
2134
教師的招聘和挑選
15:48
and how they train培養 them.
315
932842
1721
以及培訓教師的方法
15:50
They watch how they improve提高 the performances演出 of teachers教師
316
934563
2830
他們注重如何去改善
15:53
in difficulties困難 who are struggling奮鬥的,
317
937393
2320
那些有困難的老師的績效
15:55
and how they structure結構體 teacher老師 pay工資.
318
939713
2909
以及如何規劃教師的薪水
15:58
They provide提供 an environment環境 also in which哪一個 teachers教師 work together一起
319
942622
3696
他們也提供一個環境讓教師共同合作
16:02
to frame good practice實踐.
320
946318
3557
開發優良的教學方式
16:05
And they provide提供 intelligent智能 pathways途徑 for teachers教師 to grow增長
321
949875
4161
他們為教師提供深造的途徑
16:09
in their careers職業生涯.
322
954036
2115
讓他們能在職業上發展
16:12
In bureaucratic官僚主義 school學校 systems系統,
323
956151
1624
在官僚作風的學校體系中
16:13
teachers教師 are often經常 left alone單獨 in classrooms教室
324
957775
1993
教師總是獨自一人在教室裡
16:15
with a lot of prescription處方 on what they should be teaching教學.
325
959768
3167
照本宣科
16:18
High-performing高性能 systems系統 are very clear明確 what good performance性能 is.
326
962935
3210
而高績效系統非常清楚好的績效是什麼
16:22
They set very ambitious有雄心 standards標準, but then they enable啟用
327
966145
2774
他們訂立了野心勃勃的標準
16:24
their teachers教師 to figure數字 out,
328
968919
1777
但同時也讓教師自由發揮
16:26
what do I need to teach to my students學生們 today今天?
329
970696
4115
──今天我要教些什麼給學生?
16:30
The past過去 was about delivered交付 wisdom智慧 in education教育.
330
974811
4546
過去的教育是在傳承智慧
16:35
Now the challenge挑戰 is to enable啟用 user-generated用戶生成的 wisdom智慧.
331
979357
5242
現在的挑戰是要讓需要的人產生智慧
16:40
High performers表演者 have moved移動 on from professional專業的
332
984599
3640
高績效系統已經不是
16:44
or from administrative行政的 forms形式 of accountability問責 and control控制 --
333
988239
3664
責任和控制的專業或管理模式
16:47
sort分類 of, how do you check whether是否 people do what they're supposed應該 to do in education教育 --
334
991903
3237
──也就是,如何去檢查
學生是否有做功課──
16:51
to professional專業的 forms形式 of work organization組織.
335
995140
3666
它們已轉變成工作組織的專業模式
16:54
They enable啟用 their teachers教師 to make innovations創新 in pedagogy教育學.
336
998806
3872
他們鼓勵教師在教學方式上推陳出新
16:58
They provide提供 them with the kind of development發展 they need
337
1002678
2490
為教師提供所需的進修
17:01
to develop發展 stronger pedagogical教學 practices做法.
338
1005168
4062
來發展更優秀的教學方法
17:05
The goal目標 of the past過去 was standardization標準化 and compliance合規.
339
1009230
5658
過去的目標是標準化和循規蹈矩
17:10
High-performing高性能 systems系統 have made製作 teachers教師
340
1014888
2734
高績效系統讓教師們
17:13
and school學校 principals校長 inventive發明的.
341
1017622
3286
和校長們勇於創新
17:16
In the past過去, the policy政策 focus焦點 was on outcomes結果,
342
1020908
2699
在過去,政策著重於結果
17:19
on provision規定.
343
1023607
2182
和規章制度
17:21
The high-performing高性能 systems系統 have helped幫助 teachers教師
344
1025789
2803
高績效系統幫助教師
17:24
and school學校 principals校長 to look outwards向外 to the next下一個 teacher老師,
345
1028592
2441
和校長放眼教師的未來
17:26
the next下一個 school學校 around their lives生活.
346
1031033
2693
和學校的未來
17:29
And the most impressive有聲有色 outcomes結果 of world-class世界級 systems系統
347
1033726
2166
世界級水準系統最了不起的成果在於
17:31
is that they achieve實現 high performance性能 across橫過 the entire整個 system系統.
348
1035892
3147
它能達成體系內全方面的優良表現
17:34
You've seen看到 Finland芬蘭 doing so well on PISAPISA,
349
1039039
2197
芬蘭的 PISA 結果非常好
17:37
but what makes品牌 Finland芬蘭 so impressive有聲有色
350
1041236
1690
原因在於
17:38
is that only five percent百分 of the performance性能 variation變異
351
1042926
3977
學校之間
只有 5% 的得分差異
17:42
amongst其中包括 students學生們 lies between之間 schools學校.
352
1046903
2456
17:45
Every一切 school學校 succeeds成功.
353
1049359
2316
每一間學校都成功了
17:47
This is where success成功 is systemic系統的.
354
1051675
2731
這種成功是系統性的
17:50
And how do they do that?
355
1054406
1704
他們如何做到的?
17:52
They invest投資 resources資源 where they can make the most difference區別.
356
1056110
2692
他們把資源投入到最能產生效益的地方
17:54
They attract吸引 the strongest最強 principals校長 into the toughest最艱難的 schools學校,
357
1058802
5108
他們吸引最優秀的校長去最棘手的學校
17:59
and the most talented天才 teachers教師
358
1063910
2208
吸引最優秀的教師
18:02
into the most challenging具有挑戰性的 classroom課堂.
359
1066118
1943
去最有挑戰的班級
18:03
Last but not least最小, those countries國家 align對齊 policies政策
360
1068061
3129
除此之外,這些國家綜合考量
18:07
across橫過 all areas of public上市 policy政策.
361
1071190
2220
所有的公共政策
18:09
They make them coherent相干 over sustained持續 periods of time,
362
1073410
3133
他們讓政策長久地維持協調一致
18:12
and they ensure確保 that what they do is consistently始終如一 implemented實施.
363
1076543
4703
還要確保執行上的一致性
18:17
Now, knowing會心 what successful成功 systems系統 are doing
364
1081246
2304
知道成功的體系如何成功
還不能告訴我們
如何去改善(自己的體系)
18:19
doesn't yet然而 tell us how to improve提高.
365
1083550
2791
18:22
That's also clear明確, and that's where some of the limits範圍
366
1086341
2458
這很明顯,而這些限制
18:24
of international國際 comparisons對比 of PISAPISA are.
367
1088799
3475
存在於 PISA 的國際比較裡
18:28
That's where other forms形式 of research研究 need to kick in,
368
1092274
2703
這裡需要其他形式的研究介入
18:30
and that's also why PISAPISA doesn't venture冒險 into
369
1094977
2458
這也是為什麼 PISA 沒有冒昧去
18:33
telling告訴 countries國家 what they should be doing.
370
1097435
1760
告訴各個國家應該怎麼做
18:35
But its strength強度 lies in telling告訴 them
371
1099195
1823
但 PISA 的優點在於告訴大家
18:36
what everybody每個人 else其他 has been doing.
372
1101018
2755
別人都在做什麼
18:39
And the example of PISAPISA shows節目 that data數據
373
1103773
2196
PISA 的例子說明了
18:41
can be more powerful強大 than administrative行政的 control控制 of financial金融 subsidy補貼
374
1105969
3318
資料比財務補貼的行政控制還要有效
18:45
through通過 which哪一個 we usually平時 run education教育 systems系統.
375
1109287
3941
後者是我們平常管理教育系統的方式
18:49
You know, some people argue爭論 that
376
1113228
3038
有些人提出
18:52
changing改變 educational教育性 administration行政
377
1116266
2188
教育管理的改革
18:54
is like moving移動 graveyards墓地.
378
1118454
2441
就像遷墳
18:56
You just can't rely依靠 on the people out there to help you with this. (Laughter笑聲)
379
1120895
4887
你無法依賴墳墓裡的人來幫你
(笑聲)
19:01
But PISAPISA has shown顯示 what's possible可能 in education教育.
380
1125782
4867
但是 PISA 指出了教育的可能性
19:06
It has helped幫助 countries國家 to see that improvement起色 is possible可能.
381
1130649
3805
它幫助國家瞭解了進步是可能的
19:10
It has taken採取 away excuses藉口 from those who are complacent自滿.
382
1134454
4208
那些故步自封的人不能再找藉口了
19:14
And it has helped幫助 countries國家 to set meaningful富有意義的 targets目標
383
1138662
3433
它協助國家訂立有意義的目標
19:17
in terms條款 of measurable可測量 goals目標 achieved實現 by the world's世界 leaders領導者.
384
1142095
3098
依據領先國家已達到的可衡量目標
19:21
If we can help every一切 child兒童, every一切 teacher老師, every一切 school學校,
385
1145193
4550
如果我們能夠幫助每一個孩子
每一位教師、每一所學校
19:25
every一切 principal主要, every一切 parent see what improvement起色 is possible可能,
386
1149743
3655
每一位校長、每一位父母
都瞭解進步的可能性
19:29
that only the sky天空 is the limit限制 to education教育 improvement起色,
387
1153398
2736
那麼教育改革的前景就無可限量
19:32
we have laid鋪設 the foundations基金會
388
1156134
1896
我們已建立了基礎
19:33
for better policies政策 and better lives生活.
389
1158030
2183
為更好的政策和更好的生活
19:36
Thank you.
390
1160213
2533
謝謝大家
19:38
(Applause掌聲)
391
1162746
4000
(掌聲)
Translated by Rowena Weng
Reviewed by Marssi Draw

▲Back to top

ABOUT THE SPEAKER
Andreas Schleicher - Education surveyor
What makes a great school system? To find out, Andreas Schleicher administers a test to compare student performance around the world.

Why you should listen

First, a few acronyms: Andreas Schleicher heads the Program for International Student Assessment (PISA) at the Organization for Economic Co-operation and Development (OECD). What it means is: He's designed a test, given to hundreds of thousands of 15-year-olds around the world (the most recent covered almost 70 nations), that offers unprecedented insight into how well national education systems are preparing their students for adult life. As The Atlantic puts it, the PISA test "measured not students’ retention of facts, but their readiness for 'knowledge worker' jobs—their ability to think critically and solve real-world problems."

The results of the PISA test, given every three years, are fed back to governments and schools so they can work on improving their ranking. And the data has inspired Schleicher to become a vocal advocate for the policy changes that, his research suggests, make for great schools.

Get Andreas Schleicher's slide deck from this talk >>

More profile about the speaker
Andreas Schleicher | Speaker | TED.com

Data provided by TED.

This site was created in May 2015 and the last update was on January 12, 2020. It will no longer be updated.

We are currently creating a new site called "eng.lish.video" and would be grateful if you could access it.

If you have any questions or suggestions, please feel free to write comments in your language on the contact form.

Privacy Policy

Developer's Blog

Buy Me A Coffee