1
PISA 2003
Schul-Feed-back für die
Ecole européenne de Luxembourg
Präsentation: 2. 12. 2005 Pädagogischer Tag
2
PISA-THE FOUR FACETS
1. Reading Literacy2. Mathematical Literacy3. Scientific Literacy4. Problem Solving (new 2003)
Program for
International
Student
Assessment
3
Reading
• 1. Form of material (continuous or not, diagrams, narrative, exposition, argument..)
• 2. Type of reading task (retrieving information, understanding, interpreting, reflecting on content and form…)
• 3. Use of text (context, style, target audience…)
4
Mathematics
• 1. Space and Shape• 2. Change and relationships (variables,
relations, equations…)• 3. Quantity• 4. Uncertainty• A)Reproduction skills (of knowledge and
processes)• B)Connection skills (links and interpretations)• C) Reflection skills (insight, creativity…)
5
SCIENCE
• 1. Scientific concepts (applied to real life problems: Life and health, earth and environment, technology)
• 2. Scientific process (recognise scientific questions, identify evidence, draw conclusions, communicate, understand)
• 3. Scientific situations in everyday life (personal or global)
6
PROBLEM SOLVING
• 1. Analyse a situation.
• 2. Make decisions.
• 3. Manage multiple conditions simultaneously.
• 4. Consider underlying relationships and solve problems.
• 5. Check and communicate the result.
7
A mathematics question
8
A Science question
9
10
PISA - Schülerleistungen
• Mittelwerte nach Testbereich
Mathematische Grundbildung
Lese-kompetenz
Naturwissen-schaftliche
Grundbildung
Problem-lösen
EE-L1 574 * 547 576 * 574 *
EE-L2 571 529 554 567
Lux (ES) 556 549 552 555
Lux (EST) 465 452 453 467
* signifikant höher [EE-L1 vs. Lux (ES)]
11
PISA - Schülerleistungen
• Verteilung auf Kompetenzstufen (Mathe)
8
7
0
0
0
20
2
3
2
21
32
12
9
10
24
26
31
21
27
19
11
33
34
26
11
3
18
25
23
4
0
5
8
13
13
0 10 20 30 40 50 60 70 80 90 100
OECD
Lux-EST
Lux-ES
EE-L2
EE-L1
per cent
below level 1 level 1 level 2 level 3 level 4 level 5 level 6
12
PISA - Schülerleistungen
• Verteilung auf Kompetenzstufen (Lesen)
7
8
0
2
1
20
2
4
3
23
34
14
15
13
29
28
35
40
34
21
9
37
32
34
8
1
12
7
14
12
0 10 20 30 40 50 60 70 80 90 100
OECD
Lux-EST
Lux-ES
EE-L2
EE-L1
per cent
below level 1 level 1 level 2 level 3 level 4 level 5
13
PISA - Schülerleistungen
• Verteilung auf Leistungsbereiche (Science)
below 400 points
17,9
26,8
3,6
2,3
2,2
0 5 10 15 20 25 30
OECD
Lux-EST
EE-L2
Lux-ES
EE-L1
per cent
14
PISA - Schülerleistungen
• Verteilung auf Leistungsbereiche (Science)
above 600 points
17,6
4
25,4
30,7
39,3
0 10 20 30 40 50
OECD
Lux-EST
Lux-ES
EE-L2
EE-L1
per cent
15
PISA - Merkmalsprofil
• bezogen auf das Fach Mathematik
-0,8
-0,6
-0,4
-0,2
0
0,2
0,4
0,6
Inte
rest
Inst
rum
en
tal
mo
tiva
tion
Co
mp
etit
ive
Le
arn
ing
An
xie
ty
Se
lf-co
nce
pt
Se
lf-e
ffic
acy
Ela
bo
ratio
n
Me
mo
risa
tion
Co
ntr
ol
Motivation Emotion Self-confidence Learning strategies
European School
Luxembourg ES
0: O
EC
D- a
vera
g e, -
1 to
1 : o
n e s
tand
ard
devi
atio
n
16
PISA - Merkmalsprofil
• bezogen auf das Fach Mathematik
-0,6
-0,5
-0,4
-0,3
-0,2
-0,1
0
0,1
0,2
0,3
0,4
Inte
rest
Inst
rum
en
tal
mo
tiva
tion
Co
mp
etit
ive
Le
arn
ing
An
xie
ty
Se
lf-co
nce
pt
Se
lf-e
ffic
acy
Ela
bo
ratio
n
Me
mo
risa
tion
Co
ntr
ol
Motivation Emotion Self-confidence Learning strategies
European School
Finland
0: O
EC
D- a
vera
g e, -
1 to
1 : o
n e s
tand
ard
devi
atio
n
17
PISA - Schulmerkmale
-0,8
-0,6
-0,4
-0,2
0
0,2
0,4
Disciplinaryclimate
Teacher support attitudes towardsschool
sense ofbelonging to
school
student-teacherrelations
classroom climate in math lessons school climate
European School Luxembourg ES
18
PISA - Schulmerkmale
-0,6
-0,5
-0,4
-0,3
-0,2
-0,1
0
0,1
0,2
0,3
Disciplinary clim ate Teacher support attitudes towardsschool
sense of belonging toschool
s tudent-teacherrelations
classroom clim ate in m ath lessons school clim ate
European School Finland
19
PISA 2003 - Ergebnisse1
2
3
4
5
6
7
8
9
10
11
12
13
Hong Kong-China
Finnland
Korea
Niederlande
Liechtenstein
Japan
Kanada
Belgien
Macao-China
Schweiz
Australien
Neuseeland
Tschechische Republik
550
544
542
538
536
534
532
529
527
527
524
523
516
14
15
16
17
18
19
20
21
22
23
24
25
26
Island
Dänemark
Frankreich
Schweden
Österreich
Deutschland
Irland
OECD
Slowakei
Norwegen
Luxemburg
Polen
Ungarn
Spanien
515
514
511
509
506
503
503
500
498
495
493
490
490
485
27
28
29
30
31
32
33
34
35
36
37
38
39
40
Lettland
USA
Russland
Portugal
Italien
Griechenland
Serbien
Türkei
Uruguay
Thailand
Mexiko
Indonesien
Tunesien
Brasilien
483
483
468
466
466
445
437
423
422
417
385
360
359
356
• Schwerpunkt „mathematische Grundbildung“
EE – L1: 574 De 563 EE – L2: 571 De 584 En 600 En 567 Fr 562 Fr 573
20
PISA 2003 - Ergebnisse
1
2
3
4
5
6
7
8
9
10
11
12
13
14
Finnland
Korea
Kanada
Australien
Liechtenstein
Neuseeland
Irland
Schweden
Niederlande
Hong Kong-China
Belgien
Norwegen
Schweiz
Japan
543
534
528
525
525
522
515
514
513
510
507
500
499
498
15
16
17
18
19
20
21
22
23
24
25
26
Macao-China
Polen
Frankreich
USA
OECD
Dänemark
Island
Deutschland
Österreich
Lettland
Tschechische Republik
Ungarn
Spanien
498
497
496
495
494
492
492
491
491
491
489
482
481
27
28
29
30
31
32
33
34
35
36
37
38
39
40
Luxemburg
Portugal
Italien
Griechenland
Slowakei
Russland
Türkei
Uruguay
Thailand
Serbien
Brasilien
Mexiko
Indonesien
Tunesien
479
478
476
472
469
442
441
434
420
412
403
400
382
375
• Nebenkomponente „Lesekompetenz“
EE – L1: 547 De 546 EE – L2:529 De 547 En 572 En 519 Fr 532 Fr 533
21
PISA 2003 - Ergebnisse• Nebenbereich „naturwissenschaftliche Grundbildung“
1
2
3
4
5
6
7
8
9
10
11
12
13
Finnland
Japan
Hong Kong-China
Korea
Liechtenstein
Australien
Macao-China
Niederlande
Tschechische Republik
Neuseeland
Kanada
Schweiz
Frankreich
548
548
539
538
525
525
525
524
523
521
519
513
511
14
15
16
17
18
19
20
21
22
23
24
25
26
Belgien
Schweden
Irland
Ungarn
Deutschland
OECD
Polen
Slowakei
Island
USA
Österreich
Russland
Lettland
Spanien
509
506
505
503
502
500
498
495
495
491
491
489
489
487
27
28
29
30
31
32
33
34
35
36
37
38
39
40
Italien
Norwegen
Luxemburg
Griechenland
Dänemark
Portugal
Uruguay
Serbien
Türkei
Thailand
Mexiko
Indonesien
Brasilien
Tunesien
486
484
483
481
475
468
438
436
434
429
405
395
390
385
EE – L1: 576 De 574 EE – L 2: 554 De 573
En 604 En 552
Fr 559 Fr 552
22
PISA 2003 - Ergebnisse
1
2
3
4
5
6
7
8
9
10
11
12
13
14
Korea
Hong Kong-China
Finnland
Japan
Neuseeland
Macao-China
Australien
Liechtenstein
Kanada
Belgien
Schweiz
Niederlande
Frankreich
Dänemark
550
548
548
547
533
532
530
529
529
525
521
520
519
517
15
16
17
18
19
20
21
22
23
24
25
26
Tschechische Republik
Deutschland
Schweden
Österreich
Island
Ungarn
OECD
Irland
Luxemburg
Slowakei
Norwegen
Polen
Lettland
516
513
509
506
505
501
500
498
494
492
490
487
483
27
28
29
30
31
32
33
34
35
36
37
38
39
40
Spanien
Russland
USA
Portugal
Italien
Griechenland
Thailand
Serbien
Uruguay
Türkei
Mexiko
Brasilien
Indonesien
Tunesien
482
479
477
470
469
448
425
420
411
408
384
371
361
345
• Neue Komponente: „Problemlösen“
EE – L1: 574 De 564 EE – L2:554 De 579 En 604
En 561 Fr 559
Fr 569
23
TABLE 1: Students' performance in PISA 2003 differentiated by first/second language (L1 vs. L2) and language section (English, German, French)
test language N mathematical literacy reading literacy scientific literacy problem solving
mean se mean se mean se mean se
students tested in their first language
English 38 600 12,0 572 11,6 604 14,1 604 13,9
French 60 562 9,0 532 11,0 559 10,6 559 10,4
German 23 563 16,0 546 16,1 574 15,5 564 14,3
students tested in their second language
English 30 567 17,0 519 15,0 552 16,4 561 18,3
French 33 573 13,2 533 16,8 552 15,7 569 13,0
German 8 584 33,8 547 24,0 573 35,4 579 27,2
N=number of students
se=standard error of the mean (95% confidence interval of the mean = mean +/- 1.96*se)
24
m (L1) m (L2) rd (L1) rd (L2) sc (L1) sc (L2) ps (L1) ps (L2)
English 600 567 572 519 604 552 604 561
French 562 573 532 533 559 552 559 569
German 563 584 546 547 574 573 564 579
TABLE 2: Students' performance in PISA 2003 differentiated by first/second language (L1 vs. L2) and language section (English, French, German)
25
mathematical literacy
600
562 563567
573584
500
520
540
560
580
600
English French German
test language
test
sco
re
L1
L2
reading literacy
572
532
546
519
533
547
500
520
540
560
580
600
English French German
test language
test
sco
re
L1
L2
scientific literacy
604
559
574
552 552
573
500
520
540
560
580
600
English French German
test language
test
sco
re
L1
L2
problem solving
604
559564561
569
579
500
520
540
560
580
600
English French German
test language
test
sco
re
L1
L2
TABLE 1: Students' performance in PISA 2003 differentiated by first/second language (L1 vs. L2) and language section (English, French, German)
26
PISA
A comparison with our internal results
27
REFERENCE FIGURES• Mean for all OECD countries = 500• 2/3 of pupils score between 400 and 600
LUXEMBOURG LYCEE CLASSIQUE
BEST INTERNATIONAL
MATHS 556 550(Hong Kong)
SCIENCE 552 548(Finland)
READING 549 543(Finland)
PROBLEM 555 550(Hong Kong)
28
MATHEMATICSmathematical literacy (lux:556 . Int:550)
600
562 563567
573
584
500
520
540
560
580
600
English French German
test language
test
sco
re
L1
L2
• Percentage of pupils failing at the end of the year
41999-2005 (cumulative) 2002
Ma4 Ma6 Ma4 Ma6
DE 20 3 6 0
EN 10 1 0 0
FR 23 14 38 16
51999-2005 (cumulative) 2003
Ma4 Ma6 Ma4 Ma6
DE 21 4 18 8
EN 5 7 5 0
FR 13 18 23 21
29
SCIENCEscientific literacy (lux:552 . Int:548)
604
559
574
552 552
573
500
520
540
560
580
600
English French German
test language
test s
co
re
L1
L2
• Percentage of pupils failing at the end of the year4 1999-2005 (cumulative) 2002
Bio Chem Phys Bio Chem Phys
DE 7 11 20 0 0 11
EN 14 14 11 22 16 18
FR 16 25 30 25 30 27
5 1999-2005 (cumulative) 2003
Bio Chem Phys Bio Chem Phys
DE 12 19 16 11 23 20
EN 15 20 12 9 18 16
FR 17 26 24 11 27 18
30
LANGUAGEreading literacy (lux:549 . Int:543)
572
532
546
519
533
547
500
520
540
560
580
600
English French German
test language
test
sco
re
L1
L2
• Percentage of pupils failing at the end of the year• L2 FIGURES INCLUDE PUPILS NOT INCLUDED ABOVE!
1999-2005 (cumulative) 2002
L1 L2 L1 L2
DE 1 8 0 3
EN 0 3 0 2
FR 6 11 3 16
1999-2005 (cumulative) 2003
L1 L2 L1 L2
DE 2 9 0 5
EN 0 2 0 2
FR 4 7 5 9
31
PROBLEM SOLVINGproblem solving (lux:555 . Int:550)
604
559564561
569
579
500
520
540
560
580
600
English French German
test language
test
sco
re
L1
L2
32
Percentage failures by subjectyears 4 and 5 1999-2005
0.00
2.00
4.00
6.00
8.00
10.00
12.00
14.00
16.00
18.00
Bio
logi
e
Chi
mie
Eco
nom
ie
Edu
catio
n ar
tistiq
ue
Edu
catio
n m
usic
ale
Edu
catio
n ph
ysiq
ue
Géo
grap
hie
His
toire
Info
rmat
ique
Lang
ue 1
Lang
ue 2
Lang
ue 3
Lang
ue 4
Latin
Mat
hém
atiq
ues
4 pé
riode
s
Mat
hém
atiq
ues
6 pé
riode
s
Phy
siqu
e