slide - Università degli Studi Roma Tre

Conferenza di Ateneo sulla
valutazione della ricerca
26 giugno 2014
Marco Catarci
marco.catarci@uniroma3.it
Dipartimento di Scienze della Formazione
1
Composizione e linee di ricerca del
Dipartimento
• Composizione multidisciplinare:
– SSD pedagogici (M-PED/01-4): 44 docenti (52,4%)
– SSD sociologici (SPS/07,08,09): 14 docenti (16,7%)
– SSD psicologici (M-PSI/01,04,05,06): 9 docenti (10,7%)
– Atri SSD (in aree 10-14): 17 docenti (20,2%)
• Linee di ricerca interdisciplinari nel campo
dell’educazione e delle scienze umane e sociali.
2
Esiti nell’Area 11 per la sub-area
non bibliometrica
SSD
M-DEA/01
M-FIL/01
M-FIL/02
M-FIL/03
M-FIL/04
M-FIL/05
M-FIL/06
M-FIL/07
M-FIL/08
M-GGR/01
M-GGR/02
M-PED/01
M-PED/02
M-PED/03
M-PED/04
M-STO/01
M-STO/02
M-STO/03
M-STO/04
M-STO/05
M-STO/06
M-STO/07
M-STO/08
M-STO/09
n.a
Totale
somma
punteggi (v)
253.00
248.70
150.40
358.80
161.80
163.60
446.20
93.60
87.90
278.80
177.60
481.80
147.00
227.50
104.20
338.60
501.70
47.40
611.30
103.70
45.90
138.90
135.20
120.90
192.40
5616.90
# prodotti voto medio
% prodotti B
attesi (n)
(I=v/n)
% prodotti E
% prodotti A
467
0.54
13.06
37.47
24.41
449
0.55
12.03
42.09
21.83
254
0.59
23.62
38.58
14.17
558
0.64
19.00
49.46
17.38
245
0.66
24.08
43.27
18.37
291
0.56
15.46
40.21
18.90
714
0.62
21.29
46.78
13.03
141
0.66
31.91
33.33
15.60
114
0.77
44.74
37.72
7.02
551
0.51
6.17
41.92
23.96
357
0.50
9.24
34.17
30.25
812
0.59
12.81
46.92
20.44
248
0.59
19.76
42.34
14.52
406
0.56
11.58
43.10
20.69
179
0.58
11.17
44.13
25.14
548
0.62
18.80
45.99
16.61
823
0.61
17.50
43.62
22.11
107
0.44
11.21
35.51
20.56
1247
0.49
8.42
38.17
25.34
173
0.60
19.65
42.77
16.18
74
0.62
18.92
44.59
20.27
245
0.57
16.33
50.20
11.43
221
0.61
15.38
40.27
27.15
184
0.66
32.61
39.67
14.13
370
0.52
11.35
40.00
21.35
42.37
9778
0.57
15.42
20.31
% prodotti L
23.13
21.83
19.69
9.14
12.24
23.71
14.29
19.15
7.89
25.77
23.25
17.73
21.77
23.89
17.88
15.15
12.27
25.23
23.90
18.50
10.81
13.47
17.19
3.80
23.78
18.52
% prodotti
penalizzati
1.93
2.23
3.94
5.02
2.04
1.72
4.62
0.00
2.63
2.18
3.08
2.09
1.61
0.74
1.68
3.47
4.50
7.48
4.17
2.89
5.41
8.57
0.00
9.78
3.51
3.37
Tabella 2.22: Punteggi ottenuti e distribuzione dei prodotti nelle classi di merito (Eccellente E-, Buono -B-, Accettabile -A, Limitato -L-) per SSD, sub-area non bibliometrica
3
Esiti nell’Area 11 per la sub-area
bibliometrica
SSD
somma punteggi
(v)
# prodotti attesi
(n)
voto medio
(I=v/n)
% prodotti E
% prodotti
B
% prodotti A % prodotti L
% prodotti penalizzati
M-EDF/01
80.70
168
0.48
26.79
23.21
7.74
39.29
2.98
M-EDF/02
87.45
168
0.52
26.79
29.17
7.74
33.93
2.38
M-PSI/01
471.40
761
0.62
45.99
11.56
14.72
25.89
1.84
M-PSI/02
323.90
353
0.92
84.70
7.93
1.98
5.10
0.28
M-PSI/03
110.10
194
0.57
35.05
16.49
20.10
26.80
1.55
M-PSI/04
252.90
500
0.51
24.80
13.60
30.40
30.80
0.40
M-PSI/05
233.90
417
0.56
34.29
12.71
25.42
25.66
1.92
M-PSI/06
97.30
209
0.47
17.70
10.05
43.06
28.23
0.96
M-PSI/07
135.30
322
0.42
7.45
9.63
54.35
27.95
0.62
M-PSI/08
181.70
460
0.40
23.70
10.65
23.04
35.87
6.74
n.a
60.20
2034.85
157
0.38
29.94
17.20
21.66
0.55
34.81
21.66
13.27
9.55
3709
22.32
26.75
2.86
Totale
Tabella 2.23: Punteggi ottenuti e distribuzione dei prodotti nelle classi di merito (Eccellente -E-, Buono -B-,
Accettabile -A, Limitato -L-) per SSD, sub-area bibliometrica
4
SPS/07
1
2
3
4
5
6
7
8
9
10
11
12
13
14
14
16
17
18
7,70
22,20
26,00
14,70
29,10
18,60
27,40
7,70
4,80
29,10
14,00
16,10
4,80
7,50
7,50
4,10
4,90
8,20
12
37
45
28
57
38
56
16
10
62
30
35
11
18
18
10
12
22
0,64
0,60
0,58
0,52
0,51
0,49
0,49
0,48
0,48
0,47
0,47
0,46
0,44
0,42
0,42
0,41
0,41
0,37
19 42,10
20 12,40
115
34
4,00
22 9,20
23 5,60
24 4,30
25 5,60
26 5,20
27 4,10
28 10,70
29 6,60
30 1,80
31 5,10
32 1,50
21
25,00
10,81
15,56
10,71
17,54
5,26
5,36
6,25
20,00
14,52
3,33
0,00
27,27
0,00
5,56
0,00
0,00
4,55
33,33
37,84
33,33
32,14
29,82
31,58
41,07
25,00
10,00
19,35
33,33
34,29
9,09
27,78
27,78
20,00
25,00
18,18
0,00
0,00
0,00
0,00
5,26
0,00
1,79
0,00
0,00
6,45
6,67
0,00
0,00
0,00
0,00
0,00
0,00
0,00
0,37
0,36
5,22 19,13 36,52 34,78
5,88 23,53 32,35 29,41
4,35
8,82
11
0,36
0,00 45,45
0,00
26
16
13
21
21
17
45
29
10
34
11
0,35
0,35
0,33
0,27
0,25
0,24
0,24
0,23
0,18
0,15
0,14
3,85
6,25
0,00
0,00
0,00
0,00
0,00
0,00
0,00
0,00
0,00
0,00 54,55
38,46
37,50
53,85
38,10
23,81
35,29
37,78
24,14
20,00
20,59
27,27
42,31 0,00
43,75 0,00
38,46 0,00
52,38 0,00
52,38 4,76
47,06 5,88
51,11 2,22
34,48 17,24
70,00 0,00
73,53 0,00
72,73 0,00
% prodotti L
% prodotti
penalizzati
% prodotti A
SPS/08
Milano
Bicocca
Modena e
Reggio
Emilia
Genova
Milano
Cattolica
Padova
Milano
Torino
Roma Tre
Trento
Siena
Bari
Verona
Roma La
Sapienza
Napoli
Federico II
Bologna
Salento
Calabria
Salerno
Milano IULM
Udine
Firenze
Urbino
Palermo
% prodotti B
nome
struttura
(sintetico)
% prodotti E
SSD
graduatoria
somma
punteggi (v)
# prodotti
attesi (n)
voto medio
(I=v/n)
% prodotti
penalizzati
16,67
13,51
20,00
25,00
22,81
26,32
28,57
25,00
30,00
19,35
16,67
28,57
45,45
33,33
38,89
30,00
33,33
40,91
15,38
12,50
7,69
9,52
19,05
11,76
8,89
24,14
10,00
5,88
0,00
25,00
37,84
31,11
32,14
24,56
36,84
23,21
43,75
40,00
40,32
40,00
37,14
18,18
38,89
27,78
50,00
41,67
36,36
% prodotti L
% prodotti A
Esiti nell’Area
14
Piemonte
Orientale
Padova
Milano Bicocca
Roma Tre
Trento
Milano Cattolica
Bologna
Genova
Catanzaro
Torino
Milano
Palermo
Macerata
Pisa
Verona
Siena
Trieste
Calabria
Roma La
Sapienza
Firenze
Venezia Cà
Foscari
Napoli Federico
II
Perugia
Urbino
Bari
Roma LUMSA
Salento
Salerno
Catania
Enna
Chieti e Pescara
Teramo
% prodotti B
% prodotti E
voto medio
(I=v/n)
# prodotti
attesi (n)
somma
punteggi (v)
graduatoria
nome struttura
(sintetico)
SSD
1 15,70
22 0,71 22,73 40,91 31,82 4,55 0,00
2 11,10
3 7,40
16 0,69 25,00 43,75 18,75 12,50 0,00
12 0,62 25,00 25,00 33,33 16,67 0,00
4
5
6
7
8
9
10
11
11
26,90
17,00
14,30
23,90
10,10
7,30
4,80
5,20
5,20
46
31
27
47
20
15
10
11
11
0,58
0,55
0,53
0,51
0,50
0,49
0,48
0,47
0,47
2,17
9,68
7,41
4,26
5,00
6,67
30,00
9,09
0,00
50,00
32,26
22,22
27,66
35,00
40,00
10,00
36,36
36,36
32,61
38,71
55,56
48,94
35,00
20,00
20,00
18,18
36,36
15,22
19,35
14,81
19,15
25,00
33,33
40,00
36,36
27,27
0,00
0,00
0,00
0,00
0,00
0,00
0,00
0,00
0,00
13 34,20
77 0,44 6,49 31,17 25,97 36,36 0,00
14
15
16
17
18
19
20
21
22
23
16
60
23
12
16
15
18
23
34
15
7,10
26,20
9,60
4,60
5,60
5,20
5,40
6,60
7,60
3,30
0,44
0,44
0,42
0,38
0,35
0,35
0,30
0,29
0,22
0,22
12,50
5,00
0,00
8,33
6,25
0,00
0,00
0,00
0,00
0,00
31,25
31,67
30,43
16,67
12,50
26,67
16,67
8,70
20,59
6,67
25,00
33,33
39,13
33,33
37,50
40,00
33,33
43,48
32,35
33,33
25,00
23,33
26,09
41,67
43,75
20,00
50,00
47,83
35,29
60,00
6,25
6,67
4,35
0,00
0,00
13,33
0,00
0,00
11,76
0,00
Tab. D.4.3: Graduatorie di strutture per SSD ordinate
per voto medio (I=v/n) e distribuzione dei prodotti
nelle classi di merito (Eccellente “E”, Buono “B”,
5
Accettabile “A”, Limitato “L”)
DESCRIZIONE
Università degli Studi di BOLOGNA
Università degli Studi di FIRENZE
Università degli Studi di TRENTO
Università Cattolica del Sacro Cuore
Università degli Studi ROMA TRE
Università degli Studi di VERONA
Università degli Studi di NAPOLI "Federico II"
Università degli Studi di ROMA "Tor Vergata"
Università degli Studi di MILANO-BICOCCA
Libera Università di BOLZANO
Università degli Studi di CATANIA
Università degli Studi di PAVIA
Università della CALABRIA
Università degli Studi di PALERMO
Università degli Studi di PARMA
Università degli Studi di ROMA "La Sapienza"
Università "Ca' Foscari" VENEZIA
Università degli Studi di TORINO
Università degli Studi di CAGLIARI
Università degli Studi di BARI ALDO MORO
Università degli Studi di FERRARA
Università degli Studi de L'AQUILA
Università degli Studi del SALENTO
Università degli Studi di NAPOLI "Parthenope"
Libera Univ. degli Studi "Maria SS.Assunta" LUMSA - Roma
Università degli Studi di SIENA
Università degli Studi di UDINE
Università degli Studi di URBINO "Carlo BO"
Università degli Studi di CASSINO e del LAZIO
MERIDIONALE
Università degli Studi di MACERATA
Università degli Studi di SALERNO
Università per Stranieri di SIENA
Università degli Studi Suor Orsola Benincasa NAPOLI
Università degli Studi di BERGAMO
Università degli Studi di MESSINA
Università degli Studi di PADOVA
Università degli Studi di GENOVA
Università degli Studi di FOGGIA
Università degli Studi "G. d'Annunzio" CHIETIPESCARA
Totale
% E sul totale per MPED/01
10,58
9,62
5,77
5,77
5,77
5,77
4,81
4,81
4,81
3,85
2,88
2,88
1,92
1,92
1,92
1,92
1,92
1,92
1,92
0,96
0,96
0,96
0,96
0,96
0,96
0,96
0,96
0,96
0,96
0,96
0,96
0,96
0,96
0,96
0,96
0,96
0,96
0,96
0,96
100,00
Distribuzione dei prodotti
Eccellenti tra le strutture,
SSD M-PED/01-02
DESCRIZIONE
Università Cattolica del Sacro Cuore
Università degli Studi di MACERATA
Università degli Studi di TORINO
Università degli Studi di BOLOGNA
Università degli Studi ROMA TRE
Università degli Studi di FIRENZE
Università degli Studi di MESSINA
Università degli Studi di GENOVA
Università degli Studi di FOGGIA
% E sul totale per M-PED/02
18,37
16,33
8,16
6,12
6,12
4,08
4,08
4,08
4,08
Università degli Studi di MILANO-BICOCCA
4,08
Università degli Studi di BARI ALDO MORO
Università della CALABRIA
Università degli Studi di CATANIA
Università degli Studi del SALENTO
Libera Univ. degli Studi "Maria SS.Assunta" LUMSA - Roma
2,04
2,04
2,04
2,04
Università degli Studi di URBINO "Carlo BO"
Università degli Studi del MOLISE
Università degli Studi di BERGAMO
Università degli Studi di MODENA e REGGIO
EMILIA
Università degli Studi di SASSARI
Università degli Studi di CAGLIARI
Università degli Studi "G. d'Annunzio" CHIETIPESCARA
Totale
2,04
2,04
2,04
2,04
2,04
2,04
2,04
2,04
100,00
Tabella 3.13 e 3.14 - Distribuzione dei prodotti Eccellenti 6
tra le strutture, M-PED/01 e M-PED/02
Distribuzione dei prodotti Eccellenti tra
le strutture, SSD M-PED/03-04
DESCRIZIONE
Università Cattolica del Sacro Cuore
Università degli Studi di PADOVA
Università degli Studi di BOLOGNA
Università degli Studi di PARMA
Università degli Studi ROMA TRE
Università degli Studi di GENOVA
Università degli Studi di BARI ALDO
MORO
Università degli Studi di UDINE
Università degli Studi di URBINO "Carlo
BO"
Università degli Studi di FIRENZE
Università degli Studi di MACERATA
Università degli Studi di MESSINA
Università degli Studi di TORINO
Università degli Studi di MILANOBICOCCA
Università degli Studi de L'AQUILA
Università degli Studi di SIENA
Università degli Studi di TRENTO
Università degli Studi di SALERNO
Università degli Studi di BERGAMO
Libera Università di BOLZANO
Università degli Studi di VERONA
Università della VALLE D'AOSTA
Totale
% E sul totale per MPED/03
10,64
10,64
8,51
6,38
6,38
6,38
4,26
4,26
4,26
4,26
4,26
4,26
4,26
DESCRIZIONE
% E sul totale per M-PED/04
Università degli Studi di PADOVA
30,00
Università degli Studi di ROMA "La Sapienza"
15,00
Università degli Studi di TORINO
15,00
Università degli Studi del SALENTO
10,00
Università degli Studi ROMA TRE
10,00
Università degli Studi di BARI ALDO MORO
5,00
Università degli Studi di BOLOGNA
5,00
Università degli Studi di PARMA
5,00
Università degli Studi di MODENA e REGGIO EMILIA
5,00
Totale
100,00
4,26
2,13
2,13
2,13
2,13
2,13
2,13
2,13
2,13
100,00
Tabella 3.15 e 3.16 - Distribuzione dei prodotti Eccellenti tra le strutture, M-PED/03 e M-PED/04
7
Il Dipartimento di
Scienze della Formazione
Area
10
Ateneo
dipartimento L.240
somma
punteggi
(v)
#
prodot
%
voto
ti
prodot medio
attesi
ti E
(I=v/n)
(n)
R
Pos.
grad
.
com
pl.
Num.
comp.
dip.
Pos.
grad.
segm.
Num.
dip.
segm.
Segm
. dim.
Roma Tre
Scienze della Formazione
6,10
12 0,00
0,51
0,77
147
172
38
50
P
11.a Roma Tre
Scienze della Formazione
67,80
117 11,11
0,58
1,00
84
179
18
32
G
11.b Roma Tre
Scienze della Formazione
8,60
22 27,27
0,39
0,71
58
79
41
51
G
Scienze della Formazione
18,20
35 8,57
0,52
1,16
35
97
12
35
G
14
Roma Tre
Tabella 6.7: Elenco dei dipartimenti delle università elencate in ordine alfabetico con i valori degli indicatori
della qualità media della ricerca.
8
Il dibattito in corso
A livello nazionale:
• Giornate di riflessione sulla VQR : 31 ottobre 2013 presso il MIUR (area
11); 6 giugno 2014 (aree 10-14).
• Documenti di società scientifiche delle aree 10-14.
• Consiglio Universitario Nazionale: Dichiarazioni del 16 luglio 2013
(«valutazione e non classifiche. Rating e non ranking») e
Raccomandazione del 9 ottobre 2013 («evitare di applicare in modo
automatico i risultati degli indicatori della VQR»).
Nel Dipartimento di Scienze della Formazione:
• Dibattito in corso sul Journal of Educational Cultural and Psychological
Studies (diretto dal Prof. Gaetano Domenici), a partire dal No 8, 2013.
• Organizzazione di una giornata sulla VQR in Dipartimento per il prossimo
30 settembre 2014.
9
Osservazioni finali
• Ridurre il possibile utilizzo improprio degli esiti (ad es.
graduatorie delle strutture da parte dei mezzi di
comunicazione e procedure valutazione dottorato).
• Mantenimento della peer review: complessità del panorama
della ricerca in ambito umanistico (rischio della bibliometria,
problema tipologia prodotti, definizione chiara criteri).
• Definizione di procedure che siano effettivamente sostenibili,
al fine di dar vita a procedure di valutazione stabili e
continuative.
• Possibilità di tener conto degli esiti conseguiti nelle strutture e
nelle sottostrutture anche in relazione ai finanziamenti e ai
risultati precedentemente ottenuti.
10
11

Download Report