La qualitat, garantia de millora www.aqu.cat www.aqu.cat Resultat de l estudi sobre el perfil de mèrits per a l acreditació del professorat lector i agregat g (Humanitats i Ciències Socials) Esteve Arboix, cap de l Àrea d Avaluació del Professorat i Recerca Universitat de Barcelona, 29 de gener de 2010 1
Índex Presentació Objectius de l estudi Metodologia Resultats t Publicacions (articles): Psicologia Editorials: i Filologial i Projectes de recerca: Educació Conclusions preliminars i 2
Presentació Què és: Un estudi empíric per aportar informació sobre el perfil dels sol licitants en el context català Contribuir i a aflorar els referents de qualitat t existents t Què NO és: Elaboració d un llistat de revistes propi d AQU Aplicació mimètica dels criteris d altres disciplines als àmbits de CCSS i Humanitats 3
Objectius de l estudi A partir de la base empírica de l AQU (4.800 CV acumulats des de 2003-08) Desenvolupar una base de dades per analitzar els CV dels sol licitants (lectors i agregats) en CCSS i Humanitats. Analitzar les dimensions curriculars dels sol licitants per figures i camps Elaborar perfils empírics dels candidats a l acreditació (favorables i desfavorables), per figures i camps Valorar possibles canvis en el model de CV 4
Camps AQU considerats Ciències Socials Ciències Polítiques i Sociologia Comunicació i Documentació Dret Economia i Empresa Educació Psicologia Humanitats Filologia Història i Art Geografia Filosofia 5
Impacte esperat de l estudi Avaluadors: Major coneixement del context de l avaluació Llistats generals (revistes) Construcció de referents conjunts Avaluats: Major concreció /explicitació dels criteris d avaluació Agències d avaluació: Millora mecanismes de reconeixement mutu Altres Agents: Editorials (revistes i llibres) 6
Metodologia Abril 2009 Identificació població i mostra Població Agregats 100%: 564 CVs Mostra Lectors (95 % conf.): 977 CVs Disseny plantilla buidat CVs Anàlisi preliminar dades (CCSS) Elaboració llistats generals Publicacions (articles, reviews) Anàlisi tipologia fonts Buidat CVs (1541 CVs) 6 àmbits CCSS + 4 àmbits Humanitats Gener 2010 (anàlisi de 3 àmbits) Tractament informació CVs (valors absoluts i anàlisi dades) 7
Metodologia: Població (Agregats) i Mostra (Lectors) - CCSS 140 120 LECTORS 100 80 Lectors: 588 CVs Agregats: 262 CVs 60 40 Expedients totals: 850 20 0 Comun.Docum. CCPP i Sociol. Dret Econ. Empr. Educació Psicologia FAV DESF TOTAL 18% 10% 11% 90 80 70 AGREGATS 18% 18% 60 50 40 30 20 10 25% Comun.Docum. CCPP i Sociol. Dret Econ. Empr. Educació Psicologia 0 Comun.Docum. CCPP i Sociol. Dret Econ. Empr. Educació Psicologia FAV DESF TOTAL 8
Metodologia: Població (Agregats) i Mostra (Lectors) - Humanitats 180 160 LECTORS 140 120 100 Lectors: 389 CVs Agregats: 302 CVs 80 60 Expedients totals: 691 CVs 40 20 0 Filologia Història i Art Filosofia Geografia 5% 9% 140 120 FAV DESF TOTAL AGREGATS 43% 100 80 43% 60 40 20 Filologia Història i Art Filosofia Geografia 0 Filologia Història i Art Filosofia Geografia FAV DESF TOTAL 9
Metodologia: Elaboració llistats generals Elaboració per cada camp AQU Indexs bibliomètrics i considerats ISI: quartils RESH: quartils IN-RECS: quartils CARHUS+: classif.a MIAR: > 8, 8-5, < 5 i a més a Humanitats: ERIH (European Science Foundation): classif. A, B, C 10
Metodologia elaboració llistats generals: Humanitats Camp AQU MIAR ISI Filologia Història i Art Geografia Filosofia (2000) 4 àmbits (4495) (68) 5 àmbits (122) CARHUS plus+ (343) 4 àmbits (419) IN-RECS RESH ERIH --- (38) (73) 5 àmbits (158) 4 àmbits 2 àmbits (462) (118) (45) (43) (27) (672) 2 àmbits (60) (129) --- (21) 3 àmbits (1633) 9 àmbits (2988) Nº total revistes 2856 5780 --- 551 2 àmbits (471) 897 11
Metodologia elaboració llistats generals: Ciències Socials Camp AQU MIAR ISI CCPP i Sociol. Comun. i Docum. Dret Econ. i Empr. Educació Psicologia 2 àmbits (2290) 15 àmbits (626) CARHUS plus+ (158) IN-RECS 2 àmbits (114) RESH 2 àmbits (67) 2 àmbits 2 àmbits 2 àmbits (1085) (106) (48) (51) (29) (1739) 6 àmbits (303) (67) 1àmbit 10 àmbits 1àmbit 1àmbit (2000) (625) (164) (123) (1177) (1015) 6 àmbits (286) 18 àmbits (801) (150) (231) --- (122) (121) (162) Nº total revistes 2706 1149 1997 --- 2275 (77) 2 àmbits (67) 1411 1428 (+ 1335 ISI Medicina) 12
Metodologia: Elaboració llistats generals (exemple) Camp AQU MIAR JCR CARHUS plus+ IN-RECS RESH Nº total revistes PSICOLOGIA Psicologia (1015) Gerontology (25) History of Soc.Sci.(21) Indust. Relations, labor (15) Psychiatry (86) Psycology, Applied (61) Psycology, Biological (14) Psycology, Clinical (88) Psycol. Development (56) Psycology, Educational (42) Psicologia Psicologia (231) (121) Psycol., Experimental (71) Psycol., Mathematical (11) Psyc., Multidisciplin. (101) Psycol. Psychoanalysis (13) Psycology, Social (50) Rehabilitation (52) Social Sci, Biomedical (29) Social Sciences, mathem. methods (37) Women s Studies (29) Psicologia (51) Psiquiatria (16) 1428 13
Metodologia: Anàlisi ubicació revistes Elaboració llistat revistes i freqüències (Mostra experimental) Comparació llistat experimental amb llistat t general (Camp AQU) Classificació 1 (llistat t experimental al camp AQU específic) Revistes sense classificar Comparació llistat amb llistat general d altres camps Classificació 2, 3,... (llistats experimentals a altres camps) Revistes sense classificar (finals) No incloses als índexs bibliomètrics Altres àmbits 14
Metodologia: Buidat de CVs Dimensions analitzades (model de CV AQU) Projectes de recerca: nombre/ip/entitat finançadora Contractes de recerca i transferència: nombre/ip/entitat finançadora Publicacions (articles i reviews): nombre, revistes, autor únic Llibres i capítols llibre: nombre, editorials, autor únic Altres publicacions (informes, dictàmens, altres): nombre, entitat que fa encàrrec, autor únic Congressos: nombre, publicacions derivades Estades de recerca: doctorals i post-doctorals Direcció activitat investigadora: tipus 15
Metodologia: Anàlisi tipus d editorials Ed. Internacionals Editorials Estatals Editorials Catalanes Ed. Universitàries Dubtoses Comissió Europea i països de la UE Països Latinoamericans USA, Canadà, NZ, Austràlia Altres Privats Públics Privats Públics Internacionals Nacionals Catalanes 16
Metodologia: Anàlisi tipus d entitats finançadores (projectes) Àmbit Públic Àmbit Privat Català Àmbit Privat estatal i internacional Dubtoses Internacional Estatal Català Altres CCAA Empreses Fundacions/Assoc. Universitats Privats Empreses Fundacions/Assoc. Universitats privats 17
Metodologia: Tasques futures Enquesta experts/avaluadors (categorització) Elaboració perfils PUBLICACIÓ INFORME 18
RESULTATS 19
Anàlisi de les Publicacions: Outputs FILOLOGIA Lectors Desfav. Lectors Fav. Agreg. Desfav. EDUCACIÓ Agreg. Fav. Lectors Desfav. Lectors Fav. Agreg. Desfav. PSICOLOGIA Agreg. Fav. Lectors Desfav. Lectors Fav. Agreg. Desfav. Agreg. Fav. 0% 10% 20% 30% 40% 50% 60% 70% 80% 90% 100% Nº Art+Rev. Nº Llibres Nº Cap.Llibres Nº Inf+Dict. Nº altres publ. Nºpubl.congr. 20
Resultats: Publicacions articles (Psicologia) (1) MOSTRA ESTUDIADA Agregats Lectors Mostra global Nº CVs total 43 107 150 Nº revistes 397 367 585 * Nº articles (A+R) 803 785 1588 * Sense repeticions Agregats (Mitjanes) Lectors (Mitjanes) NºR a.únic 0 0 NºR a.únic 013 0,13 0,03 Nº R total 0 1 Nº R total 0,4 0,5 NºA a.únic 5 5 NºA a.únic 1 1,4 Nº A total 16 20 Nº A total 4 9 Nº total (A+R) 17 21 Nº total (A+R) 5 9 0 5 10 15 20 25 0 2 4 6 8 10 Desfavorables Favorables Desfavorables Favorables Favorables: Nº total (A+R): 6-59 Desfavorables: Nº total (A+R): 6-35 Favorables: Nº total (A+R): 1-35 Desfavorables: Nº total (A+R): 0-23 21
Resultats: Publicacions articles (Psicologia) (2) Mostra experimental: 585 revistes Mostra experimental: 1588 articles Ubicació Revistes Ubicació Articles 29% 25% 41% 1% 46% 11% 11% 3% 12% 4% 5% 12% Psicologia Educació Psicologia Educació CCPP i Sociol. Medicina CCPP i Sociol. Medicina Proceedings congr. Sense classif. Proceedings congr. Sense classif.
Resultats: Publicacions articles (Psicologia) (3) Mostra : 585 rev. Llistat Psicologia 171 rev. Llistat Educació 66 rev. 9,4% Freq. 1 10,5% Freq. 2 35,7% Freq. 3 9,9% Freq. 4 15,2% Freq. 5 10 19,3% Més 11 9,1% 6,1% 7,6% 6,1% 24,2% 47,0% Freq. 1 Freq. 2 Freq. 3 Freq. 4 Freq. 5 10 Més 11 Llistat CCPP. i Soc. 22 rev. Llistat Medicina 68 rev. Sense classif. : 242 rev. Freq. 1 27,3% 31,8% Freq. 2 Freq. 3 Freq. 4 13,6% 9,1% Freq. 5 10 18,2% Més 11 2,9% 29% 2,9% 10,3% 11,8% 23,5% 48,5% Freq. 1 Freq. 2 Freq. 3 Freq. 4 Freq. 5 10 Més 11 (0%)
Resultats: Editorials (Filologia) (1) Mostra experimental: 2087 libres i cap. llibres 7% 17% 55% 21% Ed. internacionals públics i privats Ed. catalanespublics i privats Ed. estatals públics i privats Dubtoses i sense classificar
Resultats: Editorials (Filologia) (2) Mostra experimental: 2087 libres i cap. llibres 18% 7% 3% 7% 14% 11% 3% 7% 30% Ed. internacionals públics i privats Ed. estatals públics Ed. catalanes privats Ed. universitàries nacionals Ed. estatals privats Ed. catalanes publics Ed. universitàries internacionals Ed. universitàries catalanes Dubtoses i sense classificar
Resultats: Projectes de recerca (Educació) Mostra experimental: 1271 projectes de recerca 3% 1% 2% 14% 60% 20% Àmbit públic internacional Àmbit públic català Àmbit privat internacional i estatal Àmbitpúblic estatal Àmbit privat català Dubtoses i Sense classificar
Conclusions preliminars Necessitat de reflexionar sobre criteris i estàndards per poder disposar d un marc de referència més explícit Estructurar la informació en un model de CV predeterminat que permeti l avaluació primària d algunes aportacions Desenvolupar una sistemàtica d acumulació empírica de dades que permeti l ajust periòdic dels criteris Aprofitar aquesta informació per altres processos d avaluació de la recerca