Detection and Characterization of Highly Effective Schools in the Autonomous Community of the Basque Country Using Contextualized Cross- Sectional Attainment Models and Hierarchical Linear Models

Detección y caracterización de los centros escolares de alta eficacia de la Comunidad Autónoma del País Vasco mediante Modelos Transversales Contextualizados y Modelos Jerárquicos Lineales1 Detection and Characterization of Highly Effective Schools in the Autonomous Community of the Basque Country Using Contextualized CrossSectional Attainment Models and Hierarchical Linear Models LUIS JOARISTI LUIS LIZASOAIN VERÓNICA AZPILLAGA Universidad del País Vasco/ Euskal Herriko Unibertsitatea, UPV/EHU Universidad del País Vasco/ Euskal Herriko Unibertsitatea, UPV/EHU Universidad del País Vasco/ Euskal Herriko Unibertsitatea, UPV/EHU 1 Este trabajo se encuadra en el contexto del proyecto “Caracterización y buenas prácticas de los centros escolares de alto valor añadido” financiado por la Dirección General de Investigación y Gestión del Plan Nacional de I+D+i del Programa Nacional de Proyectos de Investigación Fundamental, con referencia EDU2011-24366. Investigador Principal, Luis Lizasoain Hernández del Departamento de Métodos de Investigación y Diagnóstico en Educación de la Universidad del País Vasco/Euskal Herriko Unibertsitatea, UPV/EHU. El IP pertenece a la Unidad de Formación e Investigación “Educación, Cultura y Sociedad” (UFI 11/54) de la UPV/EHU. DOI: 10.15581/004.27.37-61 ESTUDIOS SOBRE EDUCACIÓN / VOL. 27 / 2014 / 37-61 37 LUIS JOARISTI / LUIS LIZASOAIN / VERÓNICA AZPILLAGA Resumen: El objetivo de este trabajo es la identificación y caracterización de los centros escolares de alta eficacia de la Comunidad Autónoma del País Vasco. Como criterio se emplean las puntuaciones obtenidas en lengua española, lengua vasca y matemáticas correspondientes a las Evaluaciones Diagnósticas de los años 2009 y 2010. Se consideran centros de alta eficacia aquellos que obtienen una puntuación media superior a la esperable una vez controlados mediante modelos jerárquicos lineales los efectos de las variables contextuales. Como resultado, de las casi 600 escuelas analizadas, se han identificado 32 cuyas características reflejan la diversidad del sistema educativo vasco. Palabras clave: escuelas eficaces; evaluación diagnóstica; modelos transversales contextualizados; modelos jerárquicos lineales. Abstract: The aim of this work is the identification and characterization of highly effective schools in the Basque Autonomous Community. As criterion variables the scores in 2009 and 2010 Diagnostic Assessments in Spanish language, Basque language and Mathematics are used. Schools are considered as highly effective when there average performance is higher than the expected score once the effects of contextual variables have been controlled using hierarchical linear models. As a result, of the nearly 600 analyzed schools, 32 were identified whose characteristics reflect the diversity of the Basque educational system. Keywords: effective schools; diagnosis evaluation; transversal contextualized models; hierarchical linear models. INTRODUCCIÓN L a finalidad última del proyecto en que se enmarca el presente trabajo es la de elaborar un catálogo de buenas prácticas de los centros escolares de alta eficacia de la Comunidad Autónoma del País Vasco (CAPV), de forma que el mismo pueda ser empleado en los planes de mejora de aquellos centros cuyos resultados no alcanzan los niveles deseables. Como criterio se emplean los resultados en lengua española, lengua vasca y matemáticas correspondientes a las Evaluaciones Diagnósticas (ED) de los años 2009 y 2010. De esta manera se trata de dar cumplimiento al carácter formativo y de mejora que toda evaluación debe tener. Así, en el preámbulo de la Ley Orgánica 2/2006, 3 de mayo, de Educación, se puede leer que la evaluación diagnóstica “tendrá carácter formativo y orientador, proporcionará información… y permitirá adoptar las medidas pertinentes para mejorar”. (Ley Orgánica 2/2006, 3 de mayo, de Educación BOE Nº 106 de 4 de Mayo. Preámbulo, página 17162 del BOE). La idea básica es que la praxis de los centros que obtienen buenos resultados en dicha evaluación puede ser considerada como ejemplo y guía para las acciones y planes de mejora. Pero es importante matizar que por buenos resultados se consideran aquellos que suponen un alto valor añadido, en el sentido de que su puntuación media en algún aspecto educativo sea superior a la que cabría esperar una vez que se han detraido o controlado los efectos de las variables contextuales. Por tanto, aquí se está empleando el término valor añadido en su sentido más lato 38 ESTUDIOS SOBRE EDUCACIÓN / VOL. 27 / 2014 / 37-61 DETECCIÓN Y CARACTERIZACIÓN DE LOS CENTROS ESCOLARES DE ALTA EFICACIA a diferencia de la recomendación de la OECD (2008) (versión en español, OCDE, 2011) que propone restringir el uso de este término a estudios longitudinales centrados en el cambio y el crecimiento. Si no se da esa perspectiva longitudinal, este organismo sugiere emplear la expresión modelo transversal contextualizado para referirse a este tipo de estudios. En este caso, dado que la ED es una evaluación transversal que se realiza en cuarto curso de primaria y segundo de secundaria obligatoria, no se trata obviamente de un estudio longitudinal de ahí que se haya incorporado la recomendación de la OCDE en el mismo título del trabajo. Pero a lo largo del texto se emplea en ocasiones el término de valor añadido con el enfoque antes apuntado tal y como, por ejemplo, es usado por Gaviria y Castro (2005) o Martínez Arias (2009). Dicho de otra manera, sea un estudio longitudinal o transversal, la idea fundamental es que los buenos resultados no se corresponden directamente con las puntuaciones de los estudiantes en las distintas pruebas de las ED, sino que es más riguroso y equitativo basarlos en el valor añadido de los centros una vez detraido o controlado el efecto de las variables contextuales. Estos centros han sido detectados a partir de los resultados de las ED realizadas en la CAPV en los años 2009 y 2010 aplicando técnicas estadísticas de modelización lineal multinivel, en que se han controlado factores individuales así como contextuales para aislar los que son meramente escolares. De ello se deriva que el objetivo general es detectar, para su posterior estudio, los centros escolares con los mejores resultados condicionados al efecto escolar, controlando los previsibles efectos de las variables contextuales. Para ello, como estrategia de análisis estadístico, se han utilizado los Modelos Jerárquico Lineales. Estos modelos asumen que los datos se presentan bajo una estructura multinivel y permiten el análisis conjunto de las variables de cada uno de los niveles, estudiante y centro escolar en este caso (Goldstein, 2003; Raudenbush y Bryk, 2002; Snijders y Bosker, 1999). Un primer objetivo específico ha sido el de determinar qué criterio es adecuado utilizar en la búsqueda de estos centros escolares de alta eficacia, pues de ello dependía que el desarrollo de las posteriores fases basadas en análisis detallados bajo metodología c (...truncated)