Dimensional Analysis of the Instrument for Assessing Perceived Social Justice Based on the Opinions of Students in Schools
Keywords:
Justice, Social inequality, School, School-society relationship, Evaluation, Social system
This work is licensed under a Creative Commons Attribution-NonCommercial-NoDerivatives 4.0 International License.
Abstract
Social justice in schools, from the pupils' point of view, contributes to the construction of the model of a more cohesive society. From this perspective, social justice should be one of the axes to guide the evaluation of schools, considering the educational contexts in which they are located. The metric study of first and second order exploratory factor analysis and confirmatory factor analysis are applied to find an optimal dimensionality of the instrument to evaluate social justice as perceived by the students both in the school and in the classroom. The sample was obtained by snowball sampling in schools in the Valencian Community and Cuenca, Spain. The result shows four dimensions different from the initial theoretical approach, such as ‘coherence between norms and behaviours’, ‘dominant values in the environment’, ‘discrimination by preference’ and ‘positive reinforcement’; the confirmatory factor analysis shows an adequate fit (CFI=0.9; RMSEA=0.5). Based on the final solution, the instrument can provide a reliable and valid diagnostic tool in schools used together with other constructs that make up the global assessment model in which this research is framed.
Downloads
References
Aluja, A., Blanch, A. y García, L.F. (2005). Reanalyzing the 16pf-5 second order structure: Exploratory versus confirmatory factorial analysis. European Journal of Psychology of Education, XX(4), 343-353.
Bakieva, M., Jornet Meliá, J. M. y González Such, J. (2019). Evidencias de validez interna de un instrumento para evaluar la colegialidad docente. Revista electrónica de investigación educativa, 21, e14. https://doi.org/10.24320/redie.2019.21.e14.2127
Bandura, Albert (1977). Social Learning Theory. Prentice Hall.
Bentler, P. M. (1992). On the fit of models to covariances and methodology to the bulletin. Psychological Bulletin, 101, 400-404. https://doi.org/10.1037/0033-2909.112.3.400
Bisquerra, R. (1989). Introducción conceptual al análisis multivariable. Ediciones PPU.
Bollen, K. A. (1989). Structural equations with latent variables. John Wiley y Sons.
Calabrese, A. y Tan, E. (2020). Beyond Equity as Inclusion: A Framework of “Rightful Presence” for Guiding Justice-Oriented Studies in Teaching and Learning. Educational Researcher, 49(6), 433-440. https://doi.org/10.3102/0013189X20927363
Cattell, R. B. (1966). The screen test for the number of factors. Multivariate Behavioral Research, 1, 245-276. https://doi.org/10.1207/s15327906mbr0102_10
Consejo de Europa. (2005). Concerted development of social cohesion indicators, Methodological guide. Consejo de Europa.
Costello, A .B. y Osborne, J. (2019). Best practices in exploratory factor analysis: Four recommendations for getting the most from your analysis. Practical Assessment, Research, and Evaluation, 10, art. 7. https://doi.org/10.7275/jyj1-4868
Cronbach, L .J. (1990). Essentials of psychological testing (5ª Ed.). Harper.
Delgado-Álvarez, C. (2014). Viajando a Ítaca por mares cuantitativos. Manual de ruta para investigar en grado y postgrado. Amarú.
Fabrigar, L. R., Wegener, D. T., MacCallum, R. C. y Strahan, E. J. (1999). Evaluating the use of exploratory factor analysis in psychological research. Psychological Methods, 4(3), 272-299. https://doi.org/10.1037/1082-989X.4.3.272
Fraser, N. (2008). Escalas de justicia. Herder.
González-Such, J., Sancho-Álvarez, C. y Sánchez-Delgado, P. (2016). Cuestionarios de contexto PISA: Un estudio sobre los indicadores de evaluación. RELIEVE-Revista Electrónica de Investigación y Evaluación Educativa, 22(1).
Goodman, L.A. (1961). Snowball sampling. Annals of Mathematical Statistics, 32(1), 148-170.
Herrero, J. (2010). El Análisis Factorial Confirmatorio en el estudio de la estructura y estabilidad de los instrumentos de evaluación: Un ejemplo con el cuestionario de autoestima CA-14. Psychosocial Intervention, 19(3), 289-300. https://doi.org/10.5093/in2010v19n3a9
Hidalgo, N. y Murillo, J. (2016). Evaluación de estudiantes para la justicia social. Propuesta de un modelo. Revista Internacional de Educación para la Justicia Social, 5(2), 159-179. http://dx.doi.org/10.15366/riejs2016.5.2.008
Hu, L. y Bentler, P. M. (1999). Cut-off criteria for fit indexes in covariance structure analysis: Conventional criteria versus new alternatives. Structural Equation Modeling, 6, 1-55. https://doi.org/10.1080/10705519909540118
Jornet-Meliá, J. M. (2012). Las dimensiones docentes y cohesión social: Reflexiones desde la evaluación. Revista Iberoamericana de Evaluación Educativa, 5(1e). https://doi.org/10.15366/riee2012.5.1.027
Jornet-Meliá, J. M., Bakieva, M. y Sánchez-Delgado, P. (2020). La cohesión social como objetivo de la educación. ¿Podemos especificar un modelo de calidad para realizar la evaluación de sistemas educativos?, Fronteiras: Journal of Social, Technological and Environmental Science, 9(3), 239-260. https://doi.org/10.21664/2238-8869.2020v9i3.p239-260
Jornet-Meliá, J. M., Sancho-Álvarez, C. y Bakieva, M. (2015a). Diseño y validación del constructo teórico de justicia social percibida por el alumnado en los centros escolares. Revista Internacional de Educación para la Justicia Social, 4(2), 111-126. https://doi.org/10.15366/riejs2015.4.2
Jornet-Meliá, J. M., Sancho-Álvarez, C. y Bakieva, M. (2015b). Validación del constructo de justicia social percibida. Revista Iberoamericana de Evaluación Educativa, 4(1), 51-77. https://doi.org/10.15366/riejs2015.4.2.006
Kane, M. (2001). Current concerns in validity Theory. Journal of Educational Measurement, 38(4), 319-342. https://doi.org/10.1111/j.1745-3984.2001.tb01130.x
Llorens-Ferrer, A. J. (2022). Diseño y validación de un Instrumento para evaluar la justicia social percibida en la escuela. [Tesis doctoral]. Universitat de València.
Llorens-Ferrer, A. J., Jornet-Meliá, J. M. y Sánchez-Delgado, P. (2018). Un estudio de validación de una escala de evaluación del constructo de justicia social percibida en educación primaria y secundaria. Revista Internacional de Educación para la Justicia Social, 7(2), 145-173. https://doi.org/10.15366/riejs2018.7.2.009
Lloret-Segura, S., Ferreres-Traver, A., Hernández-Baeza, A. y Tomás-Miguel, I. (2014). El análisis factorial exploratorio de los ítems: una guía práctica, revisada y actualizada. Anales de Psicología, 30(3), 1151-1169. https://dx.doi.org/10.6018/analesps.30.3.199361
López-Gamboa, G. E., Vega, J. I. y González-González, R. J. (2023). Adaptación y validación de un instrumento para la identificación de representaciones sociales. Revista Iberoamericana de Evaluación Educativa, 16(1), 101-115. https://doi.org/10.15366/riee2023.16.1.00
Mejía-Rodríguez, A. M. y Kyriakides, L. (2022). What matters for student learning outcomes? A systematic review of studies exploring system-level factors of educational effectiveness. Review of Education, 10(3), e3374. https://doi.org/10.1002/rev3.3374
Morentin-Encina, J. (2021). Estudios perdidos, aprendizajes encontrados. análisis de aprendizajes desde el abandono educativo temprano. REICE. Revista Iberoamericana sobre Calidad, Eficacia y Cambio en Educación2021, 19(3), 103-120. https://doi.org/10.15366/reice2021.19.3.007
Murillo, F. J. (2019). ¿Qué hacemos mal en la investigación educativa? En A. de la Herrán Gascón, J. M Valle López y J. L. Villena Higueras (Coords.), ¿Qué estamos haciendo mal en la educación? Reflexiones pedagógicas para la investigación, la enseñanza y la formación (pp. 263-286). Octaedro.
Murillo, J. e Hidalgo, N. (2015). Enfoques fundamentantes de la Evaluación de Estudiantes para la Justicia Social. Revista Iberoamericana de Evaluación, 8(1), 43-61.
OCDE. (2021). Overview: What the TALIS PISA link insights imply for policy and future research. En Positive, High-achieving Students?: What Schools and Teachers Can Do. OECD Publishing. https://doi.org/10.1787/9bc425ba-en
Orden-Hoz, A. de la, y Jornet-Meliá, J. M. (2012). La utilidad de las evaluaciones de sistemas educativos: el valor de la consideración del contexto. Bordón, 64(2), 69-88.
Pittman, C. T. (2009). Multicultural education and social justice actions. Intercultural Education, 20(2), 173-186. http://doi.org/10.1080/14675980902975349
Rueda-Beltrán, M., Canales, A., Leyva-Barajas, Y. y Luna-Serrano, E. (2013). Condiciones contextuales para el desarrollo de la práctica docente. Revista Iberoamericana de Evaluación Educativa, 7(2), 171-183. https://doi.org/10.15366/riee2014.7.2.013
Ruiz-Primo, A., Jornet-Meliá, J. M. y Backhoff-Escudero, E. (2006). Acerca de la validez de los exámenes de la calidad y el logro educativos (Excale). Instituto Nacional de Evaluación Educativa.
Sainz, V. y Jacott, L. (2020). What do secondary education students understand about social justice? students representations of social justice in different regions of Spain. Interchange, 51, 1-22. http://doi.org/10.1007/s10780-020-09389-y
Sancho-Álvarez, C., Jornet Meliá, J. M. y González-Such, J. (2018). Propiedades métricas de un instrumento para evaluar el Valor Social Subjetivo de la Educación: escala SECS-EVALNEC VSE-Estudiantes-Secundaria. Revista Electrónica de Investigación Educativa, 20(3), 92-104. https://doi.org/10.24320/redie.2018.20.3.1762
Shim, S. H. (2020). Concept and direction of social justice education. The Journal of Learner-Centered Curriculum and Instruction, 20(6), 977-1007. http://doi.org/10.22251/jlcci.2020.20.6.977
Tomás, J. M., Oliver, A., Galiana, L., Sancho, P. y Lila, M. (2013). Explaining method effects associated with negatively worded items in trait and state global and domain-specific self-esteem scales. Structural Equation Modeling: A Multidisciplinary Journal, 20(2), 299-313. https://doi.org/10.1080/10705511.2013.769394