Análisis del funcionamiento diferencial de los ítems del Excale de matemáticas para tercero de secundaria

García-Medina, Adán Moisés and Martínez-Rizo, Felipe and Cordero-Arroyo, Graciela Análisis del funcionamiento diferencial de los ítems del Excale de matemáticas para tercero de secundaria. Revista Mexicana de Investigación Educativa, 2016, vol. 21, n. 71, pp. 1191-1220. [Journal article (Paginated)]

[img]
Preview
Text
analisis del funcionamiento diferencial de los ítems del EXCALE.pdf - Accepted version

Download (323kB) | Preview

English abstract

This article presents the results of a study of the items from the mathematics scale of the “Examen de la Calidad y el Logro Educativos” (“Examination of Educational Attainment and Quality”) that was given in 2012 to a national sample of 27,009 students in the third year of secondary school in Mexico. The method of detection involved Differential Item Functioning (dif), starting with the original procedure of Mantel-Haenszel with a substantial modification based on the Rasch model. The presence of dif was examined along two lines of analysis: gender and socioeconomic level. Out of the 100 items on the mathematics scale, none was identified with dif because of gender; in contrast, 18 were diagnosed with a severe dif due to socioeconomic level.

Item type: Journal article (Paginated)
Keywords: validity, instruments of evaluation, evaluation of learning, statistical analysis, Mexico
Subjects: G. Industry, profession and education. > GH. Education.
Depositing user: Phd Graciela Cordero Arroyo
Date deposited: 01 Jul 2019 17:09
Last modified: 01 Jul 2019 17:09
URI: http://hdl.handle.net/10760/34000

References

aera-apa-ncme (2014). Standards for Educational and Psychological Testing, Washington,

dc: American Educational Research Association- American Psychological Association-

National Council on Measurement in Education.

aera-ncme-apa (1999). Standards for Educational and Psychological Testing, Washington,

dc: American Educational Research Association-National Council on Measurement

in Education-American Psychological Association.

Backhoff , Eduardo; Peón, Margarita; Sánchez, Andrés y Andrade, Edgar (2006). Excale.

Manual técnico para la validación de reactivos, Ciudad de México: Instituto Nacional

para la Evaluación de la Educación.

Backhoff , Eduardo; Bouzas, Arturo; González-Montesinos, Manuel; Andrade, Edgar y

Hernández, Eduardo (2008). Factores asociados al aprendizaje de estudiantes de 3o de

primaria en México, Ciudad de México: Instituto Nacional para la Evaluación de la

Educación.

Backhoff , Eduardo; Peón, Margarita y Sánchez, Andrés (2009). Manual técnico para el

diseño de Exámenes de la Calidad y el Logro Educativos, 2a ed., Ciudad de México:

Instituto Nacional para la Evaluación de la Educación.

Basterra, María del Rosario; Trumbull, Elise y Solano-Flores, Guillermo (2011). Cultural

Validity in Assessment, Nueva York/Londres: Routledge.

Blanco, Emilio (2007). Efi cacia escolar en México: factores escolares asociados a los aprendizajes

en la educación primaria, Ciudad de México: flacso-Sede México. Disponible en:

http://fl acsoandes.edu.ec/dspace/handle/10469/1247 (consultado el 5 de noviembre

de 2014).

Boone, William; Staver, John y Yale, Melissa (2014). “Diff erential Item Functioning”, en Rasch

analysis in the human sciences, Dordrecht: Springer Netherlands, pp. 273-297. Disponible

en: http://link.springer.com.dibpxy.uaa.mx/chapter/10.1007/978-94-007-6857-4_13

(consultado el 29 de enero de 2015).

Camilli, Gregory (2006). “Test Fairness”, en R. L. Brennan (ed.), Educational measurement,

4a ed., Washington, d.c: ace-National Council on Measurement in Education, pp.

221–256.

Díaz, María Antonieta y Flores, Gustavo (2010). México en PISA 2009, Ciudad de México:

Instituto Nacional para la Evaluación de la Educación.

ets (2014). ETS Standards for quality and fairness, Princeton, nj: Educational Testing Service.

Gipps, Caroline y Stobart, Gordon (2009). “Fairness in assessment”, en C. Wyatt-Smith

y J. Cumming (eds.), Educational assessment in the 21st Century, Dordrecht: Springer

Netherlands, pp. 105–118. Disponible en: http://link.springer.com/10.1007/978-1-

4020-9964-9.

Gipps, Caroline y Stobart, Gordon (2010). “Fairness”, en P. Peterson, E. Baker y B.

MacGaw (eds.), International Encyclopedia of Education, 3a ed., Oxford: Elsevier-

Academic Press, pp. 56-60.

Gómez-Benito, Juana; Hidalgo, M. Dolores y Guilera, Georgina (2010). “El sesgo de los

instrumentos de medición. Tests justos”, Papeles del Psicólogo, vol. 31, núm. 1, pp.

75–84. Disponible en: http://www.redalyc.org/pdf/778/77812441008.pdf.

González-Montesinos, Manuel y Jornet, Jesús (2012). Procedimientos para la detección del

Funcionamiento Diferencial de Reactivos (DIF ), documento preparado para el inee,

Ciudad de México: Instituto Nacional para la Evaluación de la Educación.

Hidalgo, M. Dolores y Gómez-Benito, Juana (2010). “Diff erential Item Functioning”, en

P. Peterson, E. Baker y B. MacGaw (eds.), International Encyclopedia of Education, 3a

ed., Oxford: Elsevier-Academic Press. Disponible en: http://www.sciencedirect.com/

science/article/pii/B9780080448947002426.

inee (2007). La educación para poblaciones en contextos vulnerables. Informe anual 2007,

Ciudad de México: Instituto Nacional para la Evaluación de la Educación.

inee (2010). El derecho a la educación en México. Informe 2009, Ciudad de México:

Instituto Nacional para la Evaluación de la Educación.

inee (2014). El derecho a una educación de calidad. Informe 2014, Ciudad de México:

Instituto Nacional para la Evaluación de la Educación.

inee (2015). Primeros resultados de la Evaluación de Condiciones Básicas para la Enseñanza

y el Aprendizaje (ECEA) 2014. Primaria, Textos de divulgación, Ciudad de México:

Instituto Nacional para la Evaluación de la Educación.

Juárez, Elizabeth; Ramírez, Ricardo y Rodríguez, Gustavo (2006). Manual técnico para el

muestreo poblacional. Excale, Ciudad de México: Instituto Nacional para la Evaluación

de la Educación.

Kane, Michael (2001). “Current concerns in validity theory”, Journal of Educational

Measurement vol. 38, núm. 4, pp. 319–342. Disponible en: http://www.jstor.org/

stable/1435453.

Kane, Michael (2006). “Validation”, en R. L. Brennan (ed.), Educational measurement, 4a

ed, Washington, d.c: ace-ncme, pp. 17–64.

Kane, Michael (2013). “Validating the interpretations and uses of test scores”, Journal of

Educational Measurement, vol. 50, núm. 1, pp. 1-73. Disponible en: http://onlinelibrary.

wiley.com/doi/10.1111/jedm.12000/full (consultado el 9 de octubre de 2013).

Linacre, John y Wright, Benjamin (1987). Item Bias: Mantel-Haenszel and the Rasch Model.

Memorandum No. 39, reporte de investigación, Finnish Association of Mathematics

and Science Education Research. Disponible en: http://eric.ed.gov/?id=ED281859

(consultado el 30 de noviembre de 2014).

Martínez-Rizo, Felipe (coord.) (2015). Las pruebas ENLACE y Excale. Un estudio de validación.

Cuadernos de Investigación, Ciudad de México: Instituto Nacional para la Evaluación

de la Educación.

Martínez-Rizo, Felipe y Santos, Annette (2009) “Evaluación e investigación educativa”,

en A. Alba (ed.), ¿Qué dice la investigación educativa?, Ciudad de México: Consejo

Mexicano de Investigación Educativa, pp. 265-304. Disponible en: http://www.riieeme.

mx/docs/docs%202013/Martinez%20Rizo_2009%20Evaluacion%20educativa.pdf

(consultado el 3 de diciembre de 2014).

McNamara, Tim y Roever, Carsten (2006). “Psychometric approaches to fairness: Bias

and dif”, Language Learning, vol. 56, núm. S2, pp. 81-128. Disponible en: http://

dx.doi.org/10.1111/j.1467-9922.2006.00381.x.

Messick, Samuel (1989). “Validity”, en R. L. Brennan (ed.), Educational measurement, 3a

ed., Nueva York: ACE-National Council on Measurement in Education, pp. 13-103.

Messick, Samuel (1998). “Test validity: A matter of consequence”, Social Indicators

Research, vol. 45, núms. 1-3, pp. 35-44. Disponible en: http://dx.doi.org/10.1023/

A%3A1006964925094.

Robles, Héctor; Hernández, Juan Manuel; Zendejas, Laura y Pérez, Mónica (2013).

Panorama educativo de México 2012. Indicadores del sistema educativo nacional. Educación

básica y media superior, Ciudad de México: Instituto Nacional para la Evaluación de

la Educación.

Ruiz Cuéllar, Guadalupe; Pérez, María Guadalupe; Langford, Patricia y García-Medina,

Adán Moisés (2015). Atención a la diversidad en evaluaciones educativas externas. Muestra

de prácticas internacionales, Ciudad de México: Instituto Nacional para la Evaluación

de la Educación.

Sánchez, Andrés y Andrade, Edgar (2009). El aprendizaje en tercero de secundaria en México.

Informe sobre los resultados del Excale 09, aplicación 2008 Español, Matemáticas, Biología

y Formación cívica y ética, Ciudad de México: Instituto Nacional para la Evaluación

de la Educación.

Solano-Flores, G. (2011). “Assessing the cultural validity of assessment practices”, en

Cultural validity in assessment, Nueva York: Routledge, pp. 3-21.

Stobart, Gordon (2005). “Fairness in multicultural assessment systems”, Assessment in

Education: Principles, Policy & Practice, vol. 12, núm. 3, pp. 275-287. Disponible en:

http://dx.doi.org/10.1080/09695940500337249 (consultado el 12 de diciembre de

2014).

Th ompson, Sandra; Johnstone, Christopher y Th urlow, Martha (2002). Universal design

applied to large scale assessments, National Center on Educational Outcomes. Disponible

en: https://osepideasthatwork.org/Toolkit/pdf/Universal_Design_LSA.pdf (accedido

el 27 de noviembre de 2015).

Treviño, Ernesto; Place, Katherine; Gempp, Rene y Donoso, Francisco (2013). Análisis de

los factores latentes y su vínculo con los resultados académicos de los niños, Santiago, Chile:orealc-Unesco. Disponible en: http://www.unesco.org/new/fi leadmin/MULTIMEDIA/

FIELD/Santiago/pdf/factores-asociados-al-aprendizaje-en-el-serce.pdf (consultado el

10 de diciembre 2014).

Zamudio, Celia; Dí az, Celia y Lepe, Enrique (2012). El aprendizaje de los contenidos

curriculares de español un análisis de los resultados de los Exámenes de la Calidad y el

Logro Educativos (Excale 03, 06 y 09), Ciuda de México: Instituto Nacional para la

Evaluación de la Educación.

Zwick, Rebecca (2012). A review of ETS differential item functioning assessment

procedures: Flagging rules, minimum sample size requirements, and criterion refi nement.

ets Research Report núm. 8. Disponible en: http://onlinelibrary.wiley.com/

doi/10.1002/j.2333-8504.2012.tb02290.x/abstract (accedido el 9 de julio

de 2015).


Downloads

Downloads per month over past year

Actions (login required)

View Item View Item