<?xml version="1.0" encoding="utf-8"?>
<!DOCTYPE article
  PUBLIC "-//NLM//DTD JATS (Z39.96) Journal Publishing DTD v1.1 20151215//EN" "https://jats.nlm.nih.gov/publishing/1.1/JATS-journalpublishing1.dtd">
<article article-type="research-article" dtd-version="1.1" specific-use="sps-1.9" xml:lang="es" xmlns:mml="http://www.w3.org/1998/Math/MathML" xmlns:xlink="http://www.w3.org/1999/xlink">
	<front>
		<journal-meta>
			<journal-id journal-id-type="publisher-id">apertura</journal-id>
			<journal-title-group>
				<journal-title>Apertura (Guadalajara, Jal.)</journal-title>
				<abbrev-journal-title abbrev-type="publisher">Apert. (Guadalaj., Jal.)</abbrev-journal-title>
			</journal-title-group>
			<issn pub-type="ppub">1665-6180</issn>
			<issn pub-type="epub">2007-1094</issn>
			<publisher>
				<publisher-name>Universidad de Guadalajara, Sistema de Universidad Virtual</publisher-name>
			</publisher>
		</journal-meta>
		<article-meta>
			<article-id pub-id-type="doi">10.32870/Ap.v12n1.1698</article-id>
			<article-categories>
				<subj-group subj-group-type="heading">
					<subject>Artículos de investigación</subject>
				</subj-group>
			</article-categories>
			<title-group>
				<article-title>Evaluación estandarizada de los aprendizajes en la UABC: innovación desde el análisis psicométrico</article-title>
				<trans-title-group xml:lang="en">
					<trans-title>Standardized evaluation of learning at UABC: Psycometric analysis innovation</trans-title>
				</trans-title-group>
			</title-group>
			<contrib-group>
				<contrib contrib-type="author">
					<contrib-id contrib-id-type="orcid">0000-0003-3392-6398</contrib-id>
					<name>
						<surname>Gutiérrez Benítez</surname>
						<given-names>Jorge Gustavo</given-names>
					</name>
					<xref ref-type="aff" rid="aff1"><sup>1</sup></xref>
				</contrib>
				<contrib contrib-type="author">
					<contrib-id contrib-id-type="orcid">0000-0002-8609-4786</contrib-id>
					<name>
						<surname>Acuña Gamboa</surname>
						<given-names>Luis Alan</given-names>
					</name>
					<xref ref-type="aff" rid="aff2"><sup>2</sup></xref>
				</contrib>
			</contrib-group>
			<aff id="aff1">
				<label>1</label>
				<institution content-type="original">Estudiante del Doctorado en Innovación en Tecnología Educativa, Universidad Autónoma de Querétaro. Técnico Académico de Tiempo Completo de la Universidad Autónoma de Baja California, México. </institution>
				<institution content-type="normalized">Universidad Autónoma de Baja California</institution>
				<institution content-type="orgname">Universidad Autónoma de Baja California</institution>
				<country country="MX">Mexico</country>
			</aff>
			<aff id="aff2">
				<label>2</label>
				<institution content-type="original">Doctor en Estudios Regionales por la Universidad Autónoma de Chiapas. Docente investigador de la Universidad Autónoma de Chiapas, México.</institution>
				<institution content-type="normalized">Universidad Autónoma de Chiapas</institution>
				<institution content-type="orgname">Universidad Autónoma de Chiapas</institution>
				<country country="MX">Mexico</country>
			</aff>
			<pub-date date-type="pub" publication-format="electronic">
				<day>30</day>
				<month>06</month>
				<year>2020</year>
			</pub-date>
			<pub-date date-type="collection" publication-format="electronic">
				<season>Apr-Sep</season>
				<year>2020</year>
			</pub-date>
			<volume>12</volume>
			<issue>01</issue>
			<fpage>118</fpage>
			<lpage>131</lpage>
			<history>
				<date date-type="received">
					<day>21</day>
					<month>05</month>
					<year>2019</year>
				</date>
				<date date-type="accepted">
					<day>20</day>
					<month>11</month>
					<year>2019</year>
				</date>
				<date date-type="pub">
					<day>30</day>
					<month>03</month>
					<year>2020</year>
				</date>
			</history>
			<permissions>
				<license license-type="open-access" xlink:href="https://creativecommons.org/licenses/by-nc/4.0/" xml:lang="es">
					<license-p>Este es un artículo publicado en acceso abierto bajo una licencia Creative Commons</license-p>
				</license>
			</permissions>
			<abstract>
				<title>Resumen</title>
				<p>En virtud del fuerte impacto que ha tenido la evaluación en la enseñanza, resultan indispensables instrumentos de evaluación del aprendizaje que sean válidos y confiables. La Facultad de Idiomas de la Universidad Autónoma de Baja California no implementa una herramienta tecnológica para el desarrollo de exámenes estandarizados y su análisis psicométrico, de ahí que este trabajo analice la aplicación de exámenes estandarizados referidos a un criterio y basados en la teoría de respuesta al ítem. La metodología empleada requirió la integración de varios comités de especialistas para producir instrumentos que guiaran la construcción del examen, como la tabla de índices de relevancia curricular y la justificación de contenidos. La calidad del examen se midió mediante un desarrollo innovador que cuantificó automáticamente los criterios psicométricos de validez y confiabilidad, como el índice de dificultad de los ítems y el índice de discriminación. Los resultados permiten observar la calidad del examen e identificar el rendimiento de cada ítem, así como el nivel de dominio de la muestra de alumnos participantes, lo que contribuye a la realización de valoraciones más exactas de su desempeño académico. El instrumento mostró utilidad tanto para la evaluación formativa como para la sumativa.</p>
			</abstract>
			<trans-abstract xml:lang="en">
				<title>Abstract</title>
				<p>The evaluation has had a strong impact on teaching, which is why learning instruments that
					are valid and reliable are indispensable. The Faculty of Languages of the
					Universidad Autónoma de Baja California does not implement a technological tool
					for the development of standardized tests and their psychometric analysis.
					Therefore, this paper analyze the implementation of standardized tests referred
					to a criterion, based on the Item Response Theory. The used methodology required
					the integration of several committees of specialists to produce instruments that
					guided the construction of the test, such as the curricular relevance index
					table, the contents justification, etc. The test quality was evaluated using an
					innovating development that automatically quantified the psychometric criteria
					of validity and trustworthiness like the difficulty index of the items and the
					discrimination index. The results allow to observe the quality of the test
					identifying the yield of each item, as well as the yield and level of knowledge
					of the participant students sample, which contributes to the realization of more
					accurate assessments of their academic performance. It is concluded that the
					instrument showed utility for both formative and summative evaluation.</p>
			</trans-abstract>
			<kwd-group xml:lang="es">
				<title>Palabras clave:</title>
				<kwd>Evaluación estandarizada</kwd>
				<kwd>psicometría</kwd>
				<kwd>metodología</kwd>
				<kwd>calidad educativa</kwd>
				<kwd>examen</kwd>
			</kwd-group>
			<kwd-group xml:lang="en">
				<title>Keywords:</title>
				<kwd>Standardized evaluation</kwd>
				<kwd>psychometric</kwd>
				<kwd>methodology</kwd>
				<kwd>educational quality</kwd>
				<kwd>test</kwd>
			</kwd-group>
			<counts>
				<fig-count count="2"/>
				<table-count count="3"/>
				<equation-count count="0"/>
				<ref-count count="21"/>
				<page-count count="14"/>
			</counts>
		</article-meta>
	</front>
	<body>
		<sec sec-type="intro">
			<title>Introducción</title>
			<p>Diferentes propósitos educativos requieren diversas pruebas y usos de estas. Cuando una prueba no guarda estrecha relación con sus propósitos, difícilmente pueden efectuarse inferencias válidas a partir de sus resultados. Desarrollar exámenes para la evaluación estandarizada del aprendizaje (<xref ref-type="bibr" rid="B7">Fernández, Alcaraz y Sola, 2017</xref>; <xref ref-type="bibr" rid="B14">Márquez, 2014</xref>) es una tarea delicada, ya que evaluar con un instrumento mal diseñado puede tener un impacto negativo tanto para el sustentante como para el docente; incluso medir aspectos del conocimiento distintos a los que se tenían pensados evaluar va en detrimento de este.</p>
			<p>Para <xref ref-type="bibr" rid="B11">Hernández, Ramírez y Gamboa (2018)</xref>, uno de los retos más desafiantes para las instituciones educativas consiste en la identificación, mediante procesos evaluativos, de las capacidades, conocimientos y habilidades de los estudiantes, a fin de que se adecuen los planes, los programas y los métodos educativos para mejorar el proceso de enseñanza y aprendizaje. Lo anterior hace evidente la importancia de los aparatos metodológicos en el desarrollo o la elaboración de exámenes, pues, a través de estos, se puede asegurar la calidad del instrumento, así como su aporte para la obtención de información válida y confiable.</p>
			<p>En las instituciones de educación superior de los países industrializados es común que se utilicen evaluaciones diseñadas y validadas para propósitos de admisión. En Estados Unidos, por ejemplo, desde 1926 se emplea el Scholastic Aptitude Test para ingresar a la licenciatura; desde 1949, el Graduate Record Examination, para el posgrado; y desde 1964, el Test of English as a Foreing Languaje, para acreditar el conocimiento del inglés (<xref ref-type="bibr" rid="B20">Tirado <italic>et al.,</italic> 1997</xref>).</p>
			<p>En el caso específico de México, en 1994 se creó el Centro Nacional para la Evaluación de la Educación Superior (Ceneval) a fin de que se contará con un examen nacional de carácter indicativo que proporcionara información confiable y válida sobre los conocimientos y las habilidades que adquieren las personas como beneficiarias de los distintos programas educativos; el examen serviría como un indicador para las instituciones de educación superior que participaran. La concepción del Ceneval pretendía atender la necesidad del país,</p>
			<disp-quote>
				<p>de contar con un examen nacional indicativo previo a la licenciatura [...] [que permitiera] a las propias instituciones, a las autoridades gubernamentales y a la sociedad en general, evaluar las habilidades y los conocimientos básicos que poseen los aspirantes al cursar estudios de licenciatura y un examen general de calidad profesional [.] [que hiciera posible] conocer la pertinencia e idoneidad de la formación académica de los nuevos profesionistas del país (<xref ref-type="bibr" rid="B3">Centro Nacional para la Educación Superior, 2017, p. 14</xref>).</p>
			</disp-quote>
			<p>Las necesidades anteriores se convirtieron en lo que ahora se conoce como Examen Nacional de Ingreso a la Educación Media Superior, Examen Nacional de Ingreso a la Educación Superior, Examen Nacional de Ingreso al Posgrado y Examen General para el Egreso de la Licenciatura, mecanismos insoslayables en materia de selección, promoción y obtención de borlas académicas en el sistema educativo mexicano.</p>
			<p>Actualmente, el Examen de Competencias Básicas (Excoba), antes denominado Exhcoba (<xref ref-type="bibr" rid="B10">Góngora, Rocha y Verver, 2015</xref>; <xref ref-type="bibr" rid="B19">Pérez, Larrazolo y Backhoff, 2015</xref>), permite incluir elementos multimedia que enriquecen la experiencia evaluativa y ofrecen resultados automáticos. Este examen es una propuesta innovadora de evaluación sobre las competencias escolares, pues se aleja del formato de opción múltiple y se acerca a formas más &quot;auténticas o naturales&quot; de evaluar los aprendizajes (<xref ref-type="bibr" rid="B8">Ferreyra y Backhoff, 2016</xref>); sin embargo, la estructura del Excoba está alineada con el currículo nacional, por lo que evalúa competencias académicas básicas que se precisan en los planes de estudio de la educación obligatoria.</p>
			<p>La Facultad de Idiomas de la Universidad Autónoma de Baja California (UABC) no dispone de una herramienta tecnológica que ayude a construir exámenes estandarizados y que, a su vez, puedan valorarse mediante el análisis psicométrico. Si bien existen algunos <italic>software</italic> que permiten efectuar estos análisis, se requieren conocimientos previos por parte del usuario; además, es necesario construir archivos fuente en formatos técnicos, lo que limita su uso para personal con experiencia en estos campos del conocimiento. Lo anterior abre la posibilidad de innovar el proceso de construcción de exámenes para la evaluación en los estudiantes, y también para la medición de su calidad desde una perspectiva psicométrica de manera más eficiente.</p>
			<p>En los siguientes apartados se detalla, en primer lugar, el método elegido para guiar el desarrollo del examen, que incluye la descripción de los instrumentos utilizados para su construcción y evaluación. Se explica la interpretación numérica para los valores de calidad que se van a medir y lo que estos implican. En el apartado de resultados se muestra la valoración técnica del análisis psicométrico, que es la que determina la calidad y confiabilidad del examen, como lo es el índice de dificultad y discriminación. Asimismo, se presentan los datos obtenidos con tres de los principales instrumentos que conducen la elaboración del examen. En el último apartado se concluye la relevancia de contar con instrumentos estandarizados de evaluación y las ventajas de tener <italic>software</italic> automatizados para la aplicación, la construcción y el análisis psicométrico de los exámenes.</p>
		</sec>
		<sec>
			<title>Diseño</title>
			<p>Al tomar como referencia el objetivo general de esta investigación (diseñar una propuesta innovadora de análisis psicométrico para los exámenes estandarizados de los aprendizajes en la Facultad de Idiomas de la UABC), la metodología empleada en la estructuración de este examen fue formulada en el Instituto de Investigación y Desarrollo Educativo (<xref ref-type="bibr" rid="B4">Contreras, 2000</xref>; <xref ref-type="bibr" rid="B5">Contreras y Backhoff, 2004</xref>; <xref ref-type="bibr" rid="B6">Contreras, Encinas y De las Fuentes, 2005</xref>) con base en el modelo psicométrico que propuso originalmente <xref ref-type="bibr" rid="B18">Nitko (1994)</xref> para elaborar exámenes de gran escala de referencia criterial, orientados por el currículo.</p>
			<p>El desarrollo de estos exámenes requiere la definición de ciertas etapas propias de la metodología para elaborarlos de manera estandarizada y con calidad. Además, para las últimas dos etapas del proceso, que implican el análisis del comportamiento de los ítems, es necesario un análisis estadístico especializado que precisa un <italic>software</italic> diseñado ex profeso para efectuar estos cálculos.</p>
			<p>Un elemento importante en la metodología es la integración de comités que se encarguen de la ejecución de las actividades para cada fase del desarrollo del examen. El comité diseñador prepara el diseño general de la prueba; entre sus acciones se puede citar el análisis del currículo, la elaboración de la retícula y el análisis de los índices de relevancia curricular. Otro comité es el responsable de las especificaciones para la construcción de los ítems y de detallar la estructura estándar que estos deben mostrar.</p>
			<p>El comité de ítems tiene la encomienda de producirlos de acuerdo con las características señaladas en las especificaciones. El comité de jueceo realiza una valoración de diferentes aspectos, como la calidad técnica del ítem, la validez cognitiva, el formato y la edición, entre otros. El último comité es el analítico informático, que lleva a cabo los procesos de evaluación psicométrica de los ítems mediante el procesamiento de la información con un <italic>software</italic> especializado.</p>
			<p>Otro detalle importante sobre la integración de estos comités es que se conforman por un docente especialista en la asignatura, un docente experto en el currículo, un docente con años de experiencia en educación y uno con amplia práctica en evaluación. Estos comités, a su vez, pueden preparar o capacitar a otros docentes para que participen en las actividades que se desempeñan.</p>
			<p>Con base en lo anterior, la muestra a la que se aplicó este examen se integró de 394 alumnos, quienes cursan el primer semestre del tronco común de la Licenciatura en Idiomas. La asignatura para la cual se diseñó el examen fue Morfología de la segunda lengua, que está seriada con Morfosintaxis, ambas ponderadas con la más alta relevancia curricular para el tronco común. El género de la población fue 50% masculino y 50% femenino; de estos, se eligió 33% de alumnos con bajo rendimiento (menores o iguales a 6.9), 33% de alumnos con rendimiento regular (entre 7 y 8.9) y 34% de alumnos con alto rendimiento (mayores o iguales a 9).</p>
			<p>Las variables que se midieron para valorar la calidad del examen son las establecidas por la teoría de respuesta al ítem (<xref ref-type="bibr" rid="B9">Gómez, 2015</xref>; <xref ref-type="bibr" rid="B16">Mola <italic>et al.,</italic> 2013</xref>; <xref ref-type="bibr" rid="B17">Muñiz, 2010</xref>; <xref ref-type="bibr" rid="B15">Mayaute y Vázquez, 2010</xref>; Lord y Novick, citado en <xref ref-type="bibr" rid="B12">Kramp, 2008</xref>), la cual plantea un modelo y un conjunto de criterios que, de ser alcanzados, garantizan la precisión en la medida del dominio de los estudiantes sobre un determinado aprendizaje. Estos criterios son el índice de dificultad del ítem (p), el índice de discriminación, la correlación ítem-total y la relación opción-total de los distractores.</p>
			<p>El índice de dificultad se mide en un rango de valores que va de 0 a 1; entre más cerca se encuentre el valor del índice a 1, la pregunta es más fácil de contestar, y viceversa. Sucede lo mismo con el índice de discriminación del ítem, ya que se mide entre 0 y 1, y la discriminación será mejor entre más cercano a 1 se encuentre este valor. La correlación ítem-total como mínimo debe situarse en un valor de .25, y entre más cerca esté al 1, el ítem guardará mayor relación con la probabilidad más alta de obtener un buen puntaje en todo el examen si este es contestado correctamente.</p>
			<sec>
				<title><italic>Instrumentos</italic></title>
				<p>El sustento rector en la construcción del examen es la carta descriptiva de la asignatura, documento que establece el universo de conocimientos a evaluar. Por esto, a la prueba se le conoce como examen referido a un criterio (<xref ref-type="bibr" rid="B13">Leyva, 2011</xref>); por criterio se entiende específicamente los conocimientos a los que se enfoca el examen. Algunos de los instrumentos empleados en el desarrollo son producto de la ejecución de etapas propias de la metodología para elaborar exámenes estandarizados, por ejemplo, la retícula, la justificación de contenido y las especificaciones de la prueba.</p>
				<p>Uno de los instrumentos especializados indispensable para las etapas finales del desarrollo son aquellos <italic>software</italic> que permiten efectuar el análisis psicométrico. Los utilizados fueron ITEMAN (<xref ref-type="bibr" rid="B2">Cechova, Neubauer y Sedlacik, 2014</xref>; <xref ref-type="bibr" rid="B21">Thoe, Fook &amp; Thah, 2008</xref>) de la compañía Assessment Systems Corporation, así como TAP, publicado por <xref ref-type="bibr" rid="B1">Brooks y Johanson (2003)</xref>. También, se recurrió a un <italic>software</italic> nuevo llamado SIEXAES, que permite integrar en un mismo sistema el espacio para la construcción digital del examen y la funcionalidad de generar de modo automático el análisis psicométrico.</p>
			</sec>
		</sec>
		<sec sec-type="results">
			<title>Resultados</title>
			<p>Uno de los productos que arroja la aplicación de la metodología y que tiene amplia utilidad para los docentes es la retícula. Este instrumento permitió apreciar de manera completa cómo los contenidos temáticos de la asignatura se relaciónaban entre sí, e identificar aquellos que tenían un mayor impacto para concretar otros conocímientos.</p>
			<p>La <xref ref-type="fig" rid="f1">Figura 1</xref> ejemplifica un pequeño segmento de la
				retícula, en la que se puede observar mediante las flechas cómo los contenidos
				temáticos de la primera unidad guardan relación con los de la unidad 2, y cómo
				algunos de estos tienen un número más amplio de relaciones con temas de unidades
				anteriores o posteriores. Este tipo de contenidos originan un mayor impacto en el
				aprendizaje del estudiante.</p>
			<p>
				<fig id="f1">
					<label>Figura 1</label>
					<caption>
						<title>Ejemplo de la retícula de la materia de Morfología de la segunda lengua.</title>
					</caption>
					<graphic xlink:href="2007-1094-apertura-12-01-118-gf1.gif"></graphic>
				</fig>
			</p>
			<p>El producto correspondiente a los resultados del índice de relevancia curricular (IRC) de los
				contenidos temáticos se muestra en la <xref ref-type="table" rid="t1">Tabla
				1</xref>, mientras que la jerarquización de estos, a partir del mayor IRC, se
				reporta en la <xref ref-type="table" rid="t2">Tabla 2</xref>, la cual presenta los
				contenidos temáticos, así como las prácticas que debían realizarse en la
				asignatura.</p>
			<p>
				<table-wrap id="t1">
					<label>Tabla 1</label>
					<caption>
						<title>Atributos valorados para obtener el índice de relevancia curricular</title>
					</caption>
					<table>
						<colgroup>
							<col/>
							<col/>
							<col/>
							<col/>
							<col/>
							<col/>
						</colgroup>
						<thead>
							<tr>
								<th align="center" style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid; background-color: #ebd4d5">Contenido</th>
								<th align="center" style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid; background-color: #ebd4d5">Contribución al logro de la competencia de la unidad 20%</th>
								<th align="center" style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid; background-color: #ebd4d5">Dosificación (cuantía de contenidos implícitos) 10%</th>
								<th align="center" style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid; background-color: #ebd4d5">Carga horaria (asignada 0 estimada para su aprendizaje) 10%</th>
								<th align="center" style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid; background-color: #ebd4d5">Relevancia disciplinaria 20%</th>
								<th align="center" style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid; background-color: #ebd4d5">Indice de relevancia curricular</th>
							</tr>
						</thead>
						<tbody>
							<tr>
								<td align="left" style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">1.1.1 Definition of the discipline</td>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">0.20</td>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">0.10</td>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">0.10</td>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">0.20</td>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">0.600</td>
							</tr>
							<tr>
								<td align="left" style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">1.1.2 History</td>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">0.13</td>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">0.07</td>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">0.07</td>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">0.13</td>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">0.400</td>
							</tr>
							<tr>
								<td align="left" style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">1.2.1 Free forms</td>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">0.20</td>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">0.10</td>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">0.07</td>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">0.13</td>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">0.533</td>
							</tr>
							<tr>
								<td align="left" style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">1.2.2 Signs and morphemes</td>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">0.20</td>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">0.10</td>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">0.10</td>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">0.20</td>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">0.633</td>
							</tr>
						</tbody>
					</table>
					<table-wrap-foot>
						<fn id="TFN1">
							<p>Fuente: elaboración propia.</p>
						</fn>
					</table-wrap-foot>
				</table-wrap>
			</p>
			<p>
				<table-wrap id="t2">
					<label>Tabla 2</label>
					<caption>
						<title>Estadísticas descriptivas del examen</title>
					</caption>
					<table>
						<colgroup>
							<col/>
							<col/>
							<col/>
							<col/>
							<col/>
							<col/>
							<col/>
							<col/>
						</colgroup>
						<thead>
							<tr>
								<th align="center" style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid; background-color: #ebd4d5">Items</th>
								<th align="center" style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid; background-color: #ebd4d5">Medía de aciertos</th>
								<th align="center" style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid; background-color: #ebd4d5">Desviación estándar</th>
								<th align="center" style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid; background-color: #ebd4d5">Puntaje mínimo</th>
								<th align="center" style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid; background-color: #ebd4d5">Puntaje máximo</th>
								<th align="center" style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid; background-color: #ebd4d5">Medía del valor ρ</th>
								<th align="center" style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid; background-color: #ebd4d5">Medía de rpBís</th>
								<th align="center" style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid; background-color: #ebd4d5">Alpha</th>
							</tr>
						</thead>
						<tbody>
							<tr>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">63</td>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">40.211</td>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">7.242</td>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">27</td>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">61</td>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">0.638</td>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">0.212</td>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">0.796</td>
							</tr>
						</tbody>
					</table>
					<table-wrap-foot>
						<fn id="TFN2">
							<p>Fuente: elaboración propia.</p>
						</fn>
					</table-wrap-foot>
				</table-wrap>
			</p>
			<p>La <xref ref-type="table" rid="t1">Tabla 1</xref> indica algunos de los criterios que se
				valoraron para obtener el IRC. Cada uno de estos atributos para el universo temático
				de la asignatura fue evaluado y se observó cómo ciertos temas registraban una
				relevancia tan baja que, si se omitían, prácticamente no habría ninguna afectación
				en el aprendizaje del estudiante. Esto resulta interesante si se centra la atención
				en el diseño de los currículos de la asignatura, cuyo contenido temático, según los
				resultados mencionados, contribuye poco a lo que el estudiante debe conocer y saber
				hacer.</p>
			<p>Debido a que el propósito de estos exámenes es evaluar el dominio de un determinado conocimiento que los estudiantes poseen, se utiliza una cantidad más grande de ítems de contenidos temáticos que posean un mayor IRC, porque este tipo de temas requieren la integración de una mayor cantidad de conocimientos y, por ende, supone un grado de dominio más alto. Estos fueron algunos de los resultados obtenidos en las primeras etapas de la metodología; sin embargo, para las siguientes etapas los resultados fueron más técnicos, ya que implicaron la valoración de mayor peso en el desarrollo del examen y la medición de la calidad a través del análisis psicométrico.</p>
			<p>El análisis psicométrico que se derivó de la aplicación del pilotaje mostró en el ítem los
				diferentes criterios de calidad que se deseaban medir. En total, 63 ítems se
				aplicaron para el examen de Morfología de la segunda lengua; para cada uno se emitió
				un juicio a fin de determinar si se aceptaban o no, y las razones de este dictamen.
				Las estadísticas descriptivas generales del examen se presentan en la <xref
					ref-type="table" rid="t2">Tabla 2</xref>.</p>
			<p>Entre los datos importantes de la <xref ref-type="table" rid="t2">Tabla 2</xref> se encuentra
				el valor medio de <italic>p</italic> o el índice de dificultad del examen; este
				valor se ubicó en .638, lo que indica que el examen es de dificultad media con una
				leve tendencia a ser más fácil que regular. También destaca que, en promedio, se
				aciertan 40 de las 63 preguntas y el logro de una puntuación cercana a la perfecta
				al alcanzar 61 aciertos.</p>
			<p>Ahora bien, la <xref ref-type="table" rid="t3">Tabla 3</xref> detalla los resultados de
				algunos ítems. Se observa, por ejemplo, el ítem 25, cuya dificultad es muy baja, es
				decir, es muy fácil de responder; lo anterior se concluye porque el valor
					<italic>p</italic> del ítem es de .789. Como se mencionó en el apartado
				anterior, entre más cercano a 1 se encuentre este valor, más fácil de responder es
				el ítem o la pregunta.</p>
			<p>
				<table-wrap id="t3">
					<label>Tabla 3</label>
					<caption>
						<title>Análisis psicométrico de los ítems</title>
					</caption>
					<table>
						<colgroup>
							<col/>
							<col/>
							<col/>
							<col/>
							<col/>
						</colgroup>
						<thead>
							<tr>
								<th align="center" style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid; background-color: #ebd4d5">Análisis</th>
								<th align="center" style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid; background-color: #ebd4d5">IT25</th>
								<th align="center" style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid; background-color: #ebd4d5">IT26</th>
								<th align="center" style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid; background-color: #ebd4d5">IT28</th>
								<th align="center" style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid; background-color: #ebd4d5">IT48</th>
							</tr>
						</thead>
						<tbody>
							<tr>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">Dificultad (<italic>p</italic>)</td>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">Ítem fácil con p=.789</td>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">Dificultad difícil con .395</td>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">Ítem muy difícil, con una <italic>p</italic>=.289</td>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">Ítem muy difícil con .21</td>
							</tr>
							<tr>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">Discriminación</td>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">Discriminación regular con .26</td>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">Discriminación muy buena .53</td>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">Discriminación buena con .33</td>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">Discriminación negativa con .16</td>
							</tr>
							<tr>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">rpBis</td>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">Buena con .264</td>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">Muy buena con .432</td>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">Baja con .132</td>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">Negativa con .271</td>
							</tr>
							<tr>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">Distractor</td>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">Los distractores funcionaron bien; se obtuvieron diferencias de -.173 y -.091.</td>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">Los distractores funcionaron bien; se obtuvieron diferencias de -.173 y -.355.</td>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">Los distractores funcionaron bien, se obtuvieron diferencias de -.064 y -.264.</td>
								<td style="border-top: 1px solid; border-bottom: 1px solid; border-left: 1px solid; border-right: 1px solid">Los distractores fueron elegidos, pero en igual proporción por el grupo alto y bajo</td>
							</tr>
						</tbody>
					</table>
					<table-wrap-foot>
						<fn id="TFN3">
							<p>Fuente: elaboración propia.</p>
						</fn>
					</table-wrap-foot>
				</table-wrap>
			</p>
			<p>El poder discriminatorio del ítem es regular, con un valor obtenido de .26; además, el contestarlo correctamente tiende a guardar relación con los buenos puntajes en todo el examen (rpBis de .264).</p>
			<p>Otro factor que se observa en el ítem 25 son los distractores o las respuestas incorrectas. Estos fueron elegidos en todos los casos y con mayor proporción por los grupos bajos (alumnos con escaso rendimiento, promedios menores o iguales a 6.9) o los que obtuvieron menor nota al final del examen. Para saber si un ítem discrimina bien, o no, los valores alcanzados de rpBis para la respuesta correcta deben ser mayores de .2; las respuestas incorrectas o distractores deben ser negativos, en caso de ser positivos, deben contar con valores menores que los de la respuesta correcta. Aunado a esto, también se debe considerar que todos los distractores tienen que ser elegidos.</p>
			<p>El ítem 25 es el ideal que se busca en un examen, ya que cumple correctamente con los estándares de calidad para todos los criterios de valoración mencionados. La gráfica ilustra el comportamiento del ítem.</p>
			<p>
				<fig id="ch1">
					<label>Gráfica.</label>
					<caption>
						<title>Comportamiento del ítem 25.</title>
					</caption>
					<graphic xlink:href="2007-1094-apertura-12-01-118-gch1.gif"/>
				</fig>
			</p>
			<p>En la gráfica, las tres respuestas posibles se representan con una línea de color rojo, una negra y una rosa. El eje <italic>χ</italic> u horizontal simboliza a los grupos bajo, medio y alto, mientras que el <bold>y</bold> o vertical, a la población. La línea roja corresponde a la respuesta correcta y, como vemos en la gráfica, esta fue elegida en mayor proporción por el grupo alto, que estaría situado entre las categorías 4 y 5; su elección fue menor por el grupo bajo, que se ubica entre las categorías 1 y 2. La pregunta presentó una dificultad muy baja, 30 de las 38 personas lo acertaron, pero aun así el ítem mantuvo una mayor proporción de aciertos para el grupo alto.</p>
			<p>Los resultados mostrados se obtuvieron a partir del análisis psicométrico realizado con el <italic>software</italic> SIEXAES, el cual generó automáticamente los reportes técnicos con los estadísticos descriptivos del examen en general -como ya se mostró-, y los criterios de confiabilidad y validez que se establecieron como indicadores de calidad, el índice de dificultad de cada ítem, el poder diseliminatório, la correlación ítem-total y el funcionamiento de cada distractor. Las gráficas se elaboraron con base en el análisis efectuado con el <italic>software</italic> ITE MAN.</p>
		</sec>
		<sec sec-type="discussion">
			<title>Discusiones</title>
			<p>Después de la aplicación de la metodología para la construcción del examen estandarizado y la realización del análisis psicométrico, se identificó con claridad cómo ciertos reactivos en el examen presentaban indicadores de calidad aceptables, mientras que otros aún necesitaban ser corregidos. El proceso de diseñar y construir el examen aportó información suficiente para determinar si el instrumento era válido y confiable, pero no solo mediante el análisis del examen, sino también la herramienta tecnológica utilizada para su construcción, aplicación y posterior análisis. Este último rubro permitirá, en breve, dar respuesta al objetivo principal de la investigación: el diseño de una propuesta tecnológica para el análisis psicométrico de exámenes estandarizados.</p>
			<p>La intención de la herramienta propuesta es eliminar las dificultades que representa para un docente llevar a cabo un análisis psicométrico de un examen, porque el <italic>software</italic> que comúnmente se emplea con estos fines requiere de la experiencia por parte de los usuarios, tanto en su manejo como en la interpretación de los resultados, ya que los reportes que se generan son técnicos.</p>
			<p>De esta manera, después de aplicar cada una de las fases propuestas en la metodología, se obtuvo una serie de productos que permitieron conocer mejor el universo de conocimientos que se tenían que evaluar en el examen, así como identificar, de una manera gráfica y cuantificable, la importancia de cada uno de los contenidos temáticos de la asignatura específica.</p>
			<p>Por otro lado, la integración de los distintos comités que participaron en el diseño del examen fue un gran aporte para el trabajo, pues en estos se sustentó, con mayor precisión, cada uno de los elementos de la propuesta aquí presentada. Los comités se constituyeron a partir de la experiencia de los docentes participantes en los campos del diseño general de la prueba, las especificaciones, los ítems, el jueceo y el aparato analítico informático, con lo que se obtuvieron juicios más objetivos del examen que enriquecieron las etapas de justificación de contenidos, la elaboración de especificaciones de los ítems, la evaluación de estos, entre otras etapas.</p>
			<p>Aún existen elementos que deben ser mejorados, por ejemplo, se advirtió que de los 63 ítems que integran el examen, en doce existen deficiencias; de estos, ocho corresponden al índice de discriminación, por lo que hay que analizar las respuestas que esos ítems consideran. De igual forma, todavía deben producirse más ítems para el examen a fin de generar diferentes versiones de este.</p>
			<p>También es importante dar seguimiento a las observaciones realizadas durante la elaboración de la tabla con los índices de relevancia curricular y la retícula sobre aquellos contenidos temáticos que aportan poco al aprendizaje de los estudiantes, ya que este tipo de situaciones repercuten de modo directo en la calidad del diseño del currículo de la asignatura. Asimismo, se debe dar continuidad a las sugerencias y valoraciones que los alumnos y maestros participantes formularon sobre el <italic>software</italic> SIEXAES para mejorar la calidad de la herramienta y cumplir de forma más eficiente con los criterios de usabilidad evaluados, como el tamaño de los objetos, los colores, los botones de navegación, entre otros elementos.</p>
			<p>Al retomar el aspecto educativo de este trabajo, se optó por utilizar exámenes referidos a un criterio, ya que la intención principal del examen es explorar el nivel de dominio del estudiante sobre un universo de conocimientos claramente delimitado, es decir, medir las habilidades y los conocimientos que este domina, o no, en un campo específico del conocimiento. Como se mencionó, el criterio para guiar el desarrollo del examen es el currículo de la asignatura en cuestión, el cual especifica los contenidos temáticos a evaluar y su secuencia. Todas las decisiones de lo que se evaluará y la forma en que se hará están orientadas por lo establecido en el currículo. Por lo anterior, se tiene la ventaja de describir con precisión y claridad lo que se intenta medir.</p>
			<p>A través de este tipo de exámenes, se obtienen puntuaciones individuales asociadas solo al desempeño del estudiante, y no en función del desempeño del grupo al que el estudiante pertenece, como supone la evaluación normativa. Además, las puntuaciones particulares de cada alumno ofrecen la posibilidad de diseñar estrategias individuales de mejora, situación que resulta complicada con los exámenes normativos.</p>
			<p>El punto principal de la evaluación criterial es la representatividad del elemento respecto al universo de medida, entendida en el aspecto educativo como congruencia entre el ítem y el objetivo; así, el estudiante puede tener la certeza de que lo que se le evalúa es en realidad lo que aprendió y no otro aspecto del conocimiento ajeno a su aprendizaje, mientras que para el docente significa la seguridad de que el puntaje obtenido en el examen refleja exactamente el aprendizaje del alumno en relación con lo enseñado en clases y conforme a los contenídos temáticos determinados en el currículo.</p>
			<p>En otro momento, fue necesario para la investigación recuperar la opinión de los docentes y alumnos participantes en el pilotaje del examen, para lo cual se aplicó una encuesta de satisfacción a una muestra con base en el criterio de la conveniencia; es decir, que de manera voluntaria quisieran emitir sus comentarios y percepciones acerca de este examen. Se obtuvieron estos comentarios:</p>
			<disp-quote>
				<p>Estudiante 1: Me gustó el formato de opción múltiple, facilita responder el examen.</p>
			</disp-quote>
			<disp-quote>
				<p>Estudiante 2: Las preguntas fueron claras y sin tantos rodeos, como esas que son capciosas.</p>
			</disp-quote>
			<disp-quote>
				<p>Estudiante 3: Siento que el examen realmente puso a prueba lo que sabía de la materia, creo que abarcó todos los temas vistos.</p>
			</disp-quote>
			<disp-quote>
				<p>Docente 1: Un examen que sigue un método cuantificable para determinar si una pregunta en un examen está bien hecha o no, me da la tranquilidad de saber que si un alumno mío responde correctamente a dicha pregunta es porque realmente sabe lo que se le está preguntando y, de cierta manera, me dice que mis estrategias de aprendizaje han ayudado a que él pueda contestar correctamente.</p>
			</disp-quote>
			<disp-quote>
				<p>Docente 2: La puntuación final del examen me hace saber si en general enseñé bien o no lo que se supone que se debe ver en la materia, pensando en que la clase se apega a lo que dice la carta descriptiva de la materia.</p>
			</disp-quote>
			<disp-quote>
				<p>Docente 3: En un principio era escéptico de la calidad del examen, pero después de observar que cada tema se evaluó de acuerdo a la experiencia de más de un docente, que se justificó cada pregunta, que no fueron los mismos maestros los que hicieron todo el examen sino que participaron diferentes comités durante todo el proceso, y que después de eso se aplicaron cálculos para demostrar lo que debía venir y lo que no en el examen, me hizo darme cuenta que la calificación que un alumno obtuviera en el examen en realidad era la que merecía tener, que ese número significaba realmente lo que sabía de la materia.</p>
			</disp-quote>
			<p>Con los comentarios anteriores queda manifiesta la importancia de contar con exámenes estandarizados. Sin importar si existe &quot;n&quot; cantidad de versiones de un examen, cada una de estas evalúan de igual forma el aprendizaje del estudiante; no hay exámenes más difíciles o más fáciles. Así, el docente y el alumno tienen la seguridad de que el instrumento es válido y confiable.</p>
		</sec>
		<sec sec-type="conclusions">
			<title>Conclusiones</title>
			<p>En esta primera aproximación, el <italic>software</italic> arrojó datos con los cuales se pueden realizar inferencias importantes; por ejemplo, una de ellas se relaciona con la cantidad de aciertos promedio en el examen. En este sentido, el grupo 2 obtuvo una mejor cantidad de aciertos en promedio, al superar al grupo 1 por casi diez puntos. Sin embargo, en la última unidad de la asignatura, el grupo 1 alcanzó un mejor promedio (6.37) en relación con el 2 (5.53).</p>
			<p>El caso anterior es el tipo de situaciones que las áreas de coordinación académica necesitan identificar para tomar acciones tanto preventivas como correctivas en el proceso de aprendizaje de los estudiantes. La intención de recabar estos datos busca incentivar el proceso de análisis para conocer las causas de estas variaciones en los resultados, que pueden indicar situaciones como absentismo del docente durante ese período, algunas estrategias de aprendizaje mal empleadas, entre otros factores.</p>
			<p>Un ejemplo de esas acciones o decisiones por parte de estas áreas de coordinación pueden ser los cursos de capacitación para los docentes, observaciones o sanciones por malas prácticas o, por el contrario, reconocimientos por buen desempeño. Con los reportes técnicos y especializados que el <italic>software</italic> SIEXAES genera, el docente puede identificar, en cuanto al contenido temático, las deficiencias de sus estudiantes o aspectos del conocimiento en concreto que no dominan y, en consecuencia, incentiva la mejora y el desarrollo de sus competencias docentes. De igual forma, el estudiante puede observar su rendimiento con mayor detalle, identificar cuales áreas domina y cuáles no y, sobre todo, tener la seguridad de que el instrumento con el que es evaluado es confiable, que realmente se le evalúan los dominios de un conocimiento que están relacionados de manera directa con la asignatura.</p>
			<p>Es preciso mencionar que una educación de calidad no será objeto de medición únicamente por los tipos de instrumentos de evaluación que se utilicen, ya que implica otros procesos que, de igual modo, deberían someterse a valoraciones. El examen constituye por sí solo una muestra de tareas evaluativas representativas del dominio de un contenido en específico. En este sentido, se habla, por ejemplo, de las estrategias de aprendizaje que se emplean en el curso, la pertinencia de los contenidos temáticos que se estudian, los niveles cognitivos que se alcanzan, las estrategias de enseñanza del docente, entre muchos otros elementos que, a manera de sinergia, puedan resultar en una educación de calidad.</p>
			<p>En el aprendizaje basado en el enfoque constructivista, por ejemplo, se le da mayor importancia al proceso de enseñanza y aprendizaje que a los propios contenidos; esto implica, entonces, que se valore más lo que un estudiante debe hacer que lo que debe saber. Lo anterior puede ser la causa de que algunos contenidos temáticos de la asignatura resultaran con índices de relevancia curricular tan bajos, temas que, como se mencionó pueden ser omitidos y no tendrían mayor impacto sobre el aprendizaje del estudiante. Puede ser el caso que, al diseñar el contenido temático de la asignatura, se priorizó lo que el estudiante debe ser capaz de hacer en relación con lo que debe saber.</p>
			<p>Al considerar la evaluación desde el enfoque cognitivista, se requiere que todos los instrumentos que se vayan a utilizar tengan como fin objetivos cognitivos, lo que implica que los mismos ítems o reactivos de un examen reflejen la relación con estos objetivos. Los resultados obtenidos en el análisis técnico mostraron aspectos relacionados con este enfoque; por ejemplo, la diferencia del dominio logrado en la unidad tres entre los dos grupos fue notoria, si se parte de la suposición de que los estudiantes de ambos grupos tuvieron la misma dosificación de horas para aprender esos temas. Una primera aproximación a identificar la causa de esa diferencia puede ser el tipo de estrategias de aprendizaje empleadas por los docentes, o bien, la irregular o inadecuada dosificación de horas, que, de nuevo, expone un posible mal diseño en el currículo.</p>
			<p>La investigación, al considerar estos primeros resultados y a pesar de que aún falta calibrar algunos aspectos del examen, ofreció información relevante: identificó el nivel de dominio que poseen de la asignatura en cuestión, reveló que para un contenido temático en particular existió una diferencia marcada entre un grupo y otro, y señaló posibles deficiencias en el currículo de la asignatura por incluir temas que no tenían relevancia curricular o secuencias temáticas mal empleadas.</p>
			<p>El examen, además de aportar a la evaluación formativa de los estudiantes, también lo hace para la evaluación sumativa; por ejemplo, puede ayudar a predecir el éxito de un estudiante en cursos posteriores referidos a la asignatura, sobre todo cuando obtiene niveles de dominio altos en contenidos temáticos que están conectados con aprendizajes posteriores y, de cierta manera, la garantía del estudiante de que, al realizar su examen, posee un determinado dominio.</p>
			<p>Es un hecho conocido que para una institución educativa es importante obtener información del rendimiento que tienen sus estudiantes, estimar el aprendizaje logrado y comparar esos logros con las metas establecidas. Por esta razón, es indispensable contar con instrumentos de evaluación del aprendizaje que sean válidos y confiables; es decir, que estén correctamente diseñados y que ofrezcan una seguridad sobre lo evaluado en términos de conocimientos y habilidades para los cuales se planteó. </p>
		</sec>
	</body>
	<back>
		<ref-list>
			<title>Referencias bibliográficas</title>
			<ref id="B1">
				<mixed-citation>Brooks, Gordon &amp; Johanson, George. (2003). TAP: Test Analysis Program. <italic>Applied Psychological Measurement</italic>, 27(4), 303-304. https://doi.org/10.1177/0146621603027004007.</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>Brooks</surname>
							<given-names>Gordon</given-names>
						</name>
						<name>
							<surname>Johanson</surname>
							<given-names>George</given-names>
						</name>
					</person-group>
					<year>2003</year>
					<article-title>TAP: Test Analysis Program</article-title>
					<source>Applied Psychological Measurement</source>
					<volume>27</volume>
					<issue>4</issue>
					<fpage>303</fpage>
					<lpage>304</lpage>
					<pub-id pub-id-type="doi">10.1177/0146621603027004007</pub-id>
				</element-citation>
			</ref>
			<ref id="B2">
				<mixed-citation>Cechova, Ivana; Neubauer, Jiri &amp; Sedlacik, Marek. (2014). Computer-adaptive testing: Item analysis and statistics for effective testing, in European Conference on e-Learning. Academic Conferences International Limited.</mixed-citation>
				<element-citation publication-type="confproc">
					<person-group person-group-type="author">
						<name>
							<surname>Cechova</surname>
							<given-names>Ivana</given-names>
						</name>
						<name>
							<surname>Neubauer</surname>
							<given-names>Jiri</given-names>
						</name>
						<name>
							<surname>Sedlacik</surname>
							<given-names>Marek</given-names>
						</name>
					</person-group>
					<year>2014</year>
					<source>Computer-adaptive testing: Item analysis and statistics for effective testing</source>
					<conf-name>European Conference on e-Learning. Academic Conferences International Limited</conf-name>
				</element-citation>
			</ref>
			<ref id="B3">
				<mixed-citation>Centro Nacional de Evaluación para la Educación Superior. (2017). Origen y evolución del Ceneval. Recuperado de: <ext-link ext-link-type="uri" xlink:href="http://www. ceneval.edu.mx/documents/20182/49855/OrigenEvolucionCe-neval_2018/f8406659-7d28-4960-9ec1-964d90c76e4c">http://www. ceneval.edu.mx/documents/20182/49855/OrigenEvolucionCe-neval_2018/f8406659-7d28-4960-9ec1-964d90c76e4c</ext-link>
				</mixed-citation>
				<element-citation publication-type="book">
					<person-group person-group-type="author">
						<collab>Centro Nacional de Evaluación para la Educación Superior</collab>
					</person-group>
					<year>2017</year>
					<source>Origen y evolución del Ceneval</source>
					<ext-link ext-link-type="uri" xlink:href="http://www. ceneval.edu.mx/documents/20182/49855/OrigenEvolucionCe-neval_2018/f8406659-7d28-4960-9ec1-964d90c76e4c">http://www. ceneval.edu.mx/documents/20182/49855/OrigenEvolucionCe-neval_2018/f8406659-7d28-4960-9ec1-964d90c76e4c</ext-link>
				</element-citation>
			</ref>
			<ref id="B4">
				<mixed-citation>Contreras Niño, Luis Ángel. (2000). Desarrollo y pilotaje de un examen de español para la educación primaria en Baja California (tesis de maestría). Instituto de Investigación y Desarrollo Educativo: Universidad Autónoma de Baja California, Campus Ensenada. Recuperado de: <ext-link ext-link-type="uri" xlink:href="http://iide.ens.uabc.mx/images/pdf/tesis/MCE/Tesis%20MCE%20Luis-Angel-Contreras-Nino.pdf">http://iide.ens.uabc.mx/images/pdf/tesis/MCE/Tesis%20MCE%20Luis-Angel-Contreras-Nino.pdf</ext-link>
				</mixed-citation>
				<element-citation publication-type="thesis">
					<person-group person-group-type="author">
						<name>
							<surname>Niño</surname>
							<given-names>Contreras</given-names>
						</name>
						<name>
							<surname>Ángel</surname>
							<given-names>Luis</given-names>
						</name>
					</person-group>
					<year>2000</year>
					<source>Desarrollo y pilotaje de un examen de español para la educación primaria en Baja California</source>
					<comment content-type="degree">maestría</comment>
					<publisher-name>Instituto de Investigación y Desarrollo Educativo, Universidad Autónoma de Baja California</publisher-name>
					<ext-link ext-link-type="uri" xlink:href="http://iide.ens.uabc.mx/images/pdf/tesis/MCE/Tesis%20MCE%20Luis-Angel-Contreras-Nino.pdf">http://iide.ens.uabc.mx/images/pdf/tesis/MCE/Tesis%20MCE%20Luis-Angel-Contreras-Nino.pdf</ext-link>
				</element-citation>
			</ref>
			<ref id="B5">
				<mixed-citation>Contreras Niño, Luis Ángel y Backhoff Escudero, Eduardo. (2004). Metodología para elaborar exámenes criteriales alineados al currículo, en Sandra Castañeda (ed.), <italic>Educación aprendizaje y cognición, teoría en la práctica</italic>. México: Manual Moderno.</mixed-citation>
				<element-citation publication-type="book">
					<person-group person-group-type="author">
						<name>
							<surname>Contreras Niño</surname>
							<given-names>Luis Ángel</given-names>
						</name>
						<name>
							<surname>Backhoff Escudero</surname>
							<given-names>Eduardo</given-names>
						</name>
					</person-group>
					<year>2004</year>
					<chapter-title>Metodología para elaborar exámenes criteriales alineados al currículo</chapter-title>
					<person-group person-group-type="editor">
						<name>
							<surname>Castañeda</surname>
							<given-names>Sandra</given-names>
						</name>
					</person-group>
					<source>Educación aprendizaje y cognición, teoría en la práctica</source>
					<publisher-loc>México</publisher-loc>
					<publisher-name>Manual Moderno</publisher-name>
				</element-citation>
			</ref>
			<ref id="B6">
				<mixed-citation>Contreras Niño, Luis Ángel; Encinas Bringas, José Álvaro y Fuentes Lara, Maximiliano De las. (2005). Evaluación colegiada del aprendizaje en la Universidad Autónoma de Baja California: el caso del examen de Matemáticas I de la Facultad de Ingeniería Mexicali, en <italic>Memoria del</italic> 
 <italic>VIII</italic> 
 <italic>Congreso Nacional de Investigación Educativa</italic>. México: COMIE.</mixed-citation>
				<element-citation publication-type="confproc">
					<person-group person-group-type="author">
						<name>
							<surname>Contreras Niño</surname>
							<given-names>Luis Ángel</given-names>
						</name>
						<name>
							<surname>Encinas Bringas</surname>
							<given-names>José Álvaro</given-names>
						</name>
						<name>
							<surname>Fuentes Lara</surname>
							<given-names>Maximiliano De las</given-names>
						</name>
					</person-group>
					<year>2005</year>
					<source>Evaluación colegiada del aprendizaje en la Universidad Autónoma de Baja California: el caso del examen de Matemáticas I de la Facultad de Ingeniería Mexicali</source>
					<conf-name>VIIICongreso Nacional de Investigación Educativa</conf-name>
					<conf-loc>México</conf-loc>
					<conf-sponsor>COMIE</conf-sponsor>
				</element-citation>
			</ref>
			<ref id="B7">
				<mixed-citation>Fernández Navas, Manuel; Alcaraz Salarirche, Noelia y Sola Fernández, Miguel. (2017). Evaluación y pruebas estandarizadas: una reflexión sobre el sentido, utilidad y efectos de estas pruebas en el campo educativo. <italic>Revista Iberoamericana de Evaluación Educativa</italic>, 10(1), 51-67. https://doi.org/10.15366/riee2017.10.1.003</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>Fernández Navas</surname>
							<given-names>Manuel</given-names>
						</name>
						<name>
							<surname>Alcaraz Salarirche</surname>
							<given-names>Noelia</given-names>
						</name>
						<name>
							<surname>Sola Fernández</surname>
							<given-names>Miguel.</given-names>
						</name>
					</person-group>
					<year>2017</year>
					<article-title>Evaluación y pruebas estandarizadas: una reflexión sobre el sentido, utilidad y efectos de estas pruebas en el campo educativo</article-title>
					<source>Revista Iberoamericana de Evaluación Educativa</source>
					<volume>10</volume>
					<issue>1</issue>
					<fpage>51</fpage>
					<lpage>67</lpage>
					<pub-id pub-id-type="doi">10.15366/riee2017.10.1.003</pub-id>
				</element-citation>
			</ref>
			<ref id="B8">
				<mixed-citation>Ferreyra Martínez, María Fabiana y Backhoff Escudero, Eduardo. (2016). Validez del generador automático de ítems del examen de competencias básicas (Excoba). <italic>Relieve-Revista Electrónica de Investigación y Evaluación Educativa</italic>, 22(1), 1-16. https://doi.org/10.7203/relieve.22.L8048</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>Ferreyra Martínez</surname>
							<given-names>María Fabiana</given-names>
						</name>
						<name>
							<surname>Backhoff Escudero</surname>
							<given-names>Eduardo</given-names>
						</name>
					</person-group>
					<year>2016</year>
					<article-title>Validez del generador automático de ítems del examen de competencias básicas (Excoba)</article-title>
					<source>Relieve-Revista Electrónica de Investigación y Evaluación Educativa</source>
					<volume>22</volume>
					<issue>1</issue>
					<fpage>1</fpage>
					<lpage>16</lpage>
				</element-citation>
			</ref>
			<ref id="B9">
				<mixed-citation>Gómez Rada, Carlos Alberto. (2015). Diseño, construcción y validación de un instrumento que evalúa clima organizacional en empresas colombianas, desde la teoría de respuesta al ítem. <italic>Acta Colombiana de Psicología</italic>, (11), 97-113. Recuperado de: <ext-link ext-link-type="uri" xlink:href="https://editorial.ucatolica.edu.co/index.php/acta-colombiana-psicologia/article/view/482">https://editorial.ucatolica.edu.co/index.php/acta-colombiana-psicologia/article/view/482</ext-link>
				</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>Rada</surname>
							<given-names>Gómez</given-names>
						</name>
						<name>
							<surname>Alberto</surname>
							<given-names>Carlos</given-names>
						</name>
					</person-group>
					<year>2015</year>
					<article-title>Diseño, construcción y validación de un instrumento que evalúa clima organizacional en empresas colombianas, desde la teoría de respuesta al ítem</article-title>
					<source>Acta Colombiana de Psicología</source>
					<volume>11</volume>
					<fpage>97</fpage>
					<lpage>113</lpage>
					<ext-link ext-link-type="uri" xlink:href="https://editorial.ucatolica.edu.co/index.php/acta-colombiana-psicologia/article/view/482">https://editorial.ucatolica.edu.co/index.php/acta-colombiana-psicologia/article/view/482</ext-link>
				</element-citation>
			</ref>
			<ref id="B10">
				<mixed-citation>Góngora Ortega, Javier; Rocha Hernández, Tania Marlene; Verver, Ingrid Verenice. (2015). La prueba Exhcoba como predictora para la deserción y reprobación en medicina. <italic>Revista de la Escuela de Medicina &quot;Dr. José Sierra Flores&quot; Universidad del Noreste</italic>, 29(1), 16-24. Recuperado de: <ext-link ext-link-type="uri" xlink:href="http://www.une.edu.mx/Resour-ces/RevistaMedicina/2015/Vol29No1.pdf#page=16">http://www.une.edu.mx/Resour-ces/RevistaMedicina/2015/Vol29No1.pdf#page=16</ext-link>
				</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>Góngora Ortega</surname>
							<given-names>Javier</given-names>
						</name>
						<name>
							<surname>Rocha Hernández</surname>
							<given-names>Tania Marlene</given-names>
						</name>
						<name>
							<surname>Verver</surname>
							<given-names>Ingrid Verenice</given-names>
						</name>
					</person-group>
					<year>2015</year>
					<article-title>La prueba Exhcoba como predictora para la deserción y reprobación en medicina</article-title>
					<source>Revista de la Escuela de Medicina &quot;Dr. José Sierra Flores&quot; Universidad del Noreste</source>
					<volume>29</volume>
					<issue>1</issue>
					<fpage>16</fpage>
					<lpage>24</lpage>
					<ext-link ext-link-type="uri" xlink:href="http://www.une.edu.mx/Resour-ces/RevistaMedicina/2015/Vol29No1.pdf#page=16">http://www.une.edu.mx/Resour-ces/RevistaMedicina/2015/Vol29No1.pdf#page=16</ext-link>
				</element-citation>
			</ref>
			<ref id="B11">
				<mixed-citation>Hernández Madrigal, Mónica; Ramírez Flores, Élfego y Gamboa Cerda, Silvia. (2018). La implementación de una evaluación estandarizada en una institución de educación superior. <italic>Innovación Educativa</italic>, 18(76), 149-170. Recuperado de: <ext-link ext-link-type="uri" xlink:href="http://www. scielo.org.mx/scielo.php?script=sci_arttext&amp;pid = S1665-26732018000100149&amp;lng=es&amp;tlng=es">http://www.scielo.org.mx/scielo.php?script=sci_arttext&amp;pid=S1665-26732018000100149&amp;lng=es&amp;tlng=es</ext-link>
				</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>Hernández Madrigal</surname>
							<given-names>Mónica</given-names>
						</name>
						<name>
							<surname>Ramírez Flores</surname>
							<given-names>Élfego</given-names>
						</name>
						<name>
							<surname>Gamboa Cerda</surname>
							<given-names>Silvia</given-names>
						</name>
					</person-group>
					<year>2018</year>
					<article-title>La implementación de una evaluación estandarizada en una institución de educación superior</article-title>
					<source>Innovación Educativa</source>
					<volume>18</volume>
					<issue>76</issue>
					<fpage>149</fpage>
					<lpage>170</lpage>
					<ext-link ext-link-type="uri" xlink:href="http://www. scielo.org.mx/scielo.php?script=sci_arttext&amp;pid = S1665-26732018000100149&amp;lng=es&amp;tlng=es">http://www. scielo.org.mx/scielo.php?script=sci_arttext&amp;pid = S1665-26732018000100149&amp;lng=es&amp;tlng=es</ext-link>
				</element-citation>
			</ref>
			<ref id="B12">
				<mixed-citation>Kramp Denegri, Uwe. (2008). Equivalencia entre los modelos de análisis factorial de los ítems y teoría de respuesta a los ítems en la evaluación de las propiedades psicométricas de los instrumentos de medición psicológica. <italic>Revista Peruana de Psicometria</italic>, 1(1). Recuperado de: <ext-link ext-link-type="uri" xlink:href="https://www.academia.edu/3673226/Equiva-lencia_entre_los_modelos_de_an%C3%A1lisis_factorial_de_los_%C3%ADtems_y_teor%C3%ADa_de_respuesta_a_ los_%C3%ADtems_en_la_Evaluaci%C3%B3n_de_las_propiedades_Psicom%C3%A9tricas_de_los_instrumentos_de_Medici%C3%B3n_psicol%C3%B3gica">https://www.academia.edu/3673226/Equiva-lencia_entre_los_modelos_de_an%C3%A1lisis_factorial_de_los_%C3%ADtems_y_teor%C3%ADa_de_respuesta_a_ los_%C3%ADtems_en_la_Evaluaci%C3%B3n_de_las_propiedades_Psicom%C3%A9tricas_de_los_instrumentos_de_Medici%C3%B3n_psicol%C3%B3gica</ext-link>
				</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>Kramp Denegri</surname>
							<given-names>Uwe</given-names>
						</name>
					</person-group>
					<year>2008</year>
					<article-title>Equivalencia entre los modelos de análisis factorial de los ítems y teoría de respuesta a los ítems en la evaluación de las propiedades psicométricas de los instrumentos de medición psicológica</article-title>
					<source>Revista Peruana de Psicometria</source>
					<volume>1</volume>
					<issue>1</issue>
					<ext-link ext-link-type="uri" xlink:href="https://www.academia.edu/3673226/Equiva-lencia_entre_los_modelos_de_an%C3%A1lisis_factorial_de_los_%C3%ADtems_y_teor%C3%ADa_de_respuesta_a_ los_%C3%ADtems_en_la_Evaluaci%C3%B3n_de_las_propiedades_Psicom%C3%A9tricas_de_los_instrumentos_de_Medici%C3%B3n_psicol%C3%B3gica">https://www.academia.edu/3673226/Equiva-lencia_entre_los_modelos_de_an%C3%A1lisis_factorial_de_los_%C3%ADtems_y_teor%C3%ADa_de_respuesta_a_ los_%C3%ADtems_en_la_Evaluaci%C3%B3n_de_las_propiedades_Psicom%C3%A9tricas_de_los_instrumentos_de_Medici%C3%B3n_psicol%C3%B3gica</ext-link>
				</element-citation>
			</ref>
			<ref id="B13">
				<mixed-citation>Leyva Barajas, Yolanda Edith. (2011). Una reseña sobre la validez de constructo de pruebas referidas a criterio. <italic>Perfiles Educativos</italic>, 33(131), 131-154. Recuperado de: <ext-link ext-link-type="uri" xlink:href="http:// www.scielo.org.mx/scielo.php?script=sci_arttext&amp;pid =S0185-26982011000100009">http://www.scielo.org.mx/scielo.php?script=sci_arttext&amp;pid=S0185-26982011000100009</ext-link>
				</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>Barajas</surname>
							<given-names>Leyva</given-names>
						</name>
						<name>
							<surname>Edith</surname>
							<given-names>Yolanda</given-names>
						</name>
					</person-group>
					<year>2011</year>
					<article-title>Una reseña sobre la validez de constructo de pruebas referidas a criterio</article-title>
					<source>Perfiles Educativos</source>
					<volume>33</volume>
					<issue>131</issue>
					<fpage>131</fpage>
					<lpage>154</lpage>
					<ext-link ext-link-type="uri" xlink:href="http:// www.scielo.org.mx/scielo.php?script=sci_arttext&amp;pid =S0185-26982011000100009">http:// www.scielo.org.mx/scielo.php?script=sci_arttext&amp;pid =S0185-26982011000100009</ext-link>
				</element-citation>
			</ref>
			<ref id="B14">
				<mixed-citation>Márquez Jiménez, Alejandro. (2014). Las pruebas estandarizadas en entredicho. <italic>Perfiles Educativos</italic>, 36(144), 3-9. Recuperado de: <ext-link ext-link-type="uri" xlink:href="http://www.redalyc.org/articulo.oa?id=13230751001">http://www.redalyc.org/articulo.oa?id=13230751001</ext-link>
				</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>Márquez Jiménez</surname>
							<given-names>Alejandro</given-names>
						</name>
					</person-group>
					<year>2014</year>
					<article-title>Las pruebas estandarizadas en entredicho</article-title>
					<source>Perfiles Educativos</source>
					<volume>36</volume>
					<issue>144</issue>
					<fpage>3</fpage>
					<lpage>9</lpage>
					<ext-link ext-link-type="uri" xlink:href="http://www.redalyc.org/articulo.oa?id=13230751001">http://www.redalyc.org/articulo.oa?id=13230751001</ext-link>
				</element-citation>
			</ref>
			<ref id="B15">
				<mixed-citation>Mayaute Escurra, Luis Miguel y Vásquez Delgado, Ana Esther. (2010). Análisis psicométrico del test de matrices progresivas avanzadas de Raven mediante el modelo de tres parámetros de la teoría de la respuesta al ítem. <italic>Persona</italic>, (13), 71-97. Recuperado de: <ext-link ext-link-type="uri" xlink:href="http://www.redalyc.org/articulo.oa?id=147118212004">http://www.redalyc.org/articulo.oa?id=147118212004</ext-link>
				</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>Escurra</surname>
							<given-names>Mayaute</given-names>
						</name>
						<name>
							<surname>Miguel</surname>
							<given-names>Luis</given-names>
						</name>
						<name>
							<surname>Delgado</surname>
							<given-names>Vásquez</given-names>
						</name>
						<name>
							<surname>Esther</surname>
							<given-names>Ana</given-names>
						</name>
					</person-group>
					<year>2010</year>
					<article-title>Análisis psicométrico del test de matrices progresivas avanzadas de Raven mediante el modelo de tres parámetros de la teoría de la respuesta al ítem</article-title>
					<source>Persona</source>
					<volume>13</volume>
					<fpage>71</fpage>
					<lpage>97</lpage>
					<ext-link ext-link-type="uri" xlink:href="http://www.redalyc.org/articulo.oa?id=147118212004">http://www.redalyc.org/articulo.oa?id=147118212004</ext-link>
				</element-citation>
			</ref>
			<ref id="B16">
				<mixed-citation>Mola, Débora Jeanette; Saavedra, Bianca Analía; Reyna, Cecilia y Belaus, Anabel. (2013). Valoración psicométrica de la Psychological Entitlement Scale desde la teoría clásica de los tests y la teoría de respuesta al ítem. <italic>Pensamiento Psicológico</italic>, <italic>11</italic>(2), 19-38. Recuperado de: <ext-link ext-link-type="uri" xlink:href="https://ri.conicet.gov.ar/bitstream/ handle/11336/23949/CONICET_Digital_Nro.4290b666-0f89-4d7f-8738-01898530318f_A.pdf?sequence=2">https://ri.conicet.gov.ar/bitstream/ handle/11336/23949/CONICET_Digital_Nro.4290b666-0f89-4d7f-8738-01898530318f_A.pdf?sequence=2</ext-link>
				</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>Mola</surname>
							<given-names>Débora Jeanette</given-names>
						</name>
						<name>
							<surname>Saavedra</surname>
							<given-names>Bianca Analía</given-names>
						</name>
						<name>
							<surname>Reyna</surname>
							<given-names>Cecilia</given-names>
						</name>
						<name>
							<surname>Belaus</surname>
							<given-names>Anabel</given-names>
						</name>
					</person-group>
					<year>2013</year>
					<article-title>Valoración psicométrica de la Psychological Entitlement Scale desde la teoría clásica de los tests y la teoría de respuesta al ítem</article-title>
					<source>Pensamiento Psicológico</source>
					<volume>11</volume>
					<issue>2</issue>
					<fpage>19</fpage>
					<lpage>38</lpage>
					<ext-link ext-link-type="uri" xlink:href="https://ri.conicet.gov.ar/bitstream/ handle/11336/23949/CONICET_Digital_Nro.4290b666-0f89-4d7f-8738-01898530318f_A.pdf?sequence=2">https://ri.conicet.gov.ar/bitstream/ handle/11336/23949/CONICET_Digital_Nro.4290b666-0f89-4d7f-8738-01898530318f_A.pdf?sequence=2</ext-link>
				</element-citation>
			</ref>
			<ref id="B17">
				<mixed-citation>Muñiz Fernández, José. (2010). Las teorías de los tests: teoría clásica y teoría de respuesta a los ítems. <italic>Papeles del Psicólogo</italic>, <italic>31</italic>(1), 57-66. Recuperado de: <ext-link ext-link-type="uri" xlink:href="http://www.redalyc.org/articulo. oa?id=77812441006">http://www.redalyc.org/articulo.oa?id=77812441006</ext-link>
				</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>Muñiz Fernández</surname>
							<given-names>José</given-names>
						</name>
					</person-group>
					<year>2010</year>
					<article-title>Las teorías de los tests: teoría clásica y teoría de respuesta a los ítems</article-title>
					<source>Papeles del Psicólogo</source>
					<volume>31</volume>
					<issue>1</issue>
					<fpage>57</fpage>
					<lpage>66</lpage>
					<ext-link ext-link-type="uri" xlink:href="http://www.redalyc.org/articulo. oa?id=77812441006">http://www.redalyc.org/articulo. oa?id=77812441006</ext-link>
				</element-citation>
			</ref>
			<ref id="B18">
				<mixed-citation>Nitko, Anthony. (1994). A model for development curriculum-driven criterion- referenced and norm-referenced examination for certification and selection of students. Paper presented in the Conference of Education, Evaluation and Assessment for the Association Studies of Educational Evaluation in Sudafrica (ASEESA). Sudáfrica . Recuperado de: <ext-link ext-link-type="uri" xlink:href="https://eric.ed.gov/?id=ED377200">https://eric.ed.gov/?id=ED377200</ext-link>
				</mixed-citation>
				<element-citation publication-type="confproc">
					<person-group person-group-type="author">
						<name>
							<surname>Nitko</surname>
							<given-names>Anthony</given-names>
						</name>
					</person-group>
					<year>1994</year>
					<source>A model for development curriculum-driven criterion- referenced and norm-referenced examination for certification and selection of students</source>
					<conf-name>Conference of Education, Evaluation and Assessment for the Association Studies of Educational Evaluation in Sudafrica (ASEESA)</conf-name>
					<conf-loc>Sudáfrica</conf-loc>
					<ext-link ext-link-type="uri" xlink:href="https://eric.ed.gov/?id=ED377200">https://eric.ed.gov/?id=ED377200</ext-link>
				</element-citation>
			</ref>
			<ref id="B19">
				<mixed-citation>Pérez Morán, Juan Carlos; Larrazolo Reyna, Norma y Backhoff Escudero, Eduardo. (2015). Análisis de la estructura cognitiva del área de habilidades cuantitativas del Exhcoba mediante el modelo LLTM de Fisher. <italic>Revista Internacional de Educación y Aprendizaje</italic>, 3(1), 25-38. Recuperado de: <ext-link ext-link-type="uri" xlink:href="https://journals.epistemopolis.org/index.php/educacion/article/view/584">https://journals.epistemopolis.org/index.php/educacion/article/view/584</ext-link>
				</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>Pérez Morán</surname>
							<given-names>Juan Carlos</given-names>
						</name>
						<name>
							<surname>Larrazolo Reyna</surname>
							<given-names>Norma</given-names>
						</name>
						<name>
							<surname>Backhoff Escudero</surname>
							<given-names>Eduardo</given-names>
						</name>
					</person-group>
					<year>2015</year>
					<article-title>Análisis de la estructura cognitiva del área de habilidades cuantitativas del Exhcoba mediante el modelo LLTM de Fisher</article-title>
					<source>Revista Internacional de Educación y Aprendizaje</source>
					<volume>3</volume>
					<issue>1</issue>
					<fpage>25</fpage>
					<lpage>38</lpage>
					<ext-link ext-link-type="uri" xlink:href="https://journals.epistemopolis.org/index.php/educacion/article/view/584">https://journals.epistemopolis.org/index.php/educacion/article/view/584</ext-link>
				</element-citation>
			</ref>
			<ref id="B20">
				<mixed-citation>Tirado Segura, Felipe; Backhoff Escudero, Eduardo; Larrazolo Reyna, Norma y Rosas Morales, Martín. (1997). Validez predictiva del Examen de Habilidades y Conocimientos Básicos (Excoba). <italic>Revista Mexicana de Investigación Educativa</italic>, 2(3), 67-84. Recuperado de: <ext-link ext-link-type="uri" xlink:href="http://www.comie.org.mx/revista/v2018/rmie/index.php/nrmie/article/download/1057/1057">http://www.comie.org.mx/revista/v2018/rmie/index.php/nrmie/article/download/1057/1057</ext-link>
				</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>Tirado Segura</surname>
							<given-names>Felipe</given-names>
						</name>
						<name>
							<surname>Backhoff Escudero</surname>
							<given-names>Eduardo</given-names>
						</name>
						<name>
							<surname>Larrazolo Reyna</surname>
							<given-names>Norma</given-names>
						</name>
						<name>
							<surname>Rosas Morales</surname>
							<given-names>Martín</given-names>
						</name>
					</person-group>
					<year>1997</year>
					<article-title>Validez predictiva del Examen de Habilidades y Conocimientos Básicos (Excoba)</article-title>
					<source>Revista Mexicana de Investigación Educativa</source>
					<volume>2</volume>
					<issue>3</issue>
					<fpage>67</fpage>
					<lpage>84</lpage>
					<ext-link ext-link-type="uri" xlink:href="http://www.comie.org.mx/revista/v2018/rmie/index.php/nrmie/article/download/1057/1057">http://www.comie.org.mx/revista/v2018/rmie/index.php/nrmie/article/download/1057/1057</ext-link>
				</element-citation>
			</ref>
			<ref id="B21">
				<mixed-citation>Thoe, Ng Khar; Fook, Fong Soon &amp; Thah, Soon Seng. (2009). Use of ICT tool for Item Analysis of a Science Performance Test. <italic>Journal of Educational Technology</italic>, 9(1), 5-15. Recuperado de: <ext-link ext-link-type="uri" xlink:href="http://www.mjet-meta.com/resources/V9N1%20-%20NKT%20-%20 2009%20-%20ICT%20-%20Online.pdf">http://www.mjet-meta.com/resources/V9N1%20-%20NKT%20-%20 2009%20-%20ICT%20-%20Online.pdf</ext-link>
				</mixed-citation>
				<element-citation publication-type="journal">
					<person-group person-group-type="author">
						<name>
							<surname>Thoe</surname>
							<given-names>Ng Khar</given-names>
						</name>
						<name>
							<surname>Fook</surname>
							<given-names>Fong Soon</given-names>
						</name>
						<name>
							<surname>Thah</surname>
							<given-names>Soon Seng</given-names>
						</name>
					</person-group>
					<year>2009</year>
					<article-title>Use of ICT tool for Item Analysis of a Science Performance Test</article-title>
					<source>Journal of Educational Technology</source>
					<volume>9</volume>
					<issue>1</issue>
					<fpage>5</fpage>
					<lpage>15</lpage>
					<ext-link ext-link-type="uri" xlink:href="http://www.mjet-meta.com/resources/V9N1%20-%20NKT%20-%20 2009%20-%20ICT%20-%20Online.pdf">http://www.mjet-meta.com/resources/V9N1%20-%20NKT%20-%20 2009%20-%20ICT%20-%20Online.pdf</ext-link>
				</element-citation>
			</ref>
		</ref-list>
	</back>
</article>
