DISEOYCALIBRACINDEUNEXAMENDEADMISINDENIVELSUPERIOR

Dr.ErnestoAlonsoCarlosMartnez,InstitutoTecnolgicoSuperiordeCajeme
Mtro.HumbertoHernndezVacaGastlum,InstitutoTecnolgicoSuperiordeCajeme

Resumen.

En este trabajo se realiz un estudio descriptivo del Examen del CoSNET, en el que se
analizaron los reactivos aplicados a los alumnos que aspiraban ingresar a las carreras de
ingeniera. Una vez establecido el proceso, se procedi a su calibracin, es decir, al
establecimiento conjunto de los rasgos o atributos medidos en los alumnos y de las
propiedades psicomtricas de los tems, siguiendo el modelo basado en la Teora Clsica del
tem.Losresultadosmuestranqueengeneralelexamenresultconfiableylosindicadoresde
validezypredictibilidadfueronaceptablesaunquelejosdeserptimos.

PalabrasClave:Calibracin,propiedadespsicomtricas,evaluacindelaprendizaje,ndicede
discriminacin,ndicedeconfiabilidad.


Introduccin

La mayora de las instituciones de nivel medio y superior del pas, tanto de carcter pblico
comoprivado,hanvenidoaplicandodesdetiempoatrslosllamadosexmenesdeadmisina
los alumnos que desean ingresar por vez primera a sus planteles (Aiken, 1996). Estos
exmenes han sido utilizados ms que nada como filtros para seleccionar a los mejores
estudiantes (Chan y cols., 2003; Henrysson, 1971; Lpez, 2008). Con esto las instituciones
educativas pretenden asegurarse que las capacidades y competencias con que cuentan sus
alumnosdereciningreso,sonapropiadasparalaasimilacinygeneracindeconocimientosy
habilidadespertinentesaldesarrollohumanocientficotecnolgico.[ANUIES],2007;Lpez,
2008).

Hastaladcadadelos90,lamayorpartedelosexmenesdeadmisinqueseutilizabanenlas
instituciones de educacin superior del pas (IES), se desarrollaban por lo general por las
mismasinstituciones,con pocorigormetodolgicoeinclusonoserealizabanestudiosserios
para determinar las propiedades psicomtricas de los mismos (Padilla, 2007; Santibaez,
2001).

Esta situacin ha ido cambiando paulatinamente, sobre todo a partir de la creacin en 1994
del Centro Nacional para la Evaluacin de la Educacin Superior (CENEVAL) cuyo propsito
primordialeselaboraryadministrarexmenesparaelingresoalaeducacinmediasuperiory
superior. Algunas IES, como la Universidad Autnoma de Baja California (UABC) y la

UniversidadNacionalAutnomadeMxico(UNAM),handesarrolladoyvalidadosuspropios
exmenesdeadmisin,adaptndolosasusnecesidades.(Backhoff,LarrazoloyRosas,2000,p.
12).
Para el 2002 surge el Instituto Nacional de Evaluacin Educativa (INEE) con la finalidad de
desarrollarunsistemadepruebasestandarizadasquepermitancompararlosresultadosdelos
estudiantesdelosdiversosnivelesdelsistemaeducativo(Ebel&Frisbie,1986),eimpulsarel
desarrolloyanlisisdepruebasprofesionalmenteconstruidas(Glass&Stanley,1986)comoel
ExamendeHabilidadesyConocimientosBsicos(EXHCOBA),EXANIIyII,COSNET,PISAentre
otros(Tirado,Backhoff,Larrazolo&Rosas,1997;DazBarriga,2006).

Estaevaluacin,permitetambinobtenerlainformacinnecesariaparamejorarlapropuesta
formativaquesedesarrollatantoencadaunodeloscursosdeplandeestudios,comoenla
estructura curricular de las licenciaturas (Daz, 2006). Asimismo coadyuva a que se pueda
realizarunseguimientodelosavancesqueelestudiantevaobteniendodesdesuingresoala
institucin,hastalafinalizacindesusestudios.

Planteamientodelproblema
Realizar una evaluacin correcta del alumno mediante la aplicacin de un examen de
admisin,noessolounadetantasactividadesacadmicasdeeducacinsuperior,sinoquese
constituyecomoverdaderaexigenciaacadmicaapartirdelacualpuedengenerarseacciones
que comprometan y orienten con certeza el esfuerzo institucional hacia la excelencia
educativa.


En el Instituto Tecnolgico Superior de Cajeme (ITESCA), ubicado en Cd. Obregn Sonora, se
utilizapartirde1997hastael2006,elexamendiseadoporelConsejodelSistemaNacional
deEducacinTecnolgica(CoSNET),enelprocesodeseleccindeaspirantes.Posteriormente
sehaestadoutilizandoelexamendelCentroNacionaldeEvaluacindelaEducacinSuperior
(CENEVAL).

Unavezque sehaaplicadounexamenyseconocensusresultados,resulta tilynecesario,

obtener informacin acerca de la eficiencia que cada reactivo mostr para satisfacer los
propsitosparalosquefuediseado.Aspues,desdelaperspectivadelanormatividaddela
evaluacin, una orientacin primordial de los reactivos es su capacidad para diferenciar el
desempeodelosestudiantesenelexamen(Nunnally&Bernstein,1999).

Para ello, fue preciso estimar el grado de dificultad y discriminacin de los reactivos. La
dificultad de un reactivo, se relaciona con la proporcin de alumnos que respondieron de
maneracorrectaalmismo;mientrasqueladiscriminacinserefierealacapacidaddeuntem
paradiferenciaralgrupodealumnosqueobtuvieronunapuntuacinaltaenelexamen,versus
elgrupodelosqueobtuvieronunapuntuacinglobalbaja.

Objetivo
Analizar las propiedades psicomtricas de un examen de admisin para las carreras de
ingenieradelInstitutoTecnolgicoSuperiordeCajeme.

Resultados
En este apartado se presentan, los valores correspondientes a la validez predictiva y a la
confiabilidaddelexamendeCoSNET.Delmismomodo,semuestralainformacinrelativaal
niveldefacilidadyalpoderdediscriminacindelosreactivosdedichoinstrumento.

Validezpredictiva
Para establecer la validez predictiva del examen de admisin, se utiliz el coeficiente de
correlacin de Pearson r. Se compar la puntuacin obtenida por cada alumno en el
examen,conrespectoalpromediodecalificacinquedichoalumnotienehastaelsemestre
eneromayo2007(VerTabla1).

Confiabilidad
AlefectuarelclculodeconfiabilidadpormediodelcoeficientedeKuderRichardson(Pardoy
Ruiz, 2002), para cada una de las secciones del examen de admisin, se obtuvieron ndices
paracadaunadelasreasevaluadas(VerTabla2).

Anlisisdereactivos
Parahacerunanlisisdelcomportamientodelafacilidaddelos194reactivosdelexamende
CoSNET,seobtuvoladistribucindelosreactivossegnsuniveldefacilidad(VerTabla3).

Conbaseenelndicedediscriminacin(D),alagruparlosreactivossegnelniveldecalidad
(VerTabla4).

Delmismomodo,conrelacinalvalordelacorrelacindelpuntobiserial(rpbis),losreactivos
seagruparondeacuerdoasuniveldecalidaddiscriminatoria(VerTabla5).

Discusinyconclusiones
Al revisar los valores del coeficiente de correlacin de Pearson (r), entre los resultados del
examen de admisin y el promedio de los estudiantes hasta el semestre enero mayo de
2007,sepuedeconcluirqueexisteunacorrelacinmuydbil,paralostrescasosanalizados.
Comoserecordar,apartirdeunvalorde
r=0.50,semanifiestaunacorrelacinadecuadaysuficienteentrelasvariablesdeestudio.De
este modo, no se observa validez predictiva, ni en la Prueba de Habilidades Matemtica y
Verbal,nienelExamendeConocimientos.

El coeficiente de KuderRichardson (r20), utilizado para el clculo de confiabilidad, arroja

valores tanto para el caso de la Prueba de Habilidades Matemtica y Verbal, como para el
Examen de Conocimientos, superiores a 0.70. Este nmero, se considera como mnimo

aceptable, en trminos de confiabilidad psicomtrica, para garantizar la confiabilidad del

instrumento. Se puede decir entonces, que tanto la Prueba de Habilidades Matemtica y
Verbal,comoelExamendeConocimientossonconfiables.

Encuantoalndicedefacilidad,losreactivosdelexamendeCoSNET,aplicadoenelITESCAen
juliode2005,presentanunpromediode0.27.Estevalor,estmuyalejadodelndiceesperado
paraunexamennormativoconcincoopcionesderespuestayqueesde0.62.Deacuerdocon
lo anterior, los reactivos del examen de CoSNET, tienen una dificultad muy superior a la
deseable.

Con respecto al ndice de discriminacin (D), se puede decir que el 53.1% de los tems
presentaron niveles de aceptables a ptimos; 40.7% de ellos tuvo un nivel pobre y 6.2% de
ellosdiscriminnegativamente.Encuantoalacorrelacindelpuntobiserial,(rpbis),66.5%de
losreactivospresentaronnivelesdeaceptablesaptimos;28.9%deellostuvounnivelpobrey
4.6%discriminnegativamente.

Unexamendeadmisinquenoposeavalidezpredictiva,ocasionaquenosepuedatenerun
panoramaacertadoacercadelperfildeingresodelestudiante.Estoprovocaasuvez,queno
se tengan proyecciones confiables, con respecto a la eficiencia terminal en un determinado
perodo. Del mismo modo, el no contar con un diagnstico adecuado, del nivel de
conocimientosdelalumnodenuevoingreso,dificultareldiseoyaplicacindeestrategias,
para disminuir los rezagos acadmicos de los estudiantes e impulsar sus fortalezas. Por otro
lado,unapoblacinestudiantilconmejoresposibilidadesdecursarunacarrerauniversitaria,
permitirquelosrecursosconquecuentalainstitucinseutilicendemaneraptima.


Losresultadosobtenidosenelpresentetrabajo,puedenservirdeapoyoparaqueseefecten
estudios similares, ya sea que estn relacionados con el diseo y la elaboracin de
instrumentos de evaluacin, o que tengan que ver con el anlisis de reactivos de un
instrumentoyaelaborado.Enesteltimocaso,serainteresantedeterminarporejemplo,las
causasdeladificultadinapropiadadelosreactivos,deunpoderdediscriminacinmuydbil
delosmismos,etc.
Tabla1

Validezpredictivadelexamendeadmisin
Descripcin

CoeficientedecorrelacindePearsonr

PruebadeHabilidadesMatemticayVerbal

0.102

ExamendeConocimientos

0.192

Examendeadmisin

0.168

Tabla2
Confiabilidaddelexamendeadmisin
Coeficientedeconfiabilidad
Descripcin
r20
PruebadeHabilidadesMatemticayVerbal

0.86

ExamendeConocimientos

0.81

Tabla3
DistribucindelniveldefacilidaddelexamendeCoSNET

Niveldefacilidad

Rango

Frecuencia

Porcentaje

Muydifcil

p<0.30

114

58.8%

Difcil

0.30<=p<=0.50

60

30.9%

Dificultadmedia

0.50<p<=0.70

20

10.3%

Fcil

0.70<p<=0.80

0.0%

Muyfcil

p>0.80

0.0%

Total:

194

100%

Tabla4

DistribucindelniveldecalidaddelosvaloresDdelexamendeCoSNET.
Niveldecalidad

Rango

Frecuencia

Porcentaje

Excelente

D>0.39

49

25.3%

Buena

0.29<D<=0.39

33

17.0%

Regular

0.20<D<=0.29

21

10.8%

Pobre

0<=D<=0.20

79

40.7%

Psima

D<0

12

6.2%

Total:

194

100%

Tabla5
DistribucindelniveldecalidaddelosvaloresrpbisdelexamendeCoSNET

Niveldecalidad

Rango

Frecuencia

Porcentaje

Excelente

rpbis>0.35

48

24.7%

Buena

0.26<rpbis<=0.35

35

18.0%

Regular

0.15<rpbis<=0.26

46

23.7%

Pobre

0<=rpbis<=0.15

56

28.9%

Psima

rpbis<0

4.6%

Total:

194

100%

ReferenciasBibliogrficas.
Aiken,L.R.(1996).Testspsicolgicosyevaluacin.Mxico:PrenticeHallHipanoamericana.
ANUIES(2007).CoberturadeEducacinSuperiorenMxico19971998a20062007.Mxico:
ANUIES.
Backhoff,E.,Larrazolo.N&Rosas,M.(2000).Niveldedificultadypoderdediscriminacindel
Examen de Habilidades y Conocimientos Bsicos (EXHCOBA) [En lnea]. Revista
Electrnica

de

Investigacin

Educativa,

(1).

Disponible

en

http://redie.uabc.mx/vol2no1/contenidobackhoff.html [consulta el 9 de marzo del

2009).
Chain,R.,Cruz,N.,Martnez,M.&Jcome,N.(2003).Examendeseleccinyprobabilidadde
xito escolar en estudios superiores. Estudio en una universidad pblica estatal

mexicana[Enlnea].RevistaElectrnicadeInvestigacinEducativa,5(1)Disponibleen
http://redie.uabc.mx/vol5no1/contenidochain.html[Consulta5defebrerodel2009].
DazBarriga, A. (2006). Las pruebas masivas, anlisis de sus diferencias tcnicas. Revista
MexicanadeInvestigacinEducativa,11(29),583615.

Ebel, R. & Frisbie, D. (1986). Essentials of Education Measurement. Englewood Cliffs,

NJ: Prentice Hall.
Glass, G. & Stanley, J. (1986). Mtodos estadsticos aplicados a las ciencias sociales.
Mxico: Prentice Hall Hispanoamericana.
Henrysson, S. (1971). Gathering, Analyzing and Using Data on Test Items, en
Thorndike, R. (Comp.). Educational Measurement. Washington, DC: American
Council on Education, 120-135.
Lpez, F. (2008). Tendencias de la educacin superior en el mundo y en Amrica Latina y el
Caribe.Avaliacao,Campinas,Sofocaba,13(2),267291.
Nunnally,J.&Bernstein,I.(1999).TeoraPsicomtrica.Mxico:McGrawHill.
Padilla, R. (2007). El sentido del examen en la educacin superior Reproduccin o no
demostracindeloaprendido?Reencuentro,48,2733.
Pardo,M.&Ruz,D.(2002).SPSS11.Guaparaelanlisisdedatos.Espaa:McGrawHill.
Santibez,J.(2001).Manualparalaevaluacindelaprendizajeinfantil:Conceptos,anlisise
interpretacinparaelprocesodeevaluacin.Mxico:Trillas.
Tirado, F.; Backhoff, E.; Larrazolo. N. & Rosas, M. (1997).Validez predictiva del Examen de
Habilidades y Conocimientos Bsicos (EXHCOBA), Revista Mexicana de Investigacin
Educativa,2(3),6784.