Manual para los pares evaluadores del CACEI

C o n t en ido

1. Quines son los pares evaluadores? ..................................................................... 5

2. Orientaciones para la aplicacin de los criterios de evaluacin ............................... 7
3. Descripcin de las etapas del trabajo del Comit Evaluador ................................... 9
Etapas 1 y 2: Anlisis profundo de la autoevaluacin y de las evidencias
entregadas .................................................................................................................... 9
Etapa 3: Preparacin de la visita acorde con los lineamientos establecidos por el
CACEI ......................................................................................................................... 10
Etapa 4: Visita al centro educativo .............................................................................. 11
Etapa 5: Elaboracin del resumen ejecutivo e informe final ........................................ 13
4. Tareas del Comit Evaluador ................................................................................. 14
4.1 Estudio de la metodologa de evaluacin .............................................................. 15
4.2 Anlisis del informe de autoevaluacin ................................................................. 15
4.3 Evaluacin de cada uno de los indicadores y criterios especficos de calidad ...... 17
4.4 Autorreflexin final ................................................................................................. 19
4.5 Redaccin de una recomendacin ........................................................................ 20
4.6 La decisin de la acreditacin ............................................................................... 20
5. Informe de salida ................................................................................................... 21
6. Renovacin de la acreditacin (Reacreditacin) .................................................... 21

Presentacin

Las actividades del ser humano que tienen un fin noble, como es mejorar la calidad de
la educacin, deben conducirse con base en procedimientos y lineamientos que
garanticen su transparencia, su eficacia y eficiencia, con el propsito de que, al operar
las recomendaciones tendientes a lograr dicha mejora, sta sea integral, duradera,
significativa y verdica.
El Manual para los pares evaluadores del CACEI norma las tareas de los pares
evaluadores, tanto experimentados, quienes aportaron de forma desinteresada su
conocimiento para hacer este documento ms preciso, como de los evaluadores de
nuevo ingreso, quienes sabemos vern este documento como una gua que facilite su
labor.
El trabajo de los evaluadores es fundamental para el proceso clave del CACEI y para
lograr los objetivos que le dan razn de ser a este Consejo. Es por ello que, como una
preocupacin fundamental de los directivos, se pone este manual a disposicin del
lector, como parte de los trabajos de mejora y actualizacin de un CACEI que cumpli
sus primeros 20 aos de actividades. Cuatro lustros se dice fcil; pero abarcan un
cmulo de conocimientos y experiencias que estamos aquilatando con miras a una
nueva etapa en la vida del Consejo, que se caracterice por el orden, la sistematizacin
informtica, la transparencia y una estrecha relacin acadmica con las IES.
Atender las indicaciones de este manual cobra especial relevancia dada la enorme
responsabilidad que la sociedad ha depositado en el CACEI como organismo
acreditador de la enseanza de la ingeniera en instituciones de educacin superior.
Esta responsabilidad se traduce, respecto del trabajo de los pares evaluadores, en un
desempeo impecable en cuanto a su rigor acadmico, incuestionable en su dimensin
tica y oportuno en cuanto a lo administrativo.

1. Quines son los pares evaluadores?

Los pares evaluadores son acadmicos y profesionales experimentados, que cuentan
con reconocida autoridad como docentes, investigadores, profesionales o
administradores. stos han sido seleccionados por las Comisiones Tcnicas de
Especialidad por sus antecedentes y formacin en evaluacin para integrar los equipos
externos denominados Comits Evaluadores (CE), que evalan los programas
educativos sometidos voluntariamente a acreditacin. Dicha seleccin se sustenta en el
Estatuto General del CACEI.
Se les denomina pares evaluadores pues se trata de personas que comparten entre
ellos y con los profesionales, docentes y acadmicos que se desempean en el
programa educativo los cdigos propios de la disciplina o profesin y, por lo tanto, estn
familiarizados con el lenguaje y el mbito de la profesin que evalan. Pertenecen a la
comunidad acadmica o profesional nacional o internacional y tienen una reconocida
experiencia en materia de gestin y en el quehacer acadmico o profesional.
Los CE son un elemento clave en el proceso de acreditacin de programas educativos
porque son quienes conducen la evaluacin externa y, para tal efecto, en primer lugar
deben estudiar y analizar detenidamente el proceso de autoevaluacin y el informe
preparado por los responsables del programa educativo y despus visitar y evaluar el
programa en su propio terreno. Su actuacin es decisiva para la acreditacin; puesto
que complementan los resultados del proceso de autoevaluacin, aportando a ste una
opinin fundada, externa e independiente, acerca de la calidad del programa educativo,
que permite al Comit de Acreditacin contar con una perspectiva ms completa al
momento de adoptar el juicio correspondiente.
Se conforman con un evaluador, quien tiene funciones de coordinacin, debido a que
cuenta con amplia experiencia acadmica, profesional y en trabajos de evaluacin; y
dependiendo del tamao del programa, el CE se completa con uno o dos evaluadores
que satisfagan el perfil definido por el CACEI.
Los evaluadores del CACEI son profesionales que tienen uno o ms grados en alguna
ingeniera y cuentan con una larga experiencia ya sea en la docencia, la investigacin,
el desarrollo tecnolgico o en el campo de la industria. Asimismo, los evaluadores del
CACEI han recibido un entrenamiento, impartido por el propio CACEI, sobre las reglas y
procedimientos que se deben seguir para evaluar los programas de ingeniera de las
IES. Cuando los evaluadores del CACEI acuden a las IES a las que son asignados,
deben cumplir escrupulosamente con los procedimientos y protocolos que el CACEI y el
Copaes establecen; stos se apegan al cdigo de conducta y a las normas
generalmente aceptadas a nivel internacional para la evaluacin de programas
educativos.

Las funciones de los evaluadores son:

Realizar la evaluacin de programas educativos con pleno apego a la

metodologa y procedimientos establecidos por CACEI, con rigor tcnico,
honestidad y tica.
Revisar cuidadosamente el documento de autoevaluacin de cada programa
educativo que le sea asignado y emitir, en su caso, recomendaciones a partir de
este anlisis y de la visita.
Acudir puntualmente a las visitas de evaluacin y apegarse estrictamente al
itinerario de trabajo establecido por CACEI.
Elaborar los informes de evaluacin de cada programa educativo siguiendo los
procedimientos acordados.
Trabajar colaborativamente con los miembros restantes del Comit Evaluador.

La tarea de los pares evaluadores es compleja y delicada. Pertenecen a la disciplina o

profesin; pero al mismo tiempo son externos a la dependencia donde se oferta el
programa educativo. Contribuyen de manera fundamental al desarrollo, progreso y
mejoramiento de los programas de ingeniera de las IES y del pas.
Los acadmicos o profesionales que pertenecen o quisieran incorporarse al Padrn de
Evaluadores del CACEI deben cumplir los siguientes requisitos:

Poseer un grado acadmico mayor al de licenciatura en el rea de ingeniera o

reas afines y tener como mnimo una experiencia acumulada de 10 aos de
trabajo acadmico o acadmico administrativo, preferentemente con una
categora de acadmico titular, en una o en varias instituciones de educacin
superior; o bien, un grado de licenciatura en el rea de ingeniera y una
experiencia acumulada de 15 aos de trabajo acadmico o acadmico
administrativo. En cualquiera de los dos casos, deben contar con el
reconocimiento o prestigio en el medio acadmico de su comunidad y de
aquellas instituciones en las que han colaborado; o
Poseer el grado acadmico de licenciatura en ingeniera, como mnimo; un
desarrollo y experiencia profesional relevante de ms de 15 aos en el rea de
su especialidad y estar activo en sta.

Adicionalmente, deben poseer caractersticas inherentes a los actores que participan en

los procesos de evaluacin y acreditacin como:

Capacidad de anlisis y sntesis.

Habilidad para el manejo de las relaciones personales.
Capacidad de observacin.
Objetividad e imparcialidad en la emisin de juicios.
Disposicin para la actualizacin permanente en temticas relacionadas con la
evaluacin y la acreditacin.
Disciplina para cumplir los compromisos adquiridos con el CACEI en tiempo y
forma.
Honestidad reconocida.
6

Asimismo, los evaluadores deben cumplir con los siguientes requisitos:

Contar con la autorizacin y el apoyo de la institucin o empresa en que prestan

sus servicios;

Tener disponibilidad para viajar y hacer las visitas de evaluacin a las distintas
IES que se les asignen.

El Comit Evaluador tiene como objetivos fundamentales:

Valorar las evidencias aportadas por los responsables acadmicos del programa
en relacin con cada una de las categoras, estndares y criterios especficos
establecidos en el Marco de referencia para la evaluacin de los programas
educativos de licenciatura, versin 2014 (o Marco de referencia del CACEI);

Realizar la visita in situ para validar la informacin aportada por la institucin y

obtener informacin de los principales actores acerca del funcionamiento y
percepcin de los indicadores evaluados;

Identificar los puntos fuertes y dbiles del programa educativo;

Elaborar el Informe de evaluacin que incluya una visin global del programa,
con nfasis en las fortalezas, debilidades y reas de oportunidad identificadas; y

Hacer propuestas sobre estrategias o medidas que el programa educativo podra

adoptar para mejorar su calidad.

Las Comisiones Tcnicas de Especialidad designan cada Comit Evaluador

responsable de un programa educativo de acuerdo con el Estatuto General del CACEI y
est integrado por dos o tres personas de reconocido prestigio acadmico provenientes
de las Instituciones de Educacin Superior nacionales o extranjeras, en las reas de
conocimiento vinculadas con el programa formativo del instituto, universidad o centro.

2. Orientaciones para la aplicacin de los criterios de evaluacin

Todo el proceso de evaluacin tendiente a la acreditacin se organiza a partir de
criterios y estndares de evaluacin de la calidad establecidos en el Marco de
referencia del CACEI. stos son la pauta con la cual:

el programa educativo se autoevala;

los pares evaluadores realizan la evaluacin externa;

las Comisiones Tcnicas de Especialidad revisan los informes de evaluacin y

recomiendan o no el dictamen; y

con los que el Comit de Acreditacin dictamina la acreditacin o no

acreditacin.

El proceso de acreditacin se efecta con base en dos patrones fundamentales:

El primero es el perfil de egreso; es decir, el conjunto de conocimientos, habilidades y
actitudes que todo profesional debe lograr. Al respecto, los pares evaluadores deben
constatar que se obtuvo tal perfil. En otras palabras, el perfil de egreso define qu es lo
que el programa educativo espera que logren los estudiantes al finalizar su
formacin.
El segundo est constituido por los criterios de evaluacin, que definen las
orientaciones que los evaluadores deben seguir al verificar una evidencia o informacin;
es decir, representa el punto de vista desde el que el CE evaluar cada categora o
indicador sujeta a evaluacin. Un ejemplo sera para el indicador Plan de estudios, el
cual pide que se evale bajo el criterio denominado existencia. Esto implica constatar
que el plan de estudios que se va evaluar existe efectivamente en la IES, es vigente,
est autorizado por la instancia responsable, es conocido por la comunidad educativa;
adems de que utilizado y puesto en prctica en la institucin. Es decir, si hay evidencia
vlida de todo lo anterior, entonces el programa educativo existe.
Otro de los criterios es la pertinencia, que determina si las caractersticas cualitativas o
los atributos del aspecto evaluado lo hacen adecuado, til, congruente, procedente o
relevante de acuerdo con su propsito o funcin. Un ejemplo del indicador de un
programa de asignatura evaluado bajo el criterio de pertinencia es que el programa de
la asignatura sea congruente con lo requerido por el objetivo y el perfil del egresado;
que los contenidos sean importantes y vigentes para los propsitos y objetivos; as
como las estrategias didcticas propuestas, los procedimientos de evaluacin y que la
bibliografa est actualizada. Si la evidencia presentada cumple con estos requisitos, el
programa de la asignatura es pertinente.
Otro criterio es la suficiencia, que se refiere a los recursos, personal docente y tcnico,
personal administrativo, laboratorios, equipo, acervos, computadora, software e
instalaciones indispensables para el buen desarrollo del programa educativo. Estos
recursos han de ser idneos, deben existir en cantidad; adems de estar disponibles y
accesibles a los usuarios para considerar que son suficientes.
Los criterios de eficacia y eficiencia son comunes en las evaluaciones. La eficacia se
refiere a que el elemento o aspecto evaluado cumple con las metas y objetivos para los
que fue establecido. Algunas veces la eficacia se expresa como la proporcin de
objetivos de aprendizaje que el alumno logra, la tasa de titulacin, el ndice de eficiencia
terminal, la tasa de reprobacin, por mencionar algunos ejemplos. La eficiencia, como
criterio, se refiere al logro de los objetivos y metas con el mnimo de recursos, incluido
el tiempo.
Los pares evaluadores, por lo tanto, siempre deben pronunciarse sobre el cumplimiento
del indicador considerando el criterio establecido.

3. Descripcin de las etapas del trabajo del Comit Evaluador

El Comit Evaluador tiene diferentes tareas que se pueden organizar en cinco etapas:
1. Anlisis profundo de la autoevaluacin elaborada por el Comit de Evaluacin Interno
(CAI) de la institucin donde se oferta el programa, considerando los estndares
establecidos en el Marco de referencia del CACEI.
2. Anlisis profundo de las evidencias entregadas por el CAI, por medio del sistema de
informacin automatizada del CACEI.
3. Preparacin de la visita acorde con los lineamientos establecidos por el CACEI (gua
de entrevista, seleccin de los integrantes de los grupos, etc.).
4. Visita al centro educativo, en especial al rea donde se oferta el programa, con
apego a la agenda previamente indicada por el CACEI.
5. Elaboracin del resumen ejecutivo e informe final, en el que se presente una visin
global de la situacin del programa as como sugerencias para la mejora del mismo.
A continuacin se describen estas etapas con ms detalle.

Etapas 1 y 2: Anlisis profundo de la autoevaluacin y de las evidencias

entregadas
La autoevaluacin es el reporte que presenta la institucin acerca de la calidad de su
programa. Resulta del proceso mediante el cual el programa educativo rene y analiza
informacin sobre el mismo, a partir de criterios e indicadores de evaluacin definidos,
con el propsito de generar mecanismos de control de calidad. Debe ser una reflexin
crtica del mismo con base en los criterios y estndares establecidos en el Marco de
referencia del CACEI, as como en el contexto institucional del programa.
Para que el desarrollo de esta etapa sea provechoso y til, deben garantizarse un
conjunto de condiciones y requisitos. Se trata de aquellos aspectos que deben estar
presentes antes de iniciar un proceso de autoevaluacin para asegurar un adecuado
desarrollo. stos son la comprensin cabal del sentido y alcances del proceso, la
motivacin interna, la aceptacin de la evaluacin externa, el apoyo explcito y autntico
de las autoridades, el liderazgo y competencias del equipo conductor del proceso y la
disponibilidad de recursos humanos y materiales.
El informe de autoevaluacin sirve de base para el proceso de evaluacin externa; pero
a la vez constituye un instrumento til, que puede ser consultado en diversos momentos
del desarrollo del plan de trabajo y proporciona una base confiable para el desarrollo del
plan estratgico y de mejora del programa educativo.
La autoevaluacin tiene que incluir y documentar claramente las evidencias que la
institucin aporta para demostrar que el programa satisface los estndares para cada
indicador considerando los criterios de evaluacin.
La etapa de autoevaluacin se encuentra incompleta hasta que es validada por los
pares evaluadores, quienes aportan la mirada externa y un juicio calificado, objetivo e
9

imparcial. Por su experiencia y trayectoria, las conclusiones de los evaluadores

constituyen un aporte sustantivo y complementario al proceso de evaluacin
desarrollado al interior de la institucin.
La informacin vertida en la autoevaluacin requiere que el evaluador, en el anlisis
previo que realice del documento y de las evidencias presentadas, tenga en cuenta los
estndares establecidos en el Marco de referencia del CACEI y que constate en la visita
y a travs de los documentos entregados como evidencias que la informacin reportada
es vlida y confiable. En la revisin previa de la autoevaluacin, se sugiere al evaluador
que haga anotaciones de los aspectos donde el indicador cumple los estndares; y en
aqullos en que no los cumple, solicitar previamente mayor informacin a la IES. Esta
informacin debe llevar al evaluador a generar un listado de preguntas para indagar en
la visita con el propsito de tener para s mismo una visin global del programa
educativo.
El Comit Evaluador debe analizar en equipo esta informacin en una reunin virtual o
presencial previa a la visita con la orientacin del coordinador. La finalidad de esta
actividad es compartir visiones de los miembros del CE y tener una valoracin general
del programa en la que se identifiquen los aspectos relevantes que se deben verificar
en la visita, adems de recopilar informacin completa, vlida y confiable con la cual
emitir el Informe de evaluacin.
El producto final de esta fase es un diagnstico compartido por el Comit Evaluador
acerca de las fortalezas y debilidades del programa; as como la deteccin de las
brechas e inconsistencias de informacin a partir del Marco de referencia del CACEI,
documento que tambin contiene los estndares y criterios especficos de calidad para
cada indicador de un programa educativo.

Etapa 3: Preparacin de la visita acorde con los lineamientos establecidos

por el CACEI
El CACEI propone una agenda de visita que incluye las actividades que deben
realizarse durante la estancia del CE en la institucin. Previamente, el coordinador del
CE debe requerir a la institucin las evidencias e informacin para ser revisadas in situ.
La institucin debe disponer un espacio apropiado que cuente con equipo de cmputo,
impresora y acceso a internet, los materiales y documentacin necesarios para la
acreditacin, tales como los anexos que se refieren en la informacin que la institucin
ha enviado; ejemplares de la bibliografa, tareas, trabajos y exmenes de los alumnos
por cada materia del programa, publicaciones de los maestros y del programa,
manuales de prcticas y, en general, todo lo sealado en el Marco de referencia del
CACEI. Si este material no est disponible, el coordinador debe evaluar si las
evidencias son suficientes para continuar con la visita.
El Comit Evaluador debe discutir y acordar la agenda de trabajo para la visita previa a
sta.

10

Debe tener claridad en la seleccin de las personas que se entrevistarn buscando la

representatividad de los grupos, as como las preguntas que se realizarn. En las
entrevistas grupales es importante que el evaluador constate la consistencia de las
evidencias con la informacin vertida en la autoevaluacin, as como buscar que se
realicen preguntas orientadas a verificar que la informacin es vlida y confiable. No
debe ser una opinin o una percepcin individual; sino un juicio resultado de una
realidad de la situacin del programa. Debe ser un mecanismo que permita obtener
informacin no proporcionada por la institucin o que sirva para aclarar las
inconsistencias halladas en la autoevaluacin.

Etapa 4: Visita al centro educativo

En la visita al centro educativo el Comit Evaluador debe cuidar principalmente dos
aspectos:

Puntualidad en la realizacin de las actividades agendadas; y

Respeto absoluto a las opiniones de los distintos actores y autoridades del
programa.

El CE debe tener entrevistas con distintos actores y grupos para recopilar datos que
conduzcan a un enriquecimiento de la informacin previamente revisada por el Comit.
Los actores o grupos que se deben entrevistar son:
a. El director de la dependencia.- Se realiza con el propsito de identificar la visin
que tiene sobre la situacin del programa educativo en el contexto del avance
tecnolgico y disciplinario, del universo de programas similares y la prospectiva que
identifica para el mismo. Se propone que la duracin de la entrevista sea de una
hora.
b. El coordinador del programa.- Se realiza con el propsito de analizar la situacin
actual del programa, la gestin administrativa, adems de identificar las fortalezas,
debilidades y oportunidades de mejora. La entrevista puede variar en duracin
considerando las preguntas del CE.
c. El personal acadmico.- En reuniones personales o grupales se identifica su
satisfaccin con las condiciones y caractersticas con que el programa opera, las
condiciones, estmulos y apoyos que recibe por parte de la institucin, la
investigacin y el desarrollo tecnolgico, los productos acadmicos y su impacto, su
visin de las fortalezas y debilidades del plan de estudio y condiciones de
operacin, por mencionar las ms relevantes. Se propone que la duracin de estas
reuniones sea de una hora a una hora y media. Debe realizarse sin participacin de
personal o autoridades de la institucin. nicamente deben estar presentes los
entrevistados. El CE debe proponer los profesores tanto para las entrevistas
individuales como para las grupales buscando la representatividad de la poblacin
docente.

11

d. Los estudiantes.- Se recomienda realizar una reunin con estudiantes de todos los
grados del programa seleccionados aleatoriamente. El CE debe indagar su
percepcin sobre la enseanza que reciben, el desempeo de los profesores, la
satisfaccin con las condiciones y apoyos que la institucin les otorga para su
formacin integral, la flexibilidad, los procesos acadmicos administrativos
asociados al programa; as como las la condicin de las instalaciones, la
disponibilidad de horarios y la atencin que reciben, entre los aspectos ms
relevantes. Se propone que la duracin de la reunin sea de una a dos horas. Debe
realizarse sin participacin de autoridades, acadmicos o personal de la institucin.
Es recomendable un mnimo de dos a tres estudiantes por semestre y el CE debe
seleccionarlos.
e. Los egresados.- Sern entrevistados en una reunin grupal. Deben ser al menos
tres por generacin y que no laboren en la institucin. En esta reunin, el CE debe
identificar las caractersticas de su insercin laboral, la satisfaccin con la formacin
recibida y con el desempeo del profesorado. Se propone que la duracin de la
reunin sea de una a dos horas. Debe realizarse sin participacin de autoridades,
acadmicos o personal de la institucin. La muestra debe abarcar egresados que
estn ubicados en el campo laboral definido por el programa y que hayan egresado
en los ltimos cinco aos naturales.
f.

Los empleadores.- Deben ser seleccionados de los distintos mbitos de insercin

descritos por el programa donde se han ubicado los egresados del mismo. Se
busca identificar el grado de satisfaccin de los empleadores con la formacin que
los egresados recibieron traducida en el desempeo al realizar sus funciones en las
distintas organizaciones. Tambin se pretende identificar las caractersticas de
vinculacin que pueda haber entre la organizacin donde los egresados laboran
con la IES de origen. Se propone que la duracin de la reunin sea de una hora.
Debe realizarse sin participacin de autoridades, acadmicos o personal de la
institucin.

g. Responsable de control escolar.- Ser entrevistado con el propsito de identificar

la informacin sobre los estudiantes, los estudios de trayectoria escolar y los
indicadores de rendimiento acadmico. La duracin puede variar dependiendo de
las necesidades de informacin del CE.
h. Responsable de formacin integral.- En una entrevista individual se identificarn
los programas existentes y el impacto de los mismos en la formacin de los
estudiantes. La duracin recomendada es de 30 minutos a una hora.
i.

Responsable de evaluacin del profesorado.- En una entrevista individual se

identificarn los mecanismos, procedimientos y estrategias de apoyo al profesorado
como resultado de los procesos de evaluacin y el impacto que el programa tiene
en la mejora del desempeo de los acadmicos. Se propone que esta entrevista
tenga una duracin mnima de 30 minutos.

12

j.

Otros actores.- A solicitud del CE, ste puede entrevistar a otros actores como los
responsables de vinculacin, extensin, de ingreso, de investigacin, de finanzas,
de planeacin, de la biblioteca, de servicios de tecnologas de informacin, de
compras, etc.

Adicionalmente, en la visita se debe hacer un recorrido por las instalaciones, biblioteca,

centros de informacin y comunicacin, laboratorios, aulas, cubculos, espacios para
alumnos y profesores, por mencionar los relevantes. En este recorrido el CE debe
verificar el funcionamiento de los equipos y sistemas de seguridad; as como el
cumplimiento de los estndares recomendados a nivel nacional, la ventilacin y los
servicios de mantenimiento preventivo y correctivo para el equipamiento incluido en los
laboratorios, los talleres y las aulas.

Etapa 5: Elaboracin del resumen ejecutivo e informe final

Una vez concluidas las actividades agendadas en la visita, el CE debe reunirse y llevar
a cabo el informe de resumen de indicadores, el anlisis de fortalezas y debilidades y
acordar las recomendaciones que se harn al programa. Es INDISPENSABLE que esta
actividad se realice inmediatamente al concluir la visita y que la documentacin cuente
con la firma de todos los miembros del CE.
Las aportaciones, as como el dictamen recomendado, deben surgir de la discusin del
CE y deben ser acordadas por unanimidad. En caso que no se lograra el consenso,
esta situacin debe describirse en el informe correspondiente.
El informe final en extenso debe ser elaborado por el coordinador del CE con apoyo de
los miembros del mismo y debe incluir:
1. Antecedentes del programa, cuya informacin proviene de la ficha tcnica
entregada.
2. Fortalezas y debilidades del programa, as como las reas de mejora
identificadas.
3. Recomendaciones por cada categora justificando cada una.
4. Una valoracin general por categora.
5. Conclusiones y una Propuesta de acreditacin o no acreditacin del programa
plenamente justificada. El CE debe firmar electrnicamente este informe y
enviarlo al CACEI, va el sistema de informacin automatizada, inmediatamente
despus de concluir la visita.
El CE debe generar los documentos mencionados en los formatos establecidos en las
pantallas de captura del sistema de informacin automatizada del CACEI.

13

Cabe mencionar que es importante que el Informe de evaluacin cumpla con las
siguientes caractersticas:
a. Debe surgir de la Matriz Resumen de Indicadores; es decir, toda debilidad
debe tener asociada una recomendacin.
b. Cada recomendacin debe estar plenamente justificada y ser planteada
considerando el no cumplimiento del estndar.
c. Es recomendable que el CE oriente a las autoridades del programa sobre las
acciones que deben realizar.
d. Toda recomendacin debe tener un sustento objetivo y evidenciable del no
cumplimiento del estndar.
El primer documento, el Resumen de Indicadores, debe ser evaluado en conjunto por
los integrantes del CE. Al concluir la visita, el coordinador del CE debe enviar al CACEI
el Resumen de Indicadores, firmado por el CE, de forma electrnica. El CE debe
generar el segundo documento, Anlisis de fortalezas y debilidades, tambin al
finalizar la visita; ste surge del primer documento y debe indicar el conjunto de
fortalezas definidas como aquellos indicadores evaluados por el CE en el Resumen de
Indicadores como Ampliamente (A). Tambin debe justificar por qu fueron calificados
de esa manera. Adems, debe indicar como debilidades aquellos indicadores con una
calificacin en las dos primeras categoras: Casi nada (CN) o Poco (P); y sustentar la
puntuacin emitida.
El CE debe asociar una recomendacin a los indicadores evaluados como Casi nada,
Poco y Medianamente e indicar a la IES que debe incorporarlos en su plan de mejora.
Se ha diseado un sistema informtico en lnea para incorporar la informacin
necesaria para el informe. En este sistema ambos documentos se generan de manera
automatizada.

4. Tareas del Comit Evaluador

En las distintas etapas de su trabajo, y previo a stas, el CE debe realizar algunas
tareas especficas:
4.1 Estudio de la metodologa de evaluacin
4.2 Anlisis del informe de autoevaluacin
4.3 Evaluacin de cada uno de los indicadores y criterios especficos de calidad
4.4 Autorreflexin final
4.5 Redaccin de una recomendacin
4.6 La decisin de la acreditacin

14

A continuacin se describen stas con precisin.

4.1 Estudio de la metodologa de evaluacin

El CE debe dominar la metodologa de evaluacin con la mxima precisin posible,
razn por la que deben capacitarse a travs del Taller de pares evaluadores del CACEI.
Es necesario que conozca la filosofa que sustenta el proceso de acreditacin de los
programas educativos y, de manera especfica, las orientaciones del Marco de
referencia del CACEI, los conceptos utilizados; as como los elementos incluidos en la
gua para realizar el proceso, desde el punto de vista interno y externo. Cabe aclarar
que desde agosto de 2014, para pertenecer al Padrn de Evaluadores del CACEI, es
un requisito indispensable tomar dicho taller, independientemente de haber fungido
como par evaluador en el pasado o desear incorporarse al Padrn por primera vez.

4.2 Anlisis del informe de autoevaluacin

Cada uno de los miembros del Comit Evaluador, de manera independiente y previa a
la visita, debe revisar el informe de autoevaluacin y comprobar que el programa
cumple con los estndares, criterios y categoras descritas en el Marco de referencia
del CACEI.
El propsito fundamental de esta tarea es estudiar el contenido de la autoevaluacin,
que es la pieza clave en la que se basan tanto el proceso de autoevaluacin llevado a
cabo por la IES como la evaluacin externa realizada por el CACEI.
A tal efecto, por separado, cada evaluador, debe analizar si la autoevaluacin cumple
con los requisitos metodolgicos y tcnicos especificados en el Marco de referencia del
CACEI. Este trabajo debe realizarlo estrictamente con base en las valoraciones que se
incluyen en el Marco; pues debe distinguir entre lo que son evidencias (afirmaciones
basadas en datos objetivos y documentos) y lo que son afirmaciones basadas en una
opinin sin sustento.
La autoevaluacin aportar bsicamente al evaluador:
1. Informacin general sobre el programa e institucin que lo oferta.
2. Informacin sobre el plan de estudios, los programas, estrategias de enseanza
aprendizaje y recursos humanos, fsicos y materiales que apoyan su
implantacin.
3. Datos sobre los recursos humanos, infraestructura y equipamiento del programa,
que debern ser suficientes.
4. Datos sobre la investigacin, vinculacin y productividad de los acadmicos.
5. Datos sobre la normatividad, procesos de gestin y financiamiento del programa.
6. Datos sobre los resultados e impacto del programa.

15

Desde la perspectiva tcnica, la lectura del informe de autoevaluacin es el primer

insumo a disposicin del CE y de cada evaluador para iniciar su proceso de evaluacin;
por lo tanto, su lectura y anlisis son imprescindibles para la deteccin de mbitos,
temas o datos que requieran un tratamiento ms minucioso.
El protocolo que los miembros del CE deben seguir para la lectura del informe de
autoevaluacin tiene como objetivo facilitar:

La identificacin de las fortalezas y debilidades de las evidencias aportadas.

La necesidad de solicitar nuevas evidencias en la visita.
La realizacin de una propuesta de posibles cuestiones de inters a plantear en
las distintas audiencias previstas en la visita.
El conocimiento previo entre los miembros del CE de una primera visin del
contenido total del informe de autoevaluacin.

Para cada uno de los mbitos o reas de contenido a evaluar, el CE debe dar
seguimiento de estos tres apartados:
a. Identificar la presencia o ausencia de evidencias que avalen el juicio emitido en
la autoevaluacin y, tambin, si stas son o no adecuadas. De lo contrario,
identificar qu tipo de evidencias se deben solicitar adicionalmente para la visita
a la Institucin.
b. Independientemente, como adicin del anterior apartado, pueden indicarse las
cuestiones o temticas que se consideran de inters para ser abordadas en cada
una de las distintas audiencias que se realizarn durante la visita.
c. El evaluador preparar las cuestiones a plantear en las audiencias. Esta
propuesta ser perfilada en el encuentro del CE previo al inicio de la visita.
La mayor parte de las evidencias documentales que aparezcan en la autoevaluacin
tendrn que estar disponibles para su consulta antes de la visita. En caso de que los
evaluadores consideren que los requerimientos mnimos no estn satisfechos, podrn
solicitar informacin adicional a la IES, misma que sta deber entregar durante la
visita.
El evaluador, adicionalmente, deber consultar la informacin en la pgina web de la
institucin, as como en los documentos que considere necesarios y solicitar al CACEI
informacin complementaria de acreditaciones anteriores.
Las evidencias aportadas a travs de distintos medios debern estar claramente
indexadas y convenientemente referenciadas en la autoevaluacin, de modo que la
verificacin pueda realizarse de forma eficiente. Adicionalmente, es relevante que el CE
discuta y analice en forma grupal los hallazgos detectados en los materiales de la
autoevaluacin.

16

4.3 Evaluacin de cada uno de los indicadores y criterios especficos de

calidad
El evaluador debe revisar con atencin y objetividad la informacin vertida en la
autoevaluacin, identificar las brechas e inconsistencias en la informacin y, a partir del
anlisis, disear las preguntas que se realizarn a los distintos grupos y actores con la
finalidad de despejar dudas y llenar los vacos de informacin. El CE debe analizar
cuidadosamente las respuestas dadas a cada indicador, y contrastarlas con los
estndares establecidos y, a partir de esto, emitir juicios de valor.
El evaluador deber validar la informacin cuidando tener varias fuentes de informacin
que le permitan sustentar con evidencias objetivas los juicios emitidos en las distintas
etapas del proceso.
En la revisin que hagan de la autoevaluacin con fines de acreditacin, el CE debe
considerar que el anlisis que realice debe ser con una mirada holstica de las
diferentes categoras, criterios, indicadores y estndares sugeridos por el CACEI y en
un mbito contextualizado del sistema al que pertenece el programa, as como tener en
cuenta la integralidad valorativa de la Institucin de Educacin Superior.
Un ejemplo pudiera ser un programa educativo cuya normatividad del subsistema
establece que el nmero de horas de docencia de un profesor de tiempo completo
es 20+-2. Esto debe considerarse en el anlisis que se realice.
El anlisis que haga el evaluador considerando el estndar establecido para cada
indicador permitir identificar las fortalezas y debilidades del programa educativo; y que
stas debern tener relacin de correspondencia con la misin, la visin y el proyecto
educativo en el contexto institucional. En este sentido, la calidad demostrada en los
programas educativos es determinante para la acreditacin.
La Matriz de Componentes de Autoevaluacin de Programas Educativos de
Ingeniera (o Resumen de Indicadores) es un instrumento poderoso que permite
articular los componentes de la autoevaluacin con las categoras, elementos, aspectos
a evaluar e indicadores; as como las fuentes e instrumentos de recoleccin de
informacin, considerando las particularidades de la institucin y del programa
acadmico que se evala. Este elemento se concibe como la Matriz Resumen de
Indicadores y permite identificar, desde un punto de vista global, las fortalezas y
debilidades del programa.
La Matriz completa incluye 10 categoras y 49 indicadores, que son los aspectos
sujetos a evaluacin. Cada uno de stos se clasifica en mnimos indispensables y
complementarios. Son evaluados considerando una escala ordinal previamente
establecida. Se considera una fortaleza del programa un indicador evaluado como
Ampliamente (A); y una debilidad, un indicador evaluado dentro de las categoras
anteriores: Casi nada (CN) y Poco (P); o como un rea de mejora, si se califica como
Medianamente (M).

17

Cada indicador que obtiene una puntuacin de CN, P o M requiere una recomendacin
por parte del CE; es decir, ante una debilidad (CN y P) en cualquier grado se establece
una recomendacin. Es importante aclarar que los CE, al hacer este anlisis fino de la
relacin de indicadores, tienen una ganancia adicional con una mejor comprensin de
los elementos que integran el programa educativo, que se enriquece con la informacin
obtenida de las entrevistas grupales o individuales; as como de las evidencias
aportadas por la propia institucin.
Otro de los valores agregados del instrumento es que el CE puede evidenciar el
porcentaje de caractersticas que cumplen con los estndares y las reas fuertes y
dbiles del programa, con una visin integral y completa; lo que permite y facilita el
trabajo posterior de sistematizacin y anlisis de la informacin y orienta las preguntas
para las reuniones con los distintos actores en la posterior visita a la institucin donde
se oferta el programa educativo.
La Matriz Resumen de Indicadores permite sistematizar, en forma gil, la informacin
aportada por los distintos grupos; as como evidenciar las inconsistencias en la
informacin.
En la tabla 1, se puede apreciar que las dos primeras columnas corresponden a las
categoras e indicadores a evaluar establecidos en el Marco de referencia del CACEI.
La tercera registra el estndar deseable; y las restantes, la informacin obtenida de la
autoevaluacin y de la visita, la cual provendr de las entrevistas realizadas a los
distintos actores del programa.
Tabla 1. Matriz Resumen de Indicadores y fuentes posibles de informacin
Categora
Plan de
estudios

Indicadores
Pertinencia

Estndar

Autoevaluacin

El plan de estudio No hay

a travs de sus
evidencias de los
egresados debe
mismos.
atender las
necesidades del
entorno
relacionadas con
su mbito de
accin, resolver y
atender los
problemas del
campo laboral y
satisfacer las
necesidades
establecidas en el
mbito de
desarrollo.

Alumnos

Profesores

Insatisfechos
con su
formacin.

Los
contenidos
obsoletos no
vinculados al
entorno
actual.

Egresados
No encuentran
trabajo e
insatisfechos
con su
formacin.

Empleadores
Los egresados
carecen de las
competencias
actuales.

18

Este instrumento permite que el CE pueda evidenciar la articulacin de los elementos e

indicadores, con las opiniones o respuestas que se obtuvieron de la visita en las
reuniones grupales e individuales. De esta manera se inicia un proceso de cruzamiento
de datos, de confrontacin, entre las distintas fuentes de informacin, los instrumentos
utilizados para la obtencin de la misma y los indicadores y estndares descritos en el
Marco de referencia del CACEI.
Las fuentes de informacin para la evaluacin del programa son varias y el CE debe
buscar la triangulacin de sta para verificar su consistencia, validez y confiabilidad. Es
decir, la primera fuente de informacin la aporta la institucin por medio de la
autoevaluacin con las evidencias entregadas, la informacin aportada por los grupos
diversos y los estndares establecidos en el Marco de referencia del CACEI. El anlisis
integrado permitir al CE identificar las fortalezas, debilidades, inconsistencias y
brechas de informacin.

4.4 Autorreflexin final

Despus del anlisis integral de la informacin aportada por las diferentes fuentes, el
evaluador debi identificar las reas de mejora y, a partir de stas, emitir
recomendaciones plenamente justificadas.
Es recomendable que en la estructura del informe se evidencien las deficiencias o
reas de oportunidad, las recomendaciones sustentadas; as como las sugerencias de
accin que la institucin pudiera emprender para su cumplimiento.
Como esquema general, al examinar la autoevaluacin, los resultados de la visita y las
distintas evidencias presentadas en sta es recomendable que el evaluador oriente sus
acciones a la formulacin de juicios de valor, objetivos, fundamentados y viables. Es
relevante en la evaluacin que el CE considere el contexto institucional del programa.
En el caso de una reacreditacin, en la evaluacin, el evaluador debe considerar los
cambios significativos constatados en los ltimos aos, la atencin a las
recomendaciones emitidas previamente, as como la mejora de los indicadores.
Una vez identificadas las reas de oportunidad, las mejoras susceptibles de lograr y
conociendo el contexto institucional, se debe emitir en grupo un anlisis de fortalezas y
debilidades y las recomendaciones, objetivas y contextualizadas, ante las debilidades
identificadas.
Es relevante que toda recomendacin est plenamente justificada con evidencias
contundentes identificadas en la lectura de la autoevaluacin y evidenciadas en la visita
a la institucin que oferta el programa. El CE debe evitar basarse en percepciones,
para as sustentar su trabajo en hechos contundentes.

19

4.5 Redaccin de una recomendacin

El CE debe emitir en el documento en extenso las recomendaciones emitidas con
mucha claridad y con amplio sustento en las evidencias encontradas. Al redactar una
recomendacin, el CE debe decir, en forma clara y precisa, qu recomienda al
programa, qu debe hacer la institucin, para cundo debe cumplirse, en su caso, y la
justificacin por la que surge la misma.
La redaccin de una recomendacin debe cuidarse buscando cumplir con los
lineamientos establecidos. Un ejemplo de recomendacin sera: Incrementar el
nmero de horas prcticas y de laboratorios en el plan de estudios en un 10%, en 2016,
para cumplir con el mnimo establecido en los estndares, cuidando el equilibrio y el
cumplimiento del perfil del egresado. En la primera parte, la recomendacin dice el qu
hacer; y en la segunda parte el cmo hacerlo. Adicionalmente, el Copaes exige, a partir
del 2014, establecer una fecha determinada para su cumplimiento.
Por ltimo, el CE debe mencionar los principales aspectos contradictorios y lagunas
detectados que condujeron a emitir las recomendaciones y la Propuesta de dictamen.

4.6 La decisin de la acreditacin

El proceso culmina con la decisin del Comit de Acreditacin a partir del anlisis de la
informacin que emana de los trabajos del Comit Evaluador y las Comisiones
Tcnicas de Especialidad:
a. Las conclusiones del Informe de evaluacin y la Propuesta de dictamen del
Comit Evaluador; y
b. El Acta generada por la Comisin Tcnica de la Especialidad, la cual es la
responsable de revisar la consistencia y el cumplimiento de los criterios descritos
en los indicadores; as como de emitir la Recomendacin de la acreditacin o no
acreditacin del programa educativo sujeto a evaluacin.
El Comit de Acreditacin del CACEI analiza a profundidad la Propuesta y la
Recomendacin, as como la informacin que las sustenta, y emite un Acta de
Dictamen Final.
Cabe mencionar que para que un programa educativo adquiera el estatus de acreditado
debe cumplir con el 100% de los indicadores mnimos y que dos tercios de los
complementarios hayan sido calificados como Medianamente (M) o Ampliamente
(A). La duracin de la acreditacin es por cinco aos naturales consecutivos, con el
compromiso por parte de la institucin de presentar en un plazo de seis meses su plan
de mejora; as como el informe de medio trmino a los dos aos y medio.

20

5. Informe de salida
A partir del trabajo realizado, el CE identifica los principales puntos que quiere reportar
a la IES al terminar la visita. El Informe de salida es importante porque la institucin,
que ha dedicado tiempo y esfuerzo a la autoevaluacin, tiene derecho a una
retroalimentacin luego de la visita, que puede ser un episodio tenso y estresante en
muchos casos.
Las estrategias recomendadas son:

Enfocar el informe de manera positiva, constructiva y de apoyo.

Concentrarse en las reas clave, sin entrar en detalles.
Describir las fortalezas al principio, para crear un clima adecuado. Luego es
posible en entrar en un anlisis de las debilidades.
Plantear las debilidades desde una perspectiva constructiva, lo que facilitar su
aceptacin (pero sin disfrazarlas tanto que dejen de parecer debilidades).
Permitir que los propios actores (directivos de la IES) identifiquen las soluciones.
Omitir las recomendaciones que el Comit pretende hacer.
No emitir ningn dictamen.
Sealar que se trata de un informe preliminar, cuyas conclusiones pueden
modificarse levemente al redactar el Informe de evaluacin.

Por ltimo, es recomendable que el CE redacte un informe, incluso cuando se presente

en forma oral, pero sin entregar el texto a la IES. En efecto, contar con el texto del
Informe de salida contribuye a la consistencia entre ste y el Informe de evaluacin.

6. Renovacin de la acreditacin (Reacreditacin)

La autoevaluacin para la renovacin de la acreditacin se realiza con las categoras,
elementos, indicadores, criterios y estndares establecidos en el Marco de referencia
vigente en el momento del trmite ante CACEI.
El informe de autoevaluacin con fines de reacreditacin, adems de dar cuenta de los
niveles de cumplimiento de cada uno de los indicadores, debe demostrar los avances
que el programa ha tenido en todos los elementos e indicadores, por categora, en el
periodo que ha transcurrido de la fecha en que el CACEI otorg la acreditacin a la
fecha en que se entrega el informe de autoevaluacin, destacando de forma notable los
aspectos que, a juicio del Comit Evaluador y del Comit de Acreditacin, presentaban
debilidades y por lo tanto se recomend su fortalecimiento. Asimismo, el informe debe
incluir la proyeccin del mejoramiento, en el marco del plan de desarrollo tanto
institucional como del programa educativo sujeto a evaluacin.

21

Igualmente, el informe de reacreditacin debe incluir la informacin actualizada del

programa: plan de estudios, poblacin estudiantil, egresados, profesores, recursos de
apoyo a la docencia, experiencias significativas, infraestructura, investigacin y/o
desarrollo tecnolgico; as como de los aspectos que se describen en el Marco de
referencia del CACEI. La informacin que se presente debe centrarse en los cambios
ms significativos que se hayan generado desde el Informe de evaluacin anterior.
El representante o responsable del programa en la institucin debe gestionar la
acreditacin con seis meses de anticipacin a la fecha de vencimiento de la misma; y el
CE debe analizar el grado de cumplimiento de estas recomendaciones y la mejora de
los indicadores.

El CACEI agradece a los Ingenieros Clemente Reza, Octavio Garca Madhuar y

Miguel Angel Romero Ogawa su dedicacin para el anlisis profundo y las valiosas
aportaciones que hicieron para la mejora del presente manual.

22