Sunteți pe pagina 1din 25

Universidad Simón Bolívar

Facultad de Ingeniería

Versión 1.0 Agosto 2019


Contenido
1 Resumen .................................................................................................................................................... 1

2 Competencias............................................................................................................................................ 2

3 Rúbricas ..................................................................................................................................................... 5

4 Assessment ............................................................................................................................................. 15

5 Tabulación ............................................................................................................................................... 16

6 Indicadores – Rangos .............................................................................................................................. 20

7 Presentación de resultados ..................................................................................................................... 20

8 Evidencias ................................................................................................................................................ 22
1 Resumen
Las actividades iniciales de preparación para la Acreditación Internacional, apoyadas
por la Universidad Autónoma de Nuevo León y la Universidad del Norte, permitieron
construir colectivamente las primeras herramientas propias de la Facultad a efectos
de iniciar la curva de aprendizaje con los primeros intentos de assessment en el
segundo semestre de 2018. De estos primeros pasos, surgió una propuesta inicial
que fue acogida por un grupo de profesores de los Programas de Ingeniería, para
durante el primer semestre de 2019, desarrollar el Primer Ciclo de Mejoramiento
orientado al perfeccionamiento de Herramientas y Procesos de Assessment,
precursor de este documento.

Como elemento dinamizador del proceso, la Facultad adoptó formalmente la más


reciente versión de Student Outcomes de ABET (2019) como las Competencias
Específicas de ingeniería.

Durante ese período se identificó la articulación directa y dinámica entre los


elementos del assessment de Student Outcomes descritos por ABET y los
lineamientos de la Vicerrectoría Académica a través del nuevo modelo de Programa
Analítico. Esta feliz coincidencia permitió acelerar el proceso de construcción de los
Sillabi reformados, e incorporarlos directamente al proceso de assessment. Como
resultado de ello, todos los profesores de la Facultad están en condiciones de hacer
assessment en sus cursos, con las mismas herramientas y procesos diseñados
inicialmente con miras a la Acreditación Internacional.

El trabajo colectivo de los profesores y directivos de los Programas y la Facultad de


Ingeniería ha facilitado la adopción generalizada de las herramientas y procesos que
se describen en forma detallada en este documento. El Modelo de Assessment
satisface y complementa los requerimientos de la Vicerrectoría Académica a través
del nuevo Programa Analítico, así como los de ABET a través de sus Criterios para
Acreditación 2019-2020, y también los del Ministerio de Educación a través del
Decreto 1330 sobre el Modelo de Aseguramiento de Calidad en la Educación Superior.
El hecho de estar basado en el uso y aplicación de las competencias a los programas
analíticos para estructurar los procesos de medición, evaluación y evidencia, hace
que pueda ser aplicado ampliamente a todos los programas de la Universidad,
creando así un repositorio estructurado, homogéneo y comparable de datos para
evaluar, analizar y proponer intervenciones de mejoramiento desde el nivel del aula
de clase hasta el nivel institucional, en todos los casos con una gran facilidad de
seguimiento y adaptabilidad, como quedó evidente al analizar sus componentes con
el Decano de Ciencias Básicas y Biomédicas y con la Directora del Departamento de
Ciencias Sociales.

Este Modelo es la base para el desarrollo del Segundo Ciclo de Mejoramiento,


orientado a identificar y perfeccionar procesos de análisis, evaluación y construcción
de propuestas de mejoramiento durante la segunda mitad de 2019.

1
2 Competencias
La Facultad de Ingeniería ha adoptado los 7 Student Outcomes establecidos por ABET
en sus criterios de 2019-2020 como las Competencias Específicas de Ingeniería en la
Universidad Simón Bolívar. A continuación, se presenta la descripción original de
estas competencias, seguida de las definiciones, recomendaciones de ABET para su
medición y evidencias.

SO#1 an ability to identify, formulate, and solve complex engineering problems by


applying principles of engineering, science, and mathematics.

Basic Science – Basic sciences are disciplines focused on knowledge or


understanding of the fundamental aspects of natural phenomena. Basic sciences
consist of chemistry and physics and other natural sciences including life, earth, and
space sciences.

College-Level Mathematics – College-level mathematics consists of mathematics


that requires a degree of mathematical sophistication at least equivalent to that of
introductory calculus. For illustrative purposes, some examples of college-level
mathematics include calculus, differential equations, probability, statistics, linear
algebra, and discrete mathematics.

Engineering Science – Engineering sciences are based on mathematics and basic


sciences but carry knowledge further toward creative application needed to solve
engineering problems. These studies provide a bridge between mathematics and
basic sciences on the one hand and engineering practice on the other.

Complex Engineering Problems – Complex engineering problems include one or


more of the following characteristics: involving wide-ranging or conflicting technical
issues, having no obvious solution, addressing problems not encompassed by current
standards and codes, involving diverse groups of stakeholders, including many
component parts or sub-problems, involving multiple disciplines, or having significant
consequences in a range of contexts.

• SO#1 requires complex problems.


• Only one of the above characteristics is needed.
• Programs have freedom to choose where they assess and evaluate complex
problems.
• Programs do not need to include all elements of the definition of complex
problems – 1 is sufficient

2
SO#2 an ability to apply engineering design to produce solutions that meet specified
needs with consideration of public health, safety, and welfare, as well as global,
cultural, social, environmental, and economic factors.

Engineering Design – Engineering design is a process of devising a system,


component, or process to meet desired needs and specifications within constraints.
It is an iterative, creative, decision-making process in which the basic sciences,
mathematics, and engineering sciences are applied to convert resources into
solutions. Engineering design involves identifying opportunities, developing
requirements, performing analysis and synthesis, generating multiple solutions,
evaluating solutions against requirements, considering risks, and making trade-offs,
for the purpose of obtaining a high-quality solution under the given circumstances.

For illustrative purposes only, examples of possible constraints include accessibility,


aesthetics, codes, constructability, cost, ergonomics, extensibility, functionality,
interoperability, legal considerations, maintainability, manufacturability,
marketability, policy, regulations, schedule, standards, sustainability, or usability.

• Considering risk has been added to the description of design.


• All factors must be considered.
• List of factors that must be considered – even if all factors do not influence the
specific design.
• It is expected that at some point in the curriculum the phases of the design
process will be incorporated.
• All phases do NOT have to be present in the major design experience.
• Indicate industry practice of considering elements – not forcing Perhaps a
checklist to say what they consider and why they don’t consider certain
elements.

SO#3 an ability to communicate effectively with a range of audiences.

• Programs have the freedom to determine the range of audiences.


• Should have a minimum of 2 audiences in their range
• There are many possible audiences-
o Writing an article for a professional journal
o External clients (industry sponsors, doctors, nurses, venture capitalists)
o End users
o Faculty
o K-12 STEM Outreach
o Lay person (non-technical)
o ABET is not prescriptive
o There are many other possible audiences: faculty, students, non-
technical public sector, for biomedical engineers, they might
communicate with doctors. In capstone, students could communicate
with external clients. It is the program’s responsibility to determine what
makes sense for them.

3
#SO4 an ability to recognize ethical and professional responsibilities in engineering
situations and make informed judgments, which must consider the impact of
engineering solutions in global, economic, environmental, and societal contexts.

• Consideration of impacts is the key.


• It is not necessary for every engineering situation to require that global,
economic, environmental, and societal contexts be major considerations.
• Consideration of the impact as the judgment is made is key.
• Document the consideration
• Just note again that consideration does not require that all elements are of
major concern.

SO#5 an ability to function effectively on a team whose members together provide


leadership, create a collaborative and inclusive environment, establish goals, plan
tasks, and meet objectives.

Team – A team consists of more than one person working toward a common goal
and should include individuals of diverse backgrounds, skills, or perspectives.

• Diversity in team definition should be understood in the context of SO#5.


• Indicates the importance of considering the team background, skills and
perspectives.
• C4 assessment and evaluation should address teams.
• Shared leadership.
• Tools and techniques (schedules, scrum, goal setting, decision matrices).
• Inclusiveness and collaboration can be characterized in various ways.

Possible techniques for assessing collaborative and inclusive teams include:

• Videotaping a team meeting and evaluating the team performance using a


rubric.
• Students write descriptions of their contributions and their team members'
contributions indicating how they collaborated and were inclusive. A rubric is
often used to evaluate the description.
• External clients meet with students over a period of time and evaluate their
contributions and inclusiveness.
• Use of web-based peer evaluations such as CATME.org or TEAMMATES. The
peer evaluations include specific questions about collaboration and
inclusiveness.
• Verbal feedback from course TAs or instructors about a team's collaboration
and inclusiveness. Students take notes and give evidence to support or refute
the feedback.

4
SO#6 an ability to develop and conduct appropriate experimentation, analyze and
interpret data, and use engineering judgment to draw conclusions

• Design of Experiments is a term of art in some areas – ABET never intended


to require a specific technique
• Must show judgment in drawing conclusions

SO#7 an ability to acquire and apply new knowledge as needed, using appropriate
learning strategies.

• Students take initiative for their learning


• Appropriate learning strategies can include courses, research, interviewing
experts – whatever is appropriate for the task
• Meant to be broad – this can be approached in many ways

3 Rúbricas
La Rúbrica Analítica es la piedra angular del modelo de Assessment, no solo porque
determina los Indicadores de Desempeño (PI) y sus rangos de aceptación, sino
porque permite articularlos con el contenido de los Programas Analíticos y establece
bases homogéneas para la medición de los resultados de aprendizaje y sus
correspondientes evidencias. De esta manera se establece como el conector dinámico
entre los modelos de aseguramiento de calidad de la Universidad, el Ministerio de
Educación y ABET.

Se presenta la más reciente versión de las Rúbricas analíticas de cada S.O.,


construida colectivamente entre los líderes temáticos de los diferentes programas de
Ingeniería, con la participación de profesores. Una nueva versión mejorada será
publicada al finalizar el Segundo Ciclo de Mejoramiento en Diciembre de 2019.

5
SO #1: an ability to identify, formulate, and solve complex engineering problems by applying
principles of engineering, science, and mathematics.
Performance
Insatisfactorio En Desarrollo Satisfactorio Sobresaliente
Indicators(PI)
Identifica
Identifica plenamente causas,
PI 1.1: Identificar
Identifica algunas plenamente efectos y prioriza las
la naturaleza y No identifica causas, efectos y causas, efectos y variables de
los componentes causas, efectos y
las variables pero las variables acuerdo a la
del problema las variables
asociadas al no las asocia al asociadas al incidencia de cada
problema problema problema una de ellas.
Aplica
PI 1.2: Formular herramientas
el problema No aplica metodológicas
herramientas para la Aplica las Aplica las
aplicando metodológicas formulación del herramientas y herramientas y
herramientas para la problema pero no tecnicas para la tecnicas pertinentes
metodológicas formulación del de manera formulación del para la formulación
problema. correcta problema. del problema.
PI 1.3: Resolver el
problema Aplica los Aplica de manera
mediante la No aplica los principios de Aplica de manera apropiada y
aplicación de principios de ingeniería, ciencia apropiada los rigurosa los
principios de ingeniería, y matemática principios de principios de
ciencia y para resolver el ingeniería, ciencia ingeniería, ciencia y
ingeniería,
matemática para problema pero no y matemática para matemática para
ciencia y resolver el de la manera resolver el resolver el
matemática problema. apropiada. problema. problema.
No interpreta ni Emite conclusiones
PI 1.4: Emitir relaciona la Interpreta la pertinentes para la
conclusiones solución solución obtenida Emite conclusiones solución del
desde la solución obtenida con el pero no la pertinentes para la problema y propone
planteada. contexto del relaciona con el solución del nuevas aplicaciones
problema. contexto problema de la solución.

6
SO #2: an ability to apply engineering design to produce solutions that meet specified needs with
consideration of public health, safety, and welfare, as well as global, cultural, social, environmental,
and economic factors.
Performance
Insatisfactorio En Desarrollo Satisfactorio Sobresaliente
Indicators(PI)
Identifica
Identifica los criterios
algunos criterios Identifica los
PI 2.1 Identificar No identifica los
sin tener en criterios
suficientes para el
criterios del criterios mínimos diseño según los
cuenta los suficientes para
con los requerimientos y
diseño según los requerimientos y
requerimientos el diseño con
restricciones, aplicando
requerimientos y o las todos los
las restricciones metodologías que
restricciones requerimientos y
las restricciones del diseño permitan su
claves del restricciones
jerarquización
diseño
Propone Propone alternativas de
PI 2.2 Generar Genera sólo una
alternativas de solución considerando
alternativas de No genera alternativa de
solución los criterios
alguna solución, o
solución a partir alternativa de presenta
considerando los identificados,
de los criterios criterios de evidenciando una
solución algunas no
diseño metodología de análisis
identificados pertinentes
identificados. adecuada y pertinente
PI 2.3 Seleccionar
la alternativa de
solución
teniendo en
cuenta Compara, evalúa y
Escoge una
Compara, evalúa selecciona la alternativa
consideraciones No evalúa, ni
solución poco
y selecciona una de solución más
de salud pública, adecuada o con
compara alternativa de eficiente teniendo en
errores
seguridad, diferentes
importantes sin
solución eficaz cuenta estándares y
bienestar, asi alternativas de teniendo en metodologías
tener en cuenta
solución cuenta todas las pertinentes, así como
como factores las
consideraciones todos las
globales consideraciones
consideraciones
culturales,
sociales,
ambientales y
económicos
Diseña Diseña
Diseña detalladamente
detalladamente detalladamente
cumpliendo con todos
PI 2.4 Diseñar No realiza un una solución cumpliendo con
los criterios,
diseño detallado cumpliendo la mayoría de los
detalladamente de la alternativa algunos de los criterios,
requerimientos,
la solución restricciones y
seleccionada criterios, requerimientos,
consideraciones
requerimientos restricciones y
(aplicando estándares)
y restricciones. consideraciones

7
SO #3: an ability to communicate effectively with a range of audiences
Performance
Insatisfactorio En Desarrollo Satisfactorio Sobresaliente
Indicators(PI)
a) Comunicación escrita
Demuestra un Demuestra un
Demuestra un
conocimiento profundo
conocimiento
amplio del conocimiento del
limitado del
contexto, contexto, la audiencia
Muestra una contexto, la
audiencia y y el propósito
mínima atención audiencia y el
propósito comunicativo. Utiliza
al contexto, propósito
comunicativo. contenidos y recursos
audiencia y al comunicativo. Utiliza
Utiliza contenidos pertinentes,
propósito algunos contenidos y
y recursos relevantes y
PI 3a.1 comunicativo recursos para
relevantes para significativos que
Desarrollar el Desarrolla pocas desarrollar y explorar
desarrollar y demuestran el
contenido ideas en el ideas en algunas
explorar ideas en dominio del tema y
documento partes del trabajo.
el documento. que abarcan la
escrito. No Presenta mínimos
Soporta la totalidad del
presenta fuentes soportes
mayoría de sus documento escrito.
bibliográficas. bibliográficos, con
argumentos con Soporta todos sus
referenciación y
referencias argumentos en
citación incompleta y
bibliográficas fuentes bibliográficas
poco fiable.
confiables. confiables.
Demuestra una
Demuestra una atención sistemática y
No evidencia una Tiene en cuenta
organización detallada en la
secuencia lógica algunos elementos
pertinente en el presentación y
(cohesión/cohere básicos, en la
PI 3a.2 documento, que organización del
ncia) en la organización y
Organizar el permite identificar documento, que
presentación y presentación de las
documento con claridad el permite al lector
organización del partes del
desarrollo de las identificar claramente
documento. documento.
ideas. el desarrollo de las
ideas.
Utiliza un lenguaje
Utiliza un lenguaje
adecuado y pertinente
Utiliza un Utiliza un lenguaje adecuado y
al contexto y
lenguaje poco que algunas veces pertinente al
PI 3a.3 Utilizar audiencia, que
claro debido a transmite significado contexto y
normas de demuestre un
errores a los lectores con audiencia. El
ortografía y excelente dominio de
frecuentes en su claridad, aunque documento
gramática en la los aspectos
ortografía y puedan aparecer presenta pocos
construcción gramatiales y
estructura errores gramaticales errores
de sentido ortograficos en la
gramatical. y/o ortográficos. ortograficos y/o
comunicación de las
gramaticales.
ideas.

8
b) Lectura Crítica
Interpreta el
No entiende el
Entiende el significado de la Interpreta con gran
significado de los
PI 3b.1 significado de mayoría de los facilidad el significado
elementos que
Identificar y algunos de los elementos que de todos los
constituyen un
entender los elementos que constituyen un elementos que
texto. No
contenidos constituyen un texto. texto. Reconoce la constituyen un texto.
identifica los
locales que Identifica algunos de mayoría de los Reconoce todos los
eventos narrados
conforman un los eventos narrados eventos narrados eventos narrados de
de manera
texto de manera explícita de manera manera explícita en
explícita en el
en el documento explícita en el un documento escrito
documento
documento
No identifica las Identifica la
Identifica algunas de Identifica fácilmente e
PI 3b.2 ideas o mayoría de las
las ideas o interpreta todas las
Comprender afirmaciones ideas o
afirmaciones ideas o afirmaciones
como se presentes en un afirmaciones
presentes en un presentes en un texto
articulan las texto informativo presentes en un
texto informativo con informativo
partes de un sin una clara texto informativo
poca comprensión de demostrando la total
texto para comprensión de evidenciando una
la estructura del comprensión de la
darle un la estructura del comprensión
mismo. estructura del escrito
sentido global mismo. adecuada.
Establece una clara
Identifica la
relación entre un
No identifica la Identifica con relación entre un
PI 3b.3 texto y otros.
validez e dificultad la validez e texto y otros.
Reflexionar a Contextualiza y
implicaciones de implicaciones de un reconociendo las
partir de un interpreta con
un enunciado de enunciado de un estrategias
texto y evaluar facilidad las
un texto. texto discursivas en un
su contenido estrategias discursivas
texto
en un texto.

9
c) Comunicación Oral
El Contenido se
El Contenido es
Maneja El Contenido es explica
explicado sin
inadecuadament explicado con coherentemente con
dificultades,
e el contenido y dificultades, con una secuencia
siguiendo una
PI 3c.1 evidencia poca escasa secuencia, estructurada que
secuencia clara
Evidenciar prepración que dificultando la permite la
que facilita la
Dominio del dificulta la comprensión de la comprension del tema
comprensión de la
Contenido comprensión del audiencia y sin por parte de la
audiencia y hace
tema por parte énfasis en momentos audiencia mediante
énfasis en los
de la audiencia claves justificaciones
momentos claves.
asertivas.
Utiliza una actitud
No utilizó un
conversacional
tono y
apropiada y seria
articulación Las técnicas de
con un tono de
adecuado de la Utiliza un tono de voz expresión oral y
voz adecuado y
voz durante la adecuado. Recurre al corporal utilizadas
PI 3c.2 pronuncia con
presentación. uso de muletillas permiten que la
Demostrar claridad. No
Evidencia un ocasionalmente. comunicación sea
expresión oral recurre a
escaso e Proyecta seguridad a convincente, eficaz y
y corporal muletillas.
inapropiado través de la postura efectiva, generando
Proyecta
vocabulario, credibilidad.
seguridad a través
postura
de la postura y el
incorrecta.
contacto visual
Integra recursos
Integra creativamente
audiovisuales para
Utiliza pocos recursos audiovisuales
No utiliza ampliar y apoyar
recursos para ampliar y apoyar
recursos el contenido o
audiovisuales con mucho ingenio el
PI 3c.3 Utilizar audiovisuales propósito de su
adecuados para contenido o propósito
recursos adecuados para mensaje.
apoyar el contenido de su mensaje.
audiovisuales apoyar la (Gráficas, medios
o propósito de su (Graficas, medios
presentación electrónicos,
mensaje electrónicos, datos
datos
cuantificados,.)
cuantificados,.)

10
SO #4: an ability to recognize ethical and professional responsibilities in engineering situations and
make informed judgments, which must consider the impact of engineering solutions in global,
economic, environmental, and societal contexts
Performance
Insatisfactorio En Desarrollo Satisfactorio Sobresaliente
Indicators(PI)
Frente a una
PI 4.1. Frente a una
situación de
Identificar sus No demuestra el situación de
ingeniería demuestra
responsabilidades reconocimiento ingeniería identifica
el conocimiento de
profesionales, de un marco el marco legal
Reconoce algunas un marco normativo
éticas y sociales normativo regulatorio de su
normas que nacional e
en situaciones de nacional e ejercicio ético
regulan sus internacional, los
ingeniería, internacional que profesional,
responsabilidades deberes y derechos
considerando el regula sus considerando sus
y relación con el con el otro y el
marco legal responsabilidades derechos y deberes
entorno. entorno que regulan
regulatorio y sus y relaciones constitucionales y
su responsabilidad y
relaciones sostenibles con el los objetivos de
relaciones
sostenibles con el entorno. desarrollo
sostenibles con su
entorno. sostenible.
entorno.
PI 4.2. Demostrar
Muestra un
un
comportamiento
comportamiento
reflexivo, crítico, de
basado en Muestra un
En algunas cooperación y
principios y No evidencia comportamiento
ocasiones proactivo, cuando se
valores éticos en interés alguno en reflexivo, crítico, de
evidencia interés requiere resolver y
sus relaciones actuar basado en cooperación y
en actuar basado analizar situaciones
profesionales e principios y proactivo, cuando
en principios y que se presentan o
interpersonales valores éticos se requiere resolver
valores éticos que se estudian,
con la sociedad frente a y analizar
frente a evidenciando
en contextos problemáticas o situaciones que se
problemáticas o capacidad de
locales y globales situaciones presentan o que se
situaciones autocrítica y
y frente a profesionales y estudian y en sus
profesionales y flexibilidad para
problemáticas o sociales relaciones con el
sociales cambiar y rectificar
situaciones entorno social.
sus opiniones y
profesionales y
actuaciones en el
sociales
entorno social.

11
Frente a una Frente a situaciones
No genera ningún Frente a la
situación de de ingeniería,
PI 4.3. Emitir y juicio propio complejidad de una
ingeniería genera identifica
argumentar frente a una situación de
juicios propios o argumenta
críticamente situación de ingeniería argumenta
argumenta juicios críticamente sus
juicios sobre ingeniería, ni críticamente sus
ajenos, sin que se juicios y
situaciones de argumenta juicios y valoraciones,
aprecie valoraciones, con un
ingeniería críticamente evidencia apertura
pertinencia en los soporte teórico
identificando los juicios ajenos, ni frente a los juicios
razonamientos apropiado para sus
impactos evidencia el ajenos e identifica y
sobre los razonamientos
asociados a la reconocimiento valora los impactos
impactos sin un identificando los
misma. del impacto de asociados a los
soporte teórico impactos asociados
sus decisiones. mismos
adecuado. a los mismos.

SO #5: an ability to function effectively on a team whose members together provide leadership, create
a collaborative and inclusive environment, establish goals, plan tasks, and meet objectives.
Performance En
Insatisfactorio Satisfactorio Sobresaliente
Indicators(PI) Desarrollo
PI 5.1 Capacidad para Identifica sus fortalezas y asume
identificar y asumir con responsabilidad las
roles dentro del funciones correspondientes al rol
equipo asignado

PI 5.2 Capacidad de Escucha y comparte las ideas de


aportar al desempeño sus compañeros y busca que
eficiente del equipo todos se integren; procura
según el rol asignado mantener la unión en el equipo

PI 5.3 capacidad de
organizar
colectivamente el El equipo construye propuestas
trabajo del equipo organizadas para enfrentar los
para obtener las retos y alcanzar los objetivos
metas y objetivos identificados
identificados. (PI de
equipo)

12
SO #6: an ability to develop and conduct appropriate experimentation, analyze and interpret data, and
use engineering judgment to draw conclusions
Performance
Insatisfactorio En Desarrollo Satisfactorio Sobresaliente
Indicators(PI)
Planifica
No planifica adecuadamente Planifica el
adecuadamente el el diseño del experimento usando
PI 6.1: Planificar No planifica ni sigue
correctamente los experimento experimento y lo experiencias previas
y ejecutar un para la mejora del
pasos aunque ejecuta ejecuta, diseño y ejecuta
experimento experimentales los pasos siguiendo los correctamente el
propuestos.. pasos plan propuesto
establecidos
Analiza e
PI 6.2: Analizar e interpreta Analiza e interpreta
Analiza e correctamente los
interpretar los No analiza ni correctamente datos y resultados
interpreta interpreta
datos y los datos, pero del experimento
adecuadamente los correctamente
resultados tiene dificultades teniendo en cuenta
datos ni los los datos y las variables de
obtenidos de un resultados obtenidos en la
resultados del respuesta en su
proceso de en el experimento interpretación de
experimento contexto de
experimentación los resultados aplicación.
obtenidos
Utiliza juicios de Utiliza juicios de
ingeniería para ingeniería,
Utiliza juicios de analizando su
extraer
ingeniería pero no impacto en forma
conclusiones contextualizada,
PI 6.3: Inferir llega a inferir
No infiere claras y correctas para extraer
conclusiones conclusiones
conclusiones validas de acuerdo con conclusiones claras
usando juicios de del experimento claras y correctas,
el experimento y y correctas de
ingeniería ni usa un lenguaje acuerdo con el
las expresa
técnico apropiado experimento y las
usando un expresa usando un
para expresarlas.
lenguaje técnico lenguaje técnico
apropiado. apropiado.

13
SO #7: an ability to acquire and apply new knowledge as needed, using appropriate learning strategies
Performance
Insatisfactorio En Desarrollo Satisfactorio Sobresaliente
Indicators(PI)
Realiza procesos de
Identifica de
investigación
forma completa
validados
PI 7.1 Utilizar los procesos de
Identifica de científicamente
procesos investigación y es
manera básica los sobre nuevo
apropiados para capaz de diseñar
No utiliza procesos procesos de conocimiento, que
adquirir y aplicar metodologías
de investigación investigación que terminan siendo un
nuevo para la
alguno, se limita a lo le permitirán producto académico
conocimiento generación de
que ve en el aula generar y aplicar (libros, capítulos de
más allá del nuevos
nuevos libro, articulos,
recibido en el conocimientos
conocimientos. ponencias, etc) que
aula de clase que van más allá
puede ser publicado
de lo visto en
o presentado ante la
clase
comunidad
Identifica
claramente las
Identifica lineas de
PI 7.2 Participar
claramente las profundización del
en cursos o Identifica de
No identifica lineas de programa y la
actividades manera general
oportunidades de profundización oferta academica en
académicas o cuales son las
complementar sus del programa, educación
investigativas lineas de
estudios en su área mostrando continuada o
complementarias, profundización del
del saber interes en complementaria
o de educación programa
profundizar en que le ofrece,
continuada
una o varias. mostrando interés
en profundizar en
una o varias
PI 7.3 Utilizar Puede certificar
Puede certificar 1
herramientas y entre 2 y 3 Puede certificar 4 o
No muestra interés formación
estrategias de formaciones más formaciones
en complementar el complementaria
apoyo para hacer complementarias complementarias al
conocimiento al conocimiento
efectivo el al conocimiento conocimiento
adquirido en clases. adquirido en
aprendizaje a lo adquirido en adquirido en clase
clases
largo de la vida clases

14
4 Assessment
Aunque algunas competencias pueden ser medidas a lo largo del curso, se
recomienda que, en lo posible, las mediciones individuales se hagan hacia el final del
mismo (¿en el examen final?) para que el Assessment sea representativo del nivel
de adquisición de la competencia una vez que todo el contenido del curso ha sido
desarrollado. El profesor define cuando realizar el Assessment de las competencias a
las que contribuye su curso dentro de estas condiciones:

a) La medición debe hacerse a todos los estudiantes del curso


b) Todos los Indicadores de Desempeño (PI) de la competencia deben ser
medidos

La experiencia acumulada en el primer ciclo experimental de Assessment permite


recomendar la utilización de la Rúbrica de Punto Simple como herramienta de
medición sencilla, flexible y de fácil uso tanto por el profesor en la medición, como
por los estudiantes en la autoevaluación. Lógicamente esta recomendación no aplica
al componente de preguntas (con o sin respuesta múltiple) del examen.

A continuación se describen los elementos de tal Rúbrica, ajustados a los propósitos


de medición en la Facultad, así como la secuencia más eficiente para su diseño.

a) El profesor determina el producto que deberá entregar el estudiante y que, a


su vez, evidencia la adquisición de la competencia a medir, con el nivel de
dificultad que corresponda al semestre en que se dicta el curso. (documento,
análisis, propuesta, plan, ensayo, etc.)
b) A partir de la descripción de cada uno de los PI y de la redacción del Nivel
Satisfactorio correspondiente, el profesor determina los elementos que debe
contener ese producto de tal forma que cada elemento (o Criterio de
Aceptación) pueda identificarse con UNO (solo uno) de los PI de la competencia
medida. El profesor está en libertad de determinar el número de elementos
que debe contener el producto final, que a su vez, deberán ser desarrollados
por el estudiante para demostrar que cuenta con la competencia.
c) Pueden existir elementos que NO estén relacionados directamente con u PI y
que el profesor considera son importantes desde el punto de vista de la
completa comprensión de la materia.
d) Este proceso continúa hasta que el profesor determine que los criterios
establecidos representan fielmente tanto los PI de la competencia, como la
especificidad temática desarrollada durante el curso. En este momento se
revisará que cada uno de los PI esté relacionado por lo menos con un criterio.
e) Para cada uno de los criterios establecidos (estén o no relacionados con un PI)
deberá identificarse el nivel de complejidad correspondiente a la Taxonomía
de Bloom, a fin de asegurarse que el perfil de respuestas sea consistente con
el nivel de dificultad que se espera pueda enfrentar un estudiante del
correspondiente semestre. La recomendación general es que en los primeros
semestres la frecuencia de los primeros tres niveles sea mayoritaria y que a

15
medida que se avanza en la carrera, aparezcan, cada vez con mayor frecuencia
os tres niveles superiores.
f) Finalmente, el profesor puede asignar un peso relativo a cada uno de los
criterios, a fin de producir la calificación de ese componente del examen, a
partir del Assessment (0 a 5) de cada uno de los criterios.
g) Las columnas de observaciones al lado de los criterios (pueden reducirse a
una) serán utilizadas por el profesor para dar realimentación al estudiante
sobre aspectos por mejorar, o sobre aspectos sobresalientes de su entregable,
pero también podrán ser usados por el estudiante en su autoevaluación, para
dar realimentación al profesor sobre su interpretación de las razones de esa
autoevaluación, en especial cuando sea menos que satisfactoria.

Para la sección de preguntas, que puede formar parte del examen, se recomienda
únicamente hacer la relación de cada una con el nivel correspondiente en la
taxonomía de Bloom.

5 Tabulación
Se proponen dos tipos de tabulación de los datos obtenidos:

a) los valores obtenidos del Assessment de cada uno de los PI, agrupados por
estudiante. Objetivo: medir la adquisición de la competencia y sus PI por cada
estudiante para generar el Assessment de la competencia a partir de la
distribución d esos resultados;
b) los alores obtenidos del Assessment de todos los criterios, agrupados por Nivel
de la Taxonomía de Bloom. Objetivo: establecer la frecuencia de medición de
cada nivel, así como los resultados obtenidos, para validar la consistencia del
nivel de dificultad con el avance en la carrera.

16
Assessment

a) Los valores de la columna Assessment en la Rúbrica de Punto Simple de cada


estudiante, se trasladan en forma horizontal a la tabla de consolidación, de
forma que reflejen el valor de cara criterio que se relacionó con uno de los
Indicadores de Desempeño (PI) de la Rúbrica Analítica del Student Outcome
bajo medición (se sugiere hacerlo justo al momento de finalizar la calificación
de cada estudiante).
b) Una vez transferidos todos los valores, se promedian los correspondientes a
cada PI y luego se promedian estos para obtener el valor de assessment del
Student Outcome. Estas fórmulas simples, se copian hacia abajo a toda la tabla
para los resultados del assessment.
c) Finalmente, se ordenan los datos en forma descendente por cada uno de los
PI y por el SO# para poder identificar el porcentaje de estudiantes en cada
rango. Próximamente se desarrollará un aplicativo para hacer este proceso en
forma automática. La definición de rangos y valores se encuentra en la
siguiente sección de este documento.

17
Ejemplo de una tabulación con tres entregables para el Assessment del SO#1:

Taxonomía de Bloom

Esta medición ser realizará por primera


vez, por tanto, no se tienen resultados
de referencia y la metodología e
indicadores se proponen para su
aplicación y análisis, a fin de mejorarlos
a lo largo del semestre. Un nivel de la
taxonomía debe ser asignado a cada
uno de los criterios de la Rúbrica de
Punto Simple, así como a cada pregunta
de la sección de preguntas, si existe. El
propósito es analizar la distribución de
frecuencia de mediciones de cada nivel
y su resultado promedio, frente a los
niveles crecientes de complejidad esperables en cada semestre. Si las Rúbricas de
medición y el Banco de preguntas se diseñaron bajo este criterio, la tabulación
propuesta sigue esta metodología:

18
Origen: Assessment con Rúbrica de Punto Simple

a) Se copian a una tabla de


Excel directamente las
columnas Nivel de
Taxonomía y Assessment
b) Se ordena la tabla según
los Niveles de Taxonomía
c) Se calcula el promedio de
cada nivel
d) Se pasa a la tabla el
promedio y el número de
mediciones de cada
nivel.

Origen: Banco de Preguntas

a) Se copian a la misma tabla de


Excel las columnas Nivel de Taxonomía y
Calificación de cada pregunta.
b) Se ordena la tabla según los
Niveles de Taxonomía.
c) Se calcula el promedio de cada
nivel.
d) Se pasa a la tabla el promedio
correspondiente a cada uno de los
Niveles de la taxonomía.

19
6 Indicadores – Rangos
A partir del primer ciclo de Assessment experimental, se definieron los siguientes
rangos que serán aplicados a la tabulación de resultados tanto del assessment como
del perfil de dificultad obtenido:

La utilización consistente de estos rangos permitirá hacer comparaciones válidas de


los resultados obtenidos, a la vez que acumular argumentos para su adopción sin
modificación, o su ajuste para los siguientes ciclos de medición.

La meta inicial adoptada por la Facultad de Ingeniería es de evidenciar que al menos


el 70% de los estudiantes han adquirido las competencias en un nivel satisfactorio o
sobresaliente.

7 Presentación de resultados
Assessment con Rúbrica de Punto Simple

Los datos que se encuentran en el recuadro llamado “Distribución por Nivel de


Desempeño (%)”, resultantes de la tabulación y transformación de los resultados
obtenidos con la Rúbrica de Punto Simple, son utilizados para construir una gráfica
que exprese con claridad, tanto la distribución de resultados del assessment de cada
PI y del Student Outcome, como el nivel de aproximación a la meta establecida que
se obtuvo en cada caso. Esta gráfica formará parte integral del archivo Excel como
parte de las evidencias.

Ejemplo de representación de resultados del Assessment del SO#1

20
El uso de una forma estandarizada de construcción del reporte gráfico del
assessment, facilitará la comparación de resultados y su consecuente análisis y
evaluación.

Frecuencia de medición según Niveles de Taxonomía de Bloom

Como ya fue mencionado, este componente de la medición pretende evidenciar el


nivel creciente de complejidad aplicado al assessment de los PI de cada Student
Outcome, así como la distribución de resultados de acuerdo con estos niveles.

Se propone utilizar un gráfico de barras verticales con doble eje, donde uno
corresponde al porcentaje de los criterios y preguntas relacionados con cada nivel
(izquierda) y el otro corresponde al promedio de ‘calificación’ por nivel (derecho). A
este segundo eje se puede sobreponer una barra horizontal representativa de la
meta aceptada como límite satisfactorio (3.5) para enriquecer el potencial de análisis.

Se presenta una simulación del tipo de reporte que podría obtenerse en estas
condiciones.

Ejemplo simulado de reporte gráfico de frecuencia y resultados según Niveles de la


taxonomía

Las barras azules representan la frecuencia de aparición de los niveles en las


preguntas y criterios, según los criterios de tabulación descritos en la sección 5 de
este documento. Puede apreciarse una distribución casi Gaussiana, con énfasis en los

21
niveles 3 y 4. Por tratarse de un curso de Sexto semestre, se esperaría que el énfasis
estuviera hacia la derecha, por lo menos en los niveles 4 y 5.

Las calificaciones de los niveles superiores (5 y 6) se encuentran por debajo del límite
satisfactorio, mientras que los niveles 1 y 4 presentan los resultados más altos.

Esta breve simulación permite extraer elementos de información válidos y


pertinentes, que pueden enriquecer el proceso de evaluación y análisis del
Assessment. Será probado y perfeccionado durante el Segundo Ciclo.

8 Evidencias
Es necesario almacenar las evidencias generadas desde el inicio del proceso de
Assessment colectivo. En volumen de información y documentos crecerá de manera
exponencial y por tanto es preciso contar comuna estrategia de almacenamiento que
permita su gestión manual, inicialmente, y que facilite la evolución fluida hacia una
gestión automatizada.

Se propone conservar los siguientes cinco (5) documentos como evidencia para cada
medición de una competencia

a) Modelo de la herramienta de medición: descripción del producto y copia de la


Rúbrica de punto simple. Un archivo Formato PDF
b) Resultado individual de tres estudiantes representativos de los grupos con
resultados altos, medios y bajos, identificados con su Código. Copia de los
trabajos entregados y de las Rúbricas de evaluación diligenciadas. Un archivo
Formato PDF
c) Tabulación del assessment con códigos de estudiante, con gráfico de
resultados. Tabulación de frecuencia y resultados del Nivel de Taxonomía de
Bloom. Formato Excel (dos pestañas)

Los tres archivos dentro de un solo archivo formato ZIP, con el siguiente código de
identificación:

22
Por ejemplo, el archivo de evidencias del Assessment del Student Outcome 2
realizado en el examen final de 2019-1, en el Curso de Gestión de Proyectos (6412)
de Sexto semestre de Ingeniería de Sistemas, horario nocturno, curso único será:

SO2-2019-1-ISIS-6412-06-2-1.ZIP

Posteriormente a este archivo se agregará el archivo Excel con la Tabulación y la


representación gráfica de los resultados del Assessment, y finalmente, un archivo
PDF con los resultados del análisis de resultados y propuestas de mejoramiento del
curso, redactado por el profesor.

De esta forma es muy fácil almacenar y navegar por una estructura jerárquica de
archivos así:

Facultad
>>Programa
>>Año
>>Semestre (1 a 10)

Esta estructura de archivos facilita la localización de la información deseada, inclusive


en forma automatizada.

Durante el Segundo Ciclo de mejoramiento (2019-2) se definirá la metodología,


procesos y documentos que surjan del análisis colectivo del assessment realizado
durante el semestre, que complementarán la estructura de documentos almacenados
como evidencia.

Versión 1.0, Agosto 29, 2019

23

S-ar putea să vă placă și