TRADUCTORA: LIC.

MARIA ALICIA GONZALEZ

TRADUCCION CINCO NIVELES CRITICOS DE EVALUACION DE DESARROLLO PROFESIONAL DOCENTE

Usar cinco niveles crticos de evaluacin, le permite a UD mejorar sus programas escolares de desarrollo profesional. Pero asegurese de comenzar con los resultados deseados-mejorar la produccin de los alumnos. Thomas Guskey Los educadores han considerado desde siempre que el desarrollo profesional es su derecho, algo a lo que tienen reservado como individuos dedicados y laboriosos. Pero los legisladores y decisores polticos han comenzado recientemente, a cuestionar ese derecho. Como los salarios crecieron, ellos observan lo que las escuelas gastan en desarrollo profesional y quieren saberlo. Las inversiones estn bien pagadas en esos salarios o podra ese dinero ser gastado de mejor manera? Estas preguntas hacen ms efectiva la evaluacin de los programas de desarrollo profesional, que hoy sean ms importante que nunca. Tradicionalmente, los educadores no le han prestado mucha atencin a la evaluacin de sus esfuerzos en el desarrollo profesional. Algunos consideran a la evaluacin un proceso costoso, que le toma tiempo y que desva la atencin de actividades ms importantes como la planificacin, implementacin y seguimiento. Otros sienten que carecen de las habilidades y la expertez para ser involucrados en evaluaciones rigurosas, como resultados, ellos o rechazan los procesos evaluativos completamente o los dejan para expertos evaluadores. Las buenas evaluaciones no deben ser complicadas. Simplemente requiere una planificacin pensada, cuidada, la habilidad de formular buenos interrogantes y un entendimiento bsico de cmo encontrar respuestas validas. Lo que es mas, ellas pueden proveer informacin significativa y ser usada para la toma de decisiones responsables y acertadas, acerca de los procesos de desarrollo profesional y sus efectos. QUE ES LA EVALUACION? En trminos simples, evaluacin es: la investigacin sistemtica del merito o valor (Comit Unido Standard para la Evaluacin Educativa, 1994 p.3) Sistemtica: implica un proceso intencional, focalizado y pensado. Nosotros evaluamos por razones claras y por razones explicitas. Investigacin: refiere a la coleccin y anlisis de informacin pertinente a travs de mtodos y tcnicas apropiados. Merito o valor: denota valuacin y juzgamiento. Usamos evaluaciones para determinar el valor de algo, para ayudar a responder preguntas tales como: Esta este programa o actividad obteniendo los resultados perseguidos? Es este mejor que lo que se estaba haciendo en el pasado? Es mejor que cualquier otra actividad? Vale el costo? Algunos educadores entienden la importancia de la evaluacin como vehculo de desarrollo profesional aun en talleres, seminarios, jornadas pero olvidan la amplia variedad de actividades menos formales para desarrollarse profesionalmente como: grupos de estudio, investigacin-

TRADUCTORA: LIC. MARIA ALICIA GONZALEZ

accin, planeamiento colaborativo, .desarrollo curricular, observaciones estructuradas, trabajo colaborativo, tutorado y otros mas. Pero, independientemente, de sus formas, el desarrollo profesional debe ser un objetivo a alcanzar permanentemente. A travs de la evaluacin, puede determinarse si estas actividades estn alcanzando sus propsitos. NIVELES CRITICOS DE EVALUACION DE DESARROLLO PROFESIONAL Nivel i: REACCIONES DE LOS PARTICIPANTES El primer nivel de evaluacin mira las reacciones de los participantes a las experiencias de desarrollo profesional. Esta es la forma ms comn de desarrollo profesional, y el tipo de informacin ms fcil de recoger y analizar. En este nivel I, se enfocan las preguntas hacia si. A los participantes les gusta la experiencia o no? Sienten ellos que su tiempo fue bien invertido? El material tuvo sentido para ellos? Las actividades fueron bien planeadas y significativas? Es til la informacin para los participantes? Preguntas importantes en los talleres o seminarios de desarrollo profesional, tambin son: Estaba el caf caliente y en horario? Estaba la sala con la temperatura correcta? Eran confortables las sillas? Para algunos estas preguntas pueden parecer tontas y poco significativas, pero los profesionales saben la importancia que tiene atender estas necesidades bsicas. La informacin acerca de las reacciones de los participantes, es generalmente recogida a travs de cuestionarios distribuidos al final de la sesin o actividad. Estos cuestionarios, incluyen tpicamente, una combinacin de respuestas que incluyen tems de rango abierto y preguntas sem. estructuradas, que les permiten a los participantes hacer sus propios comentarios. Debido a la naturaleza general de esta informacin, muchas organizaciones usan los mismos cuestionarios para sus actividades de desarrollo profesional. Algunos educadores insisten acerca de esta medicin de los participantes que solo revela el valor de entretenimiento de una actividad, pero no su calidad o valor. Pero medir la satisfaccin inicial de los participantes con la experiencia, puede ayudar a mejorar el diseo y distribucin de programas o actividades de manera valida. NIVEL II: APRENDIZAJE DE LOS PARTICIPANTES Tambin se espera, que los participantes aprendan algo de el. El nivel II se focaliza en medir el conocimiento y habilidades que los participantes obtienen. Siempre dependiendo de los objetivos del programa, este puede incluir actividades para valorizar (pueden los participantes describir los atributos cruciales de un buen aprendizaje y dar ejemplos de cmo estos deben ser aplicados a situaciones tpicas en el aula) hasta una simulacin o demostracin de habilidad (presentada con una variedad de conflictos ulicos, pueden los participantes diagnosticar cada situacin y luego prescribir y llevar adelante una solucin til) Se puede usar tambin, reflexiones personales, orales o portafolios que los participantes arman para documentar su aprendizaje. La medicin debe mostrar la obtencin de objetivos especficos de aprendizaje. Esto significa que los indicadores de un aprendizaje exitoso necesitan ser delineados antes recomenzar las actividades. Pueden usar esta informacin como base para mejorar los contenidos, formatos y la organizacin del programa. NIVEL III. SOPORTE ORGANIZACIONAL Y CAMBIO En el nivel III, el foco se direcciona a la organizacin, la falta de estos aspectos pueden sabotear cualquier esfuerzo de desarrollo profesional.

TRADUCTORA: LIC. MARIA ALICIA GONZALEZ

Suponga, por ejemplo, que algunos docentes de escuelas secundarias participan en un programa de desarrollo profesional en aprendizaje cooperativo. Ellos obtienen un acabado entendimiento de la teora y desarrollan una variedad de actividades basadas en los principios del aprendizaje cooperativo. Luego, siguiendo su entrenamiento, ellos tratan de implementar estas actividades en escuelas donde los estudiantes estn organizados en grados o clases-de acuerdo a su rendimiento relativo entre sus compaeros. Practicas como estas, hacen el aprendizaje altamente competitivo y frustraran los esfuerzos mas valiosos para lograr que los estudiantes cooperen y se ayuden unos a los otros a aprender (Guskey, 2000) La falta de resultados positivos en este caso, no refleja un entrenamiento pobre o aprendizaje inadecuado, pero se manifiestan aqu la organizacin., como algo que mina la implementacin de esfuerzos. Los problemas en el nivel III cancelan esencialmente, lo adquirido en los niveles I y II (Sparks y Hircsh, 1997) En el nivel III, se necesita focalizar en preguntas acerca de las caractersticas y atributos necesarios en la organizacin para lograr xito.Las actividades de desarrollo profesional promueven cambios que estuvieran alineados con la misin de la escuela y el rea? los cambios individuales logrados fueron dirigidos a todos los niveles? Los materiales bibliogrficos fueron tiles, incluyendo el tiempo para socializar y reflexionar acerca de ellos? Fueron los xitos reconocidos y compartidos? Cuestiones como estas, pueden determinar en gran parte, el xito de cualquier esfuerzo de desarrollo profesional. Recoger la informacin en el nivel III es generalmente mas complicado que en los otros niveles previos, los procedimientos difieren de acuerdo a los objetivos del programa o actividad, ellos deberan involucrar: El anlisis de los desempeos de las reas y las escuelas. Examinar, analizar las reuniones siguientes. Entrevistar a los participantes y administradores escolares. Se puede usar esta informacin, no solo para documentar y mejorar la organizacin sino que para influir en futuras iniciativas de cambio. NIVEL IV: USO DEL NUEVO CONOCIMIENTO Y HABILIDADES DESARROLLADAS En el nivel IV, el nuevo conocimiento y las habilidades que los participantes aprendieron inciden en sus prctica profesional? La clave para recoger la informacin relevante en este nivel, descansa en la especificacin de indicadores claros sobre el grado y la calidad de la implementacin? Es bueno, reconocer que q diferencia de los niveles I y II, esta informacin no puede ser recogida al final de la sesin de desarrollo profesional. Tambin, debe pasar el tiempo necesario para permitir a los participantes adaptar estas nuevas ideas y practicas a sus intervenciones ulicas. Ya que la implementacin, es a menudo, un proceso gradual. Este proceso debe ser evaluado en diferentes etapas y varias veces. Esta informacin debe ser recogida a travs de cuestionarios o entrevistas estructuradas con participantes y sus supervisores, reflexiones personales orales o escritas o portafolios. La informacin mas acertada y significativa siempre es resultante de la observacin directa, ya sea hecha con observadores entrenados o revisando material audiovisual. Ud puede analizar dicha informacin para ayudar a re estructurar programas futuros y actividades y as facilitar una implementacin mejor y mas consistente.

TRADUCTORA: LIC. MARIA ALICIA GONZALEZ

Figura 1 CINCO NIVELES DE EVALUACION DEL DESARROLLO PROFESIONAL

QUE PREGUNTAS SE FORMULAN? 1- Reaccin de Les gusto? los participantes Fue su tiempo bien empleado? El material era significativo? Ser este til? Cul fue la actitud del tallerista o conferenciante? Fueron los refrescos ricos y a hora? Tuvo la sala la temperatura adecuada? Fueron confortable las sillas? 2- Aprendizaje Los de los participantes participantes adquirieron el pretendido conocimiento y las habilidades?

NIVEL DE EVALUACION

COMO SE QUE SE MIDE RECOLECTA O EVALUA? LA INFORMACION? Cuestionarios La satisfaccin administrados al inicial con la final de la sesin experiencia

COMO SE USARA LA INFORMACION? Para mejorar el diseo del programa y su distribucin.

Instrumentos a papel y lpiz Simulaciones Demostraciones Reflexiones de los participantes (orales y/o escritos) Portafolios de los participantes Desempeo de las escuelas del rea Cuestionarios Entrevistas estructuradas con participantes, reas o administradores escolares

Nuevo conocimiento y las habilidades en los participantes

Para mejorar el contenido, formato y organizacin de los programas

3- Organizacin Fue la y Cambio implementacin consensuada, facilitada y apoyada? Fue el apoyo pblico? Fueron los problemas solucionados rpida y

La convocatoria de la organizacin, apoyo, facilidades y reconocimiento.

Documentar y mejorar el apoyo a la organizacin. Informar acerca de futuros esfuerzos para el cambio.

TRADUCTORA: LIC. MARIA ALICIA GONZALEZ

efectivamente? Los recursos fueron los necesarios? Fue compartido y reconocido el xito? Cul fue el impacto en la organizacin? Esto afecto el clima de la organizacin y sus procedimientos? 4- Uso del nuevo Los conocimiento y participantes habilidades por efectivamente los participantes aplican el nuevo conocimiento y las habilidades adquiridas?

Portafolios de los participantes

5- Productos del Cul fue el aprendizaje de impacto en los los alumnos estudiantes? Afecto esto en los producciones de los estudiantes? Influencio en aspectos fsicos y emocionales de los estudiantes? Esta mejorando la atencin de los estudiantes? Estn decayendo los abandonos?

Cuestionarios Entrevistas estructuradas con los participantes y sus supervisores Reflexiones de los participantes (orales y escritas) Portafolios de los participantes Observaciones directas Material audiovisual Producciones de los alumnos Producciones escolares Cuestionarios Entrevistas estructuradas con estudiantes, padres, docentes y /o administradores Portafolios de los participantes

Grado y calidad Documentar y de mejorar los implementacin contenidos del programa implementado

Productos del aprendizaje de los estudiantes Aspectos Cognitivos (produccin y adquisicin) Afectivo (actitudes y disposiciones) Psicomotor (habilidades y conductas)

Focalizar y mejorar todos los aspectos de un programa: diseo, implementacin y seguimiento. Demostrar el impacto integral del desarrollo profesional

TRADUCTORA: LIC. MARIA ALICIA GONZALEZ

NIVEL V: PRODUCTOS DE APRENDIZAJE DEL ALUMNO Este producto depende, por supuesto, de los objetivos de los esfuerzos puestos en el desarrollo profesional. Por esta razn, las evaluaciones siempre incluirn mediciones mltiples del aprendizaje de los alumnos ( Joyce, 1993) Consideremos, por ejemplo, los educadores de escuelas primarias quienes participan en grupos de estudio dedicados a encontrar los mejores caminos para mejorar la calidad de la escritura de los alumnos y disean una serie de estrategias, en las que ellos creen cumplirn el objetivo propuesto. En lo que respecta a la recogida de informacin, de este nivel, se encuentra que los alumnos que usaron las estrategias diseadas mejoraron significativamente en sus procesos de escritura, comparando con aquellos que sus docentes no usaron esas estrategias. Continuando con el anlisis, si embargo, ellos descubrieron que las producciones de los estudiantes en Matemticas declinaron comparadas con aquellas de los otros estudiantes. Esto ocurre aparentemente porque los profesores dedicaran mas tiempo a la ejercitacin de los procesos de escritura. La informacin en el nivel V, acerca del impacto integral del programa de desarrollo profesional puede guiar mejoras en todos los aspectos considerados en el citado programa. Incluyendo: el diseo del programa, su implementacin y seguimiento. En algunos casos, la informacin sobre los productos de aprendizaje de los alumnos, es usada para estimar el costo de la real efectividad de desarrollo profesional, algunas veces referida a retorno de la inversion (Parry, 1996, Todnem & Warner, 1993) BUSCANDO EVIDENCIAS, NO PRUEBAS Si se usan los cinco niveles de informacin en evaluaciones de desarrollo profesional, Esta ud listo para demostrar que ese programa de desarrollo profesional hace una diferencia? Puede demostrar, ahora, que un programa particular de desarrollo profesional y ningn otro, es absolutamente responsable en el 10% de la mejora observada en las producciones de los alumnos o en el 50% de reduccin de problemas disciplinarios? Por supuesto, que no. Casi todos los programas de desarrollo profesional tienen lugar en escenarios reales. La relacin entre desarrollo profesional y mejoras en el aprendizaje de los alumnos en esos escenarios reales es mucho mas compleja e incluyen la intervencin de diversas variables, para permitirnos inferencias tan simples y casuales.

TRADUCTORA: LIC. MARIA ALICIA GONZALEZ