Graciela Paula Caldeiro-Preguntas frecuentes finales de Evaluacin-1 PREGUNTAS FRECUENTES EN EVALUACION Lea atentamente la siguiente frase: "Parece lgico

afirmar que los criterios de una evaluacin estn condicionados por el paradigma y la metodologa que utilizan" (estudios cuantitativos y estudios cualitativos). Pero algunos autores han identificado "los criterios que toda evaluacin debe cumplir independientemente de sus caractersticas concretas" (Carpeta de Trabajo 1) a)Enuncie los criterios para los estudios cuantitativos; Estadsticos Validez Significacin Representatividad b)Enuncie los criterios para los estudios cualitativos; Contraste Valide externa Credibilidad Conformacin Autenticidad c)Enuncie los criterios para todas las evaluaciones; La dicotoma, cuali-cuanti no permite captar algunos de los criterios centrales que debe reunir toda evaluacin. House puntualiza al respecto: 1. Veracidad: no es posible considerar que los resultados sean veradades absolutas. Ms bien solo deben intentar persuadir. El evaluador no tiene por qu ser objetivo sino imparcial. 2. Credibilidad: Los destinatarios deben encontrarla digna de confianza: coherente, equilibrada y persuasiva. 3. Correccin: se refiere a la justicia y a la democracia. Debe ser equitativa y basada en los valores de equidad, autonomia, imparcialidad y reciprocidad. Aclara House que en caso de conflicto entre criterios, debe darse prioridad a la correccin, luego a la veracidad y finalmente a la credibilidad. Es posible distinguir entre evaluaciones internas y evaluaciones externas. a)Cules son las diferencias esenciales entre ambos tipos de evaluaciones? Mientras que las evaluaciones internas son realizadas por quienes no habiendo realizado el diseo del programa, participan de su ejecucin, las externas son realizadas por equipos desvinculados de ste. De esta forma, las evaluaciones internas, se hallan centradas principalmente en problemas de gestin, mientras que las externas se orientan hacia los problemticas del programa que interesan a los polticos, financiadores. As, algunos autores sealan que la investigacin interna es una forma de investigacin accin porque da apoyo al desarrollo organizativo y al cambio planificado. Los evaluadores internos son a menudo, responsables de analizar los problemas, hacer recomendaciones y adems, corregir dificultades y aplicar las soluciones. Las evaluaciones han crecido mucho en los EEUU en los ltimos aos, en parte debido a causas de recorte de recursos y en parte, debido a la decepcin de las evaluaciones externas. b)Cules son los principales factores que se deben considerar para decidir el tipo de evaluacin que mejor se ajusta a una situacin concreta? As, cabe preguntarse qu tipo de evaluacin es la ms conveniente para cada programa. Para ello, es necesario considerar algunos factores: 1. Confianza: los evaluadores externos generan menos confianza que los internos.

Graciela Paula Caldeiro-Preguntas frecuentes finales de Evaluacin-2 2. Objetividad y distanciamiento: los evaluadores externos estn mejor posicionados, sin embargo, debe preveerse que, con el objeto de conseguir nuevos contratos, los evaluadores externos pueden suavizar o sesgar de algn modo los resultados. 3. Comprensin del programa: los evaluadores internos tienen una perspectiva mejor. 4. Potencial de utilizacin: los evaluadores internos tienen ms posibilidades de comprender las necesidades aunque los externos gozan de mayor credibilidad. 5. Autonoma: los internos son menos independientes y tienden a no cuestionar cuestiones macro en las cuales se halla insertos. La visin de los externos es mucho ms amplia y permite reestructuraciones de fondo. 6. Credibilidad: cuando se trata de dar cuenta del programa a los financiadores, los evaluadores externos gozan de mayor cedibilidad, adems no estn sujetos a las presiones de quienes trabajan en los programas. Lea cuidadosamente la siguiente afirmacin relacionada con el diseo de evaluacin: "El diseo de una evaluacin de la institucin educativa es el momento inicial, el ms creativo y al mismo tiempo decisivo". (Carpeta 3) a) Qu se entiende por diseo de evaluacin? ALGUNA BUENA DEFINICIN? Un diseo de evaluacin es un plan que representa una opcin entre diversas alternativas posibles que deber considerar para quin es la informacin, qu informacin es la ms conveniente, los tiempos (cundo hay que tener listo el informe, los tiempos de recoleccin de datos, procesamiento y redaccin final), los instrumentos de recoleccin de datos, quin recoger la informacin y la forma en qu esto se har y finalmente cmo se comunicar. En el momento del diseo se debern considerar tambin los costos y efectos previstos. Todo diseo debe autojustifcarse por parte del equipo responsable. Enuncie y describa "los niveles de concrecin" o aspectos que deben ser explcitamente explicados en el diseo de evaluacin. Cuando se realiza un diseo de evaluacin conviene explicar los niveles del concrecin desde el ms amplio hasta el ms concreto: Niveles de concrecin: 1. Criterios de evaluacin: normas o reglas de valoracin en las cuales se basan los juicios y los discernimientos. Los criterios explicitan la finalidad de la evaluacin. 2. Estndares, categoras o mbitos: aspectos que hay que evaluar en el centro y que se consideran relevantes 3. Subcategoras: aspectos que componen cada mbito 4. Indicadores: datos concretos que refieran a las categoras 5. Oscilacin del indicador: variacin de un indicador cuantitativo respecto a un grupo normalizado 6. Indicadores complementarios: definen un mismo fenmeno desde perspectivas diferentes. Lea cuidadosamente la siguiente afirmacin relacionada con la evaluacin de programas: "La diferencia que existe entre los informes de tipo parcial, denominado tambin de progreso, y el informe final es importante" (Carpeta 2). c)Cules son las diferencias principales entre ambos tipos de informes? Los informes parciales no estn dirigidos hacia todas las audiencias sino que pueden enfocarse como instrumentos de trabajo y utilizarlos como elementos negociador o de recoleccin de datos. En cambio, el informe final, est dirigido tanto a las audiencias naturales (financiadotes,

Graciela Paula Caldeiro-Preguntas frecuentes finales de Evaluacin-3 organismos que dependen del programa, directores responsables, poblacin a la que va dirigida el programa, los que se ven afectados por el programa, los profesionales que aunque no participen tiene relacin acadmica con el programa), en cambio los informes finales, se dirigen tambin a los stakeholderes (audiencias itnersadas: aquellos que estn relacionados indirectamente por el programa, ya sea porque son profesionales de otras comunidades que en algn momento se vern afectados o porque indirectamente o involuntariamente el programa acta sobre algunos grupos). Mientras que el informe parcial es una instancia de trabajo, por lo cual recibe tambin el nombre de informe de progreso. El informe final, debe ocuparse de la generalizacin de los tatos obtenidos. d)Cules son los componentes de los informes parciales que deben aparecer claramente diferenciados? . Es importante que estos informes disriminen entre: Hechos: datos empricos y descubrimientos Interperetaciones: explicaciones Valoraciones: juicios Recomendaciones e)Cules son los aspectos que deben aparecer en el informe final? El informe final debe tener capacidad para generalizar los datos recogidos, requiere un lenguaje que no abuse de los tecnicismos pero preciso y riguroso. Tambin debe tener un estilo literario El informe final suele tener carcter analtico, los de tipo descriptivo tienen una extensin excesiva, por lo que deben estructurarse a partir de los puntos ms relevantes. El informe debe incluir una exposicin sobre la metodologa empelada as como del programa en su contexto. 1. Respecto de las tendencias actuales de evaluacin de polticas pblicas, desarrollar razones econmicas y presupuestarias, proceso de descentralizacin, presin de la opinin pblica. La tendencia actual entiende a la evaluacin como una actividad poltica y administrativa, y es una parcela de las polticas sociales y de administracin pblica en tanto el conjunto mismo de las polticas y los servicios pblicos se han vuelto objeto de evaluacin. Las causas de este fenmeno se deben a: Razones econmicas y presupuestarias (contencin del gasto pblico y prioridades en la asignacin de recursos) Presin de la opinin pblica (rendicin de cuentas) Consecuentemente, se produce un cambio en la administracin pblica, del modelo del control va legalidad se pasa a otro racional-burocrtico, en donde se miden los resultados de las polticas propuestas. En el contexto de las polticas educacionales, tres fenmenos explican la importancia reciente de la evaluacin: La descentralizacin y el reparto de poder (con el objeto de dar mayor autonoma a los centros para que regulen su propio funcionamiento) La rendicin de cuentas: Exigencia de transparencia, en armona con los principios de una gestin democrtica. (Moral: ante padres y alumnos; Profesional: ante colegas y Contractual: ante los contribuyentes). La rendicin de cuentas debera ser multidireccional (ante todos los involucrados en el sistema) y multidimensional (incluir no solo los resultados econmicos o los ms asequibles) Procesos de reforma educativa: Trasformaciones estructurales, curriculares y organizativas. Numerosos pases se encuentran en procesos de reforma, consecuentemente se ha desarrollado un nuevo sistema de gestin de sistemas educativos denominado pilotage o

Graciela Paula Caldeiro-Preguntas frecuentes finales de Evaluacin-4 steering que podra definirse como una decisin en el mbito microscpico y microscpico basado en contrataciones objetivas, relativas al estado, al funcionamiento o a los productos del sistema. 2- Explicar los siguiente modelos o enfoques de la evaluacin de procesos: objetivos de conducta, toma de decisiones y libre de objetivos. 1. Modelo de objetivos y comportamiento (Enfoque de Tyler Bloom) La evaluacin se encarga de definir los resultados y los objetivos del programa, de manera que la tarea del evaluadora, consiste en ver hasta qu punto esos objetivos fueron alcanzados. Este modelo de evaluacin utiliza objetivos mesurables como parmetro comparativo para lo cual utiliza diseos experimentales y cuasiexperimentales. Debilidad: la definicin de los objetivos a veces es arbitraria. El conocimiento previo de los objetivos puede sesgar el resultado de la evaluacin (Scriven). 2. Tomo de decisiones (Stufflebeam/Patton) Este modelo, tambin denominado CIPP (porque considera las variables Contexto, Imput, Proceso, Producto), se caracteriza por estar orientado a la toma de decisiones. As, la evaluacin se estructura en funcin de la decisiones que deben tomarse. Debilidad: aumenta el riesgo en el uso de resultados. 3. Enfoque libre de objetivos (Scriven) El evaluador no debe conocer los objetivos para evitar un determinado perfil en el estudio de los resultados. El evaluador debe ser un experto capaz de evitar un perfil determinado debido a s mismo, como a factores externos para determinar causalidades en condiciones no experimentales. Debilidad: el evaluador puede sustituir los objetivos del programa por los propios. Scriven lo resuelve centrando el resultado de la evaluacin en el producto que el programa ha generado, que es ms objetivable, desvinculado la subjetividad del evaluador. 3- Desarrollar las fases de la evaluacin de programas Chavez vinculada la evaluacin con el planeamiento porque considera que los proyectos educativos y la evaluacin deben estar articulados puesto que los dos pertenecen a un proceso comn mas general: la planificacin educativa, y por lo tanto, son parte son parte de la gestin de la educacin. Se trata as de un proceso contnuo. Ais, Chavez propone un enfoque estratgico para lo cual identifica siete pasos para la formulacin del proyecto y siete fases para la formacin de la evaluacin, articulndola con el mismo proyecto. En la carpeta de trabajo, se describen tres fases en el proceso: definiciones, diseo y procesamiento. Primera fase: Objeto: definirlo Preguntas: definirlas Diseo: hacerlo Acordar por escrito, objetivos, preguntas y diseo con quien financia y encarga la evaluacin.

Graciela Paula Caldeiro-Preguntas frecuentes finales de Evaluacin-5 En este primer momento debemos responder quin pide la evaluacin, para y por qu lo hace, qu tipo de informacin requiere, qu fuentes se podrn a disposicin y cundo debe tenerse listo el informe. Tambin es importante considerar los recursos con los que se contar. Segunda fase: En la etapa del diseo, debemos responder algunas preguntas: Para quien es la informacin? Suelen existir diferentes audiencias, entre ellas, el solicitante y el financiador, los que trabajan en el programa, los beneficiarios del programa y los interesados en el programa. Qu informacin es la ms convincente? Cundo debemos tener lista la informacin? Debemos ser realistas en cuanto a los tiempos. El proceso implicar recoger la informacin, procesarla y redactar un informe final. Cmo se recoger la informacin? Corresponde evaluar las tcnicas de recoleccin de datos. Quin recoger la informacin? Este es un item importante porque puede condicionar el procesamiento. Cmo se comunicar la informacin? Aspectos vinculados a los informes. Tercera fase: Procesamiento En esta etapa lo datos se transforman en argumentos a travs de los juicios que van los autores de la evaluacin van emitiendo. En esta etapa, se estudian los datos y se interpreta su significado, por lo cual, es la clave del proceso. 4- Explicar el proceso de autoevaluacin institucional y cules son las recomendaciones sobre: diseo, divulgacin, realizacin, escritura del informe, impacto y metaevaluacin. El proceso de autoevaluacin implica un proceso a travs del cual la institucin se mira a s misma. Existen muchas razones por las cuales las instituciones no se autoevalan, muchas de stas tienen que ver con el temor a la crisis, los riesgos al cambio, etc. Pero la autoevaluacin institucional supone crear una crisis controlada y si bien tiene peligros, representa una oportunidad de desarrollo y progreso tanto institucional como personal y profesional. Tomar la decisin de un plan de autoevaluacin institucional es una poltica de gestin. Divulgar anticipadamente del plan de evaluacin es muy importante, porque con una buena poltica de y estrategias bien diseadas, se genera una buena disposicin y resulta muy valioso para todo el proceso. Algunas recomendaciones para un proceso de autoevaluacin: Sobre el diseo: o crear una comisin plural que defina objetivos, poltica y criterios de evaluacin. o Definir las preguntas bsicas o Valorar alternativas de diseo . costos, tiempos, resultados o Equilibrar los seis ejes (cuali, cuanti, mapa y realidad, parte y todo) o Se ms selectivos que exhaustivos o Ir de lo superficial a lo significativo o Equilibrar lo genrico como lo particular o Evitar estereotipos y prejuicios o Elaborar un plan de divulgacin favorable Sobre la divulgacin: o Para justificar el trabajo propuesto, motivar, predisponer y anticipr

Graciela Paula Caldeiro-Preguntas frecuentes finales de Evaluacin-6 o o o o Prever la resistencias y los frenos Crear expectativas favorables Todos los grupos debe acceder al plan Los efectos dependen en gran parte de la divulgacin inicial

Sobre la realizacin: o Simplificar el proceso de recoleccin y tratamiento de la informacin evitando tecnocraticismo y burocracia o Seleccionar y adaptar los instrumetos. No importa tanto la herramienta como el uso que de ella se hace. o Acortar el tiempo entre la recoleccin y la devolucin de info: facilita la reflexin y el cambio. o La forma en que se presenta la info condiciona la valoracin. Sobre el informe: o Cuidar la estructura, los ndices, la paginacin. Agrupar anexos, apartados, complementos. o Considerar las preguntas iniciales que puedan servir para organizarlo y aportar nuevas preguntas al proceso. o Buscar el equilibrio entre rigor cientfico y operatividad o Distinguir entre hecho e informacin de interpretacin, entre juicio y valoracin. o Interpretar cualitativamente los que cantititativo y cuantificar lo cualitativo. o Explicar el proceso de toma de decisiones que se ha seguido en el proceso. o Destacar el cambio de actitudes y reacciones, desde la divulgacin inicial. o Tratar de objetiv ar lo subjetivo. Confidencialidad, anonimato, confidencialidad, uso de comillas. o Impacto y metaevaluacin: o Se aprende evaluando, reflexionar sobre el proceso y sus consecuencias. o Recoger impresiones sobre el informe. Juzgar el proceso con expertos. o Como modificaramos el proceso si tuviramos que comenzar de nuevo. Aprender de lo que se ha llevado a cabo.

Recomendaciones generales: Evaluar es siempre preguntarnos cosas, en cualquier momento del proceso, pero es importante centrarse en los problemas que realmente pueden resolverse. Puede ser importante consultar expertos externos. 1. Elabore una definicin de evaluacin educativa, atendiendo a la polisemia del concepto. El concepto de evaluacin es polismico porque ste se impone o no en la prctica segn las necesidades mismas de la evaluacin y en funcin de las diferentes formas de concebirla (puede significar estimar, calcular, valorar, apreciar, etc.). As como en el lenguaje cotidiano, conviene considerar la evaluacin desde este enfoque multidimensional: la evaluacin hace referencia a un proceso por medio del cual alguna o varias caractersticas (de un alumno, de un grupo de estudiantes o un ambiente educativo, objetivos, materiales, profesores, programas, etc. Reciben la atencin de quien evala, se analizan y se valoran sus caractersticas y condiciones en funcin de parmetros de referencia para emitir un juicio que sea relevante para la educacin. Entre los rasgos comunes de las definiciones de evaluacin podemos observar:

Graciela Paula Caldeiro-Preguntas frecuentes finales de Evaluacin-7 Emitir juicios de valor (se impone la mirada de Scriven) Es aplicada sobre una actuacin proyectada o realizada Supone un proceso de recoleccin sistemtica de informacin Requiere aplicacin de criterios que garanticen la calidad del juicio emitido Orientacin a la hora de la toma de decisiones (Cronbach)

Las funciones de la evaluacin en la tarea educativa son: Sociales: Seleccin social (histricamente y an conserva cierto sentido de vigilancia) Calidad/Rendicin de cuentas Informacin social, instituciones, docentes Control del sistema o Sociales (administrativas) Promocin, acreditacin y certificacin Pedaggicas: Diagnstico-Formativa-Sumativa Programacin didctica Iluminativa Organizacin escolar

De acuerdo a Gimeno Sacristn la evaluacin tiene la funcin de JUZGAR y MEJORAR, pero estos son enfoques complementarios. Scriven diferenciar entre evaluacin FORMATIVA, orientada al desarrollo y la mejora permanente y otra SUMATIVA, luego de la ejecucin, orientada a los resultados finales. 2. Relacione los conceptos Evaluacin educativa y polticas pblicas. La evaluacin no es solo una tarea tcnica sino que posee una naturaleza poltica puesto que tiene como finalidad contribuir a la toma de decisiones. La evaluacin es principalmente un intento por conocer mejor determinados aspectos de la realidad social y educativa utilizando recursos cientfico con la intencin de alcanzar conclusiones que ayuden a la toma de decisiones, lo cual refiere claramente a la dimensin poltica de la actividad evaluativo. Es interesante sealar respecto a este punto el papel alcanzado por la ciencia en este nuevo contexto ya que legitima las polticas a travs de la evaluacin. Se sustituye la coercin por la persuasin, esto es, las decisiones polticas son justificadas a travs de los resultados de las evaluaciones. La ciencia es as una utilizada como fuente de autoridad cultural. As, la evaluacin adquiere una nueva funcin diferente a la tcnica; es un valioso instrumento de informacin y control, por el que tanto gobiernos como ciudadanos muestra gran inters. As, la tendencia actual entiende a la evaluacin como una actividad poltica y administrativa, y es una parcela de las polticas sociales y de administracin pblica en tanto el conjunto mismo de las polticas y los servicios pblicos se han vuelto objeto de evaluacin. Las causas de este fenmeno se deben a:

Graciela Paula Caldeiro-Preguntas frecuentes finales de Evaluacin-8 Razones econmicas y presupuestarias (contencin del gasto pblico y prioridades en la asignacin de recursos) Presin de la opinin pblica (rendicin de cuentas)

Consecuentemente, se produce un cambio en la administracin pblica, del modelo del control va legalidad se pasa a otro racional-burocrtico, en donde se miden los resultados de las polticas propuestas. En el contexto de las polticas educacionales, tres fenmenos explican la importancia reciente de la evaluacin: La descentralizacin y el reparto de poder (con el objeto de dar mayor autonoma a los centros para que regulen su propio funcionamiento) La rendicin de cuentas: Exigencia de transparencia, en armona con los principios de una gestin democrtica. (Moral: ante padres y alumnos; Profesional: ante colegas y Contractual: ante los contribuyentes). La rendicin de cuentas debera ser multidireccional (ante todos los involucrados en el sistema) y multidimensional (incluir no solo los resultados econmicos o los ms asequibles) Procesos de reforma educativa: Trasformaciones estructurales, curriculares y organizativas. Numerosos pases se encuentran en procesos de reforma, consecuentemente se ha desarrollado un nuevo sistema de gestin de sistemas educativos denominado pilotage o steering que podra definirse como una decisin en el mbito microscpico y microscpico basado en contrataciones objetivas, relativas al estado, al funcionamiento o a los productos del sistema.

3. Qu entiende por calidad educativa? El concepto de calidad es polismico ya que involucra diferentes valores, conceptos y contextos que modifican su significacin. As, la calidad significa cmo es aquello a lo cual hacemos referencia, as como un objeto que posee determinadas caractersticas (significacin netura), pero tambin puede hacer referencia a la bondad o excelencia de algo, aqu el significado no es neutro sino ambiguo. Podemos decir as que el concepto es relativo, multidimensional, variable e histrico. En el caso puntual de la calidad educativa, el concepto adquiere connotacin poltica y no solo tcnica, por ello, resulta difcil encontrar una definicin vlida para todos. La preocupacin por la calidad educativa es compartida por todos los actores, pero cada definicin responde a una ideologa subyacente. Mientras que algunas se centraran en los alumnos, otras se orientarn al rendimiento acadmico, otras a las caractersticas institucionales, en el currculum, los docentes o la gestin. En un sentido amplio, la calidad educativa supone, de acuerdo a diferentes enfoques, el logro de niveles equitativos de cobertura y distribucin de conocimientos para toda la poblacin, la igualdad en el acceso y la permanencia y egreso de la poblacin a los sistemas educativos en un marco de equidad social (UNESCO). Para Hilda Lanza, la calidad supone el desarrollo de competencias relevantes para la produccin cientfico tcnica., la vida cotidiana y la participacin ciudadana. El estado, como garante de la calidad, debera formular polticas coherentes con estos tpicos. Por otra parte, an cuando los factores externos a la escuela son condicionantes de la calidad, la

Graciela Paula Caldeiro-Preguntas frecuentes finales de Evaluacin-9 investigacin a enfocado a la escuela como una variable independiente. La calidad, se en tiende as como un proceso de construccin contnua. Qu relaciones puede establecer entre los conceptos de calidad educativa y evaluacin? El renovado inters por la calidad educativa, se debe a: Factores externos: Atencin a la conexin entre educacin y desarrollo Los imperativos econmicos de la globalizacin La sociedad del conocimiento Factores internos: La educacin cada vez es ms considerada como una inversin individual y social antes que un gasto Reconsideracin de los efectos de las reformas Desconfianza respecto a que sta pueda contribuir al progreso social (consecuencias de la expansin educativa) En este contexto, las evaluaciones, responden a este inters, y contribuyen a optimizar la calidad educativa en los siguientes aspectos: 1. Permiten el conocimiento y el diagnstico del sistema educativo, satisfaciendo la demanda social de informacin y actuando como base para el diagnstico de decisiones 2. Permiten conducir los procesos de cambio, suministrando informacin sobre el alcance y consecuencia de los procesos, objetivando el debate pblico (librndolo de pasiones) y apoyando la toma de deciones. 3. Estableciendo una valoracin de los resultados, permitiendo realizar comparaciones de diferente tipo 4. Mejora la organizacin de las instituciones a travs de programas individualizados e iluminando la situacin general del sistema. Algunas consideraciones sobre evaluacin educativa: Evaluar el sistema educativo, supone considerar cuatro variables, los recursos, el contexto, el proceso y los resultados. Evaluar el recurso en relacin al proceso supone considerar la eficiencia, y resultados, en funcin del rendimiento. La eficacia, relaciona proceso y resultados. La variable contextual afecta todas estas dimensiones. La concepcin actual de evaluacin de los sistemas educativos implica un doble debate: exigencia de globalidad y exigencia de integracin. En efecto, la evaluacin comprende varios mbitos que aportan diferentes elementos y es necesario que stos mbitos completen la informacin entre s. 4. Mencione y caracterice los modelos y paradigmas ms utilizados en la evaluacin de Sistemas Educativos. El concepto de paradigma proviene de la filosofa de la ciencia y de acuerdo a Khun, es un conjunto de suposiciones interrelacionadas respecto al mundo que generan un marco filosfico para el estudio organizado del mundo. De esta forma, se pueden contextualizar

Graciela Paula Caldeiro-Preguntas frecuentes finales de Evaluacin-10 algunas proposiciones e ideas a cerca de cmo se debera evaluar de acuerdo a un determinado modelo filosfico y de accin. As, pueden identificarse dos posiciones paradigmticas de acuerdo a la investigacin social y educativa: 1. El paradigma cuantitativo Subsidiario del enfoque cientfico experimental, supone una mirada global/postivistas, hipottico deductiva, orientada a los resultados y propia de las ciencias naturales. 2. El paradigma cualitativo Se corresponde con el enfoque etnogrfico naturalista, fenomenolgica, inductiva, estructuralista, orientada al proceso y propia de la antropologa social. El enfoque etnogrfico, es una de las opciones metodlogicas dentro de este paradigma e implica conocer de qu manera funcionan las escuelas para comprender y mejorar las actuaciones. Este enfoque tiene en cuenta aspectos como el contexto diacrnico y sincrnicos, los intercambios sociales, una investigacin interpretativa de los hechos, la considearacin de los procesos, combinar la evaluacin interna y externa, etc. 3. El pragmatismo Una tercera posicin intenta presentar un continuum entre los dos extremos. Esta posicin se enfoca en la flexibilidad y la adaptabilidad. As, los paradigmas siguen diferencindose aunque los evaluadotes adoptan una situacin ms pragmtica a la hora de desarrollar su tarea. As, los mtodos heursticos, ms comprensivos en la evaluacin del sistema educativo, utilizan tambin datos cuantitativos como parte del relevamiento y estos datos resultan importantes para basar los juicios valorativos. Y a la inversa, es habitual que se recojan datos cualitativos que luego se cuantifiquen en vista a una mejor explotacin y anlisis. Por otra parte, toda evaluacin, ya sea cualitativa o cuantitativa, incluye un componente de control que resulta imprescindible a la hora de dar cuenta de una funcin pblica como la evaluacin. Se suele encontrar en la bibliografa que la adopcin de un determinado mtodo refiere necesariamente a un paradigma en particular. Algunos autores, como Cook y Reichard, creen que no hay incompatibilidad radical entre los diferentes mtodos. En esta lnea, enumeran ventajas e inconvenientes respecto al uso conjunto de los mtodos cualitativos y cuantitavos: Ventajas: al tener propsitos mltiples, los objetivos de la educacin pueden alcanzarse mediante mtodos diferentes, stos pueden complementarse e incluso permitir triangulaciones mediante operaciones convergentes. Desventajas: puede ser muy costosa o los evaluadores no estar lo suficientemente capacitados en ambos mtodos. Por otra parte, la moda o el consumo, pueden estar en contra de la combinacin. A mediados de los 70 comenzaron a generarse diversos procedimientos de evaluacin de programas durante el perodo y como resultado, se generaron modelos de evaluacin: Alkin y Ellet Modelo preceptivo (lineas orientativas) Modelo prescriptito (normas, afirmaciones) Estos modelos no lograron imponerse, pero inspiraron a los evaluadores a reflexionar sobre su tarea ya pensar sus propios modelos. La prctica de la evaluacin exige una contnua

Graciela Paula Caldeiro-Preguntas frecuentes finales de Evaluacin-11 adaptacin por parte del evaluador. Lo que significa que ha de ser sensible para dar respuesta al contexto en el que trabaja. Respecto a la seleccin de instrumentos, Gimeno Sacristn propone los siguientes criterios: Seleccin de tcnicasdepende del lugar, objeto y propsitos Adaptacin de cada tcnicaa las diversas funciones de la evaluacin Objetivos de la evaluacin especificarlos Dificultad variadase debe valorar cada tcnica en cada alterna tiva concreta Utilizar tncicas VIABLES 5. Intente comparar, estableciendo categoras de anlisis, los distintos modelos y paradigmas de evaluacin educativa. Paradigma cuantitativo Cientficoexperimental Positivismo Paradigma cualitativo Etnogrficonaturalista Fenomenolgico Pragmatismo

Efoque Marco epistemolgico Marco lgico

Disciplinas representativas Criterios

Orientacin

Hipotettico Inductivo Complementariedad y deductivo Prescinde de adaptabilidad al Lgica de prueba de hiptesis inicial y objeto de estudio. hiptesis puede modificarse a (falsasocinismo) partir de las inferencias Ciencias Antropologa naturales social Estadsticos Contraste Validez Valide externa Significacin Credibilidad Representatividad Conformacin Autenticidad Hacia los resultados Hacia los procesos

6. Cmo pueden evaluarse los programas educativos? La evaluacin de programas educativos, supone un conjunto de destrezas y habilidades orientadas a determinar si los servicios prestado son necesarios, si se utilizan, si son suficientes, si se dan en los trminos planificados, si ayudan dentro de un costo razonable o si incuso, provocan efectos no deseados. Existen as, diferentes intenciones a la hora de evaluar los programas: Seguimiento: para saber si el programa es eficaz o no e introducir modificaciones en el diseo Identificar proyectos y problemas Desarrollar programas pilotos para mejorar la eficacia Identificar efectos diferenciales en diferentes poblaciones Para determinar la relevancia y la valide de los princpios del programa

Graciela Paula Caldeiro-Preguntas frecuentes finales de Evaluacin-12 Scriven, diferenciar entre evaluacin Formativa (orientada a la mejora) y Sumativa (centrada en el impacto y los resultados del programa). Por otra parte, hay tres formas de establecer la relacin entre el desarrollo del programa y la evaluacin: Causal: siguiendo el modelo de objetivo. Fortuita: la relacin se atribuye al azar o a variables externas Independencia: Scriven propone que los evaluadores desconozcan los objetivos del programa para centrarse en los efectos reales. La eleccin de un modelo evaluativo, supone elegir una teora epistemolgica y de concepcin de la realidad. Los modelos sirven para conceptualizar el campo de la evaluacin y proporcionar un lenguaje comn que permita debatir puntos y temas confliectivos. 4. Modelo de objetivos y comportamiento (Enfoque de Tyler Bloom) La evaluacin se encarga de definir los resultados y los objetivos del programa, de manera que la tarea del evaluadora, consiste en ver hasta qu punto esos objetivos fueron alcanzados. Este modelo de evaluacin utiliza objetivos mesurables como parmetro comparativo para lo cual utiliza diseos experimentales y cuasiexperimentales. Debilidad: la definicin de los objetivos a veces es arbitraria. El conocimiento previo de los objetivos puede sesgar el resultado de la evaluacin (Scriven). 5. Anlisis de Sistemas (Rossi y Freeman) Este modelo se basa en la microeconoma aplicada al rea de servicios humanos. Se basa en el anlisis de costo y beneficio. La evaluacin debe ser objetiva de manera tal que cualquier otro grupo de investigadores, arribe a las mismas conclusiones. En este modelo, son sinnimos la objetividad y la fiabilidad. Los datos son reducidos a unos pocos indicadores para realizar el clculo costo-beneficio y determinar la eficacia del programa. Debilidad: La complejidad del programa queda muy reducida e ignora los intereses de los que participan en el programa. 6. Tomo de decisiones (Stufflebeam/Patton) Este modelo, tambin denominado CIPP (porque considera las variables Contexto, Imput, Proceso, Producto), se caracteriza por estar orientado a la toma de decisiones. As, la evaluacin se estructura en funcin de la decisiones que deben tomarse. Debilidad: aumenta el riesgo en el uso de resultados. 7. Enfoque libre de objetivos (Scriven) El evaluador no debe conocer los objetivos para evitar un determinado perfil en el estudio de los resultados. El evaluador debe ser un experto capaz de evitar un perfil determinado debido a s mismo, como a factores externos para determinar causalidades en condiciones no experimentales. Debilidad: el evaluador puede sustituir los objetivos del programa por los propios. Scriven lo resuelve centrando el resultado de la evaluacin en el producto que el programa ha generado, que es ms objetivable, desvinculado la subjetividad del evaluador. 8. Enfoque de la crtica de arte Es emprico y cualitativo, ofrece conocimiento de la cualidad y la calidad que posee el objeto para poderlo valorar.

Graciela Paula Caldeiro-Preguntas frecuentes finales de Evaluacin-13 9. Enoque participativo (Acreditacin profesional o cuasi legal) Considera los aspectos importantes para el pblico, de manera que aumenta la participacin ms que en otros modelos. 10. Estudio de casos El objetivo central es el de mejorar la comprensin y el conocimiento del objeto evaluado. Se plantea la representacin del programa como un proceso y ofrece una visin de su perspectiva como la de todos los que participan en l. El valor bsico de este estudio es que aparecen representados mltiples intereses. El papel del evaluador es en parte el de un intermediario de informacin entre los diferentes grupos participantes. Stakes observa que son narraciones descriptivas que muestran la complejidad de situaciones del mundo real, y en donde la comparacin que se establece a parece de forma implcita. Desde el punto de vista metodolgico se puede trabajar tanto cuali como cuantitativamente, pero la primera modalidad es tan preponderante que el enfoque queda marcado por sus caractersticas. Debilidades: a aparente subjetividad y dificultad para representar los intereses de forma equilibrada. Las tcnicas utilizadas para el estudio de casos son las entrevistas, las observaciones, los estudios de cuestionarios y las preguntas abiertas. Debilidades: este mtodo presenta como dificultad el hacer generalizaciones an cuando sus informes son muy accesibles. 11. Etnogrfica (Santos Guerra) citado aparte en la clase por el profesor El enfoque etnogrfico, es una de las opciones metodlogicas dentro del paradigma cualitativo e implica conocer de qu manera funcionan las escuelas para comprender y mejorar las actuaciones. Este enfoque tiene en cuenta aspectos como el contexto diacrnico y sincrnicos, los intercambios sociales, una investigacin interpretativa de los hechos, la considearacin de los procesos, combinar la evaluacin interna y externa, etc Dice Santos Guerra que el propsito principal de la evaluacin desde esta perspectiv es conoer cmo y por qu funcionan de una manera determinada los centros. El objetivo es comprender y explicar su naturaleza para mejorar la prctica, enriqueciendo la toma de deciones. Complementariedad de mtodos: la mayora de los autores y pedagogos, se inclinan por enfoques complementarios, integrando as caractersticas de los modelos cuantitativos y cualitativos. Planteo experimentalista (Paradigma cientfico) La experimentacin es la base para la planificacin del cambio social. Considerar la ciencia como un problema de mtodo ms que como una actividad intelectual. Planteo naturalista Evitar la construccin deliberada del control de las circunstancias sociales.

Control social Dificultad

Crticas a la aplicacin del paradigma de las cs. naturales a las cs. sociales: importancia de los contextos (afecta la generalizacin) exclusin de significados e intenciones

Graciela Paula Caldeiro-Preguntas frecuentes finales de Evaluacin-14 imposibilidad de aplicar casos generales a particulares Hechos y teoras no son apreciaciones de valor La metodologa cualitativa parece ser ms apropiada a los hechos humanos

En sntesis, los mtodos son importantes porque deben facilitar la tarea del evaluador, pero no deben distraer la atencin de los puntos sustantivos de la evaluacin. 7. Cules son las fases en un proceso de evaluacin de programas educativos? Chavez vinculada la evaluacin con el planeamiento porque considera que los proyectos educativos y la evaluacin deben estar articulados puesto que los dos pertenecen a un proceso comn mas general: la planificacin educativa, y por lo tanto, son parte son parte de la gestin de la educacin. Se trata as de un proceso contnuo. Ais, Chavez propone un enfoque estratgico para lo cual identifica siete pasos para la formulacin del proyecto y siete fases para la formacin de la evaluacin, articulndola con el mismo proyecto. En la carpeta de trabajo, se describen tres fases en el proceso: definiciones, diseo y procesamiento. Primera fase: Objeto: definirlo Preguntas: definirlas Diseo: hacerlo Acordar por escrito, objetivos, preguntas y diseo con quien financia y encarga la evaluacin. En este primer momento debemos responder quin pide la evaluacin, para y por qu lo hace, qu tipo de informacin requiere, qu fuentes se podrn a disposicin y cundo debe tenerse listo el informe. Tambin es importante considerar los recursos con los que se contar. Segunda fase: En la etapa del diseo, debemos responder algunas preguntas: Para quien es la informacin? Suelen existir diferentes audiencias, entre ellas, el solicitante y el financiador, los que trabajan en el programa, los beneficiarios del programa y los interesados en el programa. Qu informacin es la ms convincente? Cundo debemos tener lista la informacin? Debemos ser realistas en cuanto a los tiempos. El proceso implicar recoger la informacin, procesarla y redactar un informe final. Cmo se recoger la informacin? Corresponde evaluar las tcnicas de recoleccin de datos. Quin recoger la informacin? Este es un item importante porque puede condicionar el procesamiento. Cmo se comunicar la informacin? Aspectos vinculados a los informes. Tercera fase: Procesamiento En esta etapa lo datos se transforman en argumentos a travs de los juicios que van los autores de la evaluacin van emitiendo. En esta etapa, se estudian los datos y se interpreta su significado, por lo cual, es la clave del proceso. 8. Desarrolle el tema evaluacin interna & evaluacin externa La evaluacin interna es la que realizan los miembros de una organizacin que no tiene responsabilidades en el diseo y desarrollo del programa. As, lo que se tiende a estudiar, son los

Graciela Paula Caldeiro-Preguntas frecuentes finales de Evaluacin-15 problemas que interesan en el mbito de la gestin del programa. En cambio, los evaluadores externos se encargan de estudiar problemas relacionados con el programa que interesan a los polticos, a los financiadotes,etc. Algunos autores, ven a la investigacin interna como una suerte de investigacin accin en tanto los evaluadores internos, se centran en el apoyo al desarrollo organizativo y al cambio planificado. Los evaluadores interno son a menudo responsables no solo de analizar problemas y recomendar sino tambin de corregir dificultades y aplicar soluciones. Pero a veces, las evaluaciones internas pueden transformarse en rutinas que pierden de vista el objetivo de la evaluacin. En los EEUU las investigaciones internas han adquirido mucha importancia en parte a causa de los recortes presupuestarios, pero tambin ante la decepcin respecto a las investigaciones externas. As, cabe preguntarse qu tipo de evaluacin es la ms conveniente para cada programa. Para ello, es necesario considerar algunos factores: 1. Confianza: los evaluadores externos generan menos confianza que los internos. 2. Objetividad y distanciamiento: los evaluadores externos estn mejor posicionados, sin embargo, debe preveerse que, con el objeto de conseguir nuevos contratos, los evaluadores externos pueden suavizar o sesgar de algn modo los resultados. 3. Comprensin del programa: los evaluadores internos tienen una perspectiva mejor. 4. Potencial de utilizacin: los evaluadores internos tienen ms posibilidades de comprender las necesidades aunque los externos gozan de mayor credibilidad. 5. Autonoma: los internos son menos independientes y tienden a no cuestionar cuestiones macro en las cuales se halla insertos. La visin de los externos es mucho ms amplia y permite reestructuraciones de fondo. 6. Credibilidad: cuando se trata de dar cuenta del programa a los financiadotes, los evaluadores externos gozan de mayor cedibilidad, adems no estn sujetos a las presiones de quienes trabajan en los programas. 7. Explique qu significa negociar la evaluacin. El concepto de negociacin est ligado a la pluralidad de intereses y la idea es que la evaluacin contribuya a una progresiva y paulatina adaptacin social, tendiente a estructurar el cambio hacia las condiciones ideales. El origen de esta idea est en la crtica que Cronbach realiza a la ortodoxia del experimentalismo, en donde se trabaja con hiptesis como en las ciencias naturales y con la idea que los objetivos deban responder al consenso. El autor puntualiza la funcin social de la evaluacin de manera tal que (aun defendiendo los valores del modelo de la ciencia aplicada, en funcin de la credibilidad y la exigencia de razonabilidad) la evaluacin posee una naturaleza poltica y no es un problema nicamente metodolgico. Es as, una reaccin contra el dogmatismo metodolgico que propone una nueva formulacin del concepto de validez y utilidad. Para Cronbach, lo que se pide de la evaluacin es que sirva de base para la negociacin poltica. El evaluador, se define como un cientfico del publico y debe representar los intereses de toda la comunidad de forma no partidista y desinteresada. En esta lnea, House coincide en que la evolucin supone interaccin poltica e interpreta que la validez de la evaluacin no puede separarse de las circunstancias y consideraciones polticas y

Graciela Paula Caldeiro-Preguntas frecuentes finales de Evaluacin-16 sociales. Se centra as en el problema de la intencionalidad social y argumenta que cuando se discriminan ciertas alternativas y ciertos intereses, se tiende a favorecer a los ms fuertes (por ejemplo, las posiciones gubernamentales), porque la tendencia es ignorar el pluralismo y las costumbres de otras organizaciones. As, critica la tica naturalista y propone una teora de la justica de carcter pluralista que denomina naturalista y se resume en: - igualdad moral - autonoma - impoarcialidad - reciprocidad Estos cuatro valores representan el acuerdo justo, en el cual, ninguno tiene superemaca sobre los otros porque la prioridad depende de las circunstancias. Para algunos autores, el enfoque de MacDonald tiende a igualar la condiciones de poder, porque seala que las opciones del evaluador no se deben limitar a escoger entre reforzar o alterar las relaciones de poder existentes. El modelo implica realizar informes e implementar mtodos comprensibles para las audiencias no especializadas, en vista de una democratizacin del acceso a la informacin. As, para algunos modelos de evaluacin, la negociacin es parte explcita de la metodologa, siendo una estrategia de intervencin polivalente que se adapta a contextos diferenciados segn su objeto. Y en sntesis, podemos decir que los modelos que se enfocan en la negociacin, tiene como objeto colaborar en volver ms eficaz el funcionamiento de la organizacin social, sobre la base de modelos participativos. El evaluador se perfila como un intermediario que facilita la informacin que servir para poner en comunicacin a las partes de la negociacin. Ambitos de la negociacin: Metodolgico mbitos de la Negociacin tico Poltico

El mbito metodolgico, se refiere a las descripciones, la interpretacin y la organizacin del propio informe del evaluador. El mbito tico, se refiere a los acuerdos formativos respecto de los derechos de los evaluados y principios de transparencia y representatividad. - Derecho a la propiedad de informacin: corresponde a los que proporcionan informacin, comentarios crticos, etc. - Derecho de los individuos como audiencias naturales o interesadas - Derecho de todos los grupos de inters a ser representados El mbito poltico, refiere la representacin de intereses y valores como estrategia de legitimacin. Se ocupa de los valores (como parmetro de los juicios) y de la distribucin de juicios e intereses dentro del programa. 8. Cules son las principales funciones en la evaluacin de instituciones educativas? La evaluacin institucional supone:

Graciela Paula Caldeiro-Preguntas frecuentes finales de Evaluacin-17 una teora de las organizaciones en general y de las instituciones educativas en particular un conocimiento de los aportes terico-prcticos sobre la institucin educativa y la posibilidad de evaluar su funcionamiento Una teora de la evaluacin con su lnea metodolgica y su estilo de trabajo evaluador, lo que supone la incidencia sobre la gestin y sobre la evaluacin institucional.

Existen as, dos grandes tendencias metodolgicas en evaluacin: - buscar lo especfico de cada caso - buscar generalizaciones a una norma Pero evaluar, no es relativizar sino integrar las perspectivas e integrar el grado de conciencia de las diversas concepciones y sus componentes implcitos. As, un estilo de evaluacin supone favorecer procesos de negociacin entre las partes implicadas para favorecer las valoraciones de cada estamento. La evaluacin institucional es un proceso que tiene como finalidad y origen la comprensin para la rectificacin y el cambio, y la mejora de la prctica. Implica pues, responsabilidad social por el manejo de los bienes pblicos y es a la vez un modo de perfeccionamiento de los profesionales. Supone la reflexin rigurosa y sistemtica sobre la calidad de los proyectos educativos. Para qu y por qu evaluar: Desde la poltica y la administracin: Para tomar decisiones de actuacin normativa, presupuestaria, de recursos, para conocer la evolucin del sistema, el valor de su rendimiento, global, las tendencias, los modelos de funcionamiento, el impacto de la normativa sobre la realidad, la calidad, la eficacia de los programas, etc. Desde los profesionales: la docencia y los equipos directivos: determinar fortalezas y debilidades, tomar decisiones de mejora, valorar los resultados de planes de actuacin, contrastar su funcionamiento con otras instituciones, incrementar el nivel de influencia y marcar una tendencia. Desde los usuarios: valorar la orientacin acadmica y profesional, el desarrollo potencial del personal, social, intelectual, esttico, incrementar el grado de satisfaccin del servicio, la integracin en el mundo profesional o en la comunidad, etc. Todas estas perspectivas valoran la calidad pero con objetivos y criterios diferentes. Mejor esta: Conocimiento y diagnstico de la actividad educativa: satisface la demanda social de informacin y actua de base para los procesos de toma de decisiones que se producen en los diferentes niveles del SE. Conduccin del los procesos de cambio: informacin sobre el alcance y la consecuencia de los procesos, objetivar el debate pblico y dar apoyo a la toma decisiones Valoracin de los resultados de la educacin: aportar un conocimiento objetivo y una valoracin rigurosa de los resultados (comparaciones temorapes) Mejora de la organizacin y del funcionamiento de las instituciones educativas: proponer programas individualizados de mejora, iluminar el sistema en trminos genrales. 9. Qu relaciones puede establecer entre evaluacin de instituciones y gestin institucional?

Graciela Paula Caldeiro-Preguntas frecuentes finales de Evaluacin-18 Evaluar es parte de la gestin institucional. Esta se inicia con la configuracin de un plan de actuacin para un perodo determinado, el cual determina la organizacin, la motivacin y la formacin del personal. Tambin el seguimiento y el control: esto es la evaluacin de todo el proceso, a lo que se sigue una nueva planificacin. As, se gestiona con el objeto de mejorar la calidad educativa, la cual est en proceso permanente de construccin a travs del acuerdo social entre todos los sectores involucrados. Las diferentes perspectivas de calidad no tiene por qu ser excluyentes o contrapuestas. As, el grado de evolucin sistemtica de las instituciones revela el grado de conciencia y la poltica de gestin. La evaluacin dentro del marco de la gestin global: La evaluacin (que puede estar impulsada por factores externos o por el cumplimiento de una normativa) no implica tan solo descomponer sino recomponer con vistas a una buena visin de sntesis final. Supone una actividad sistemtica, con intencionalidad y finalidades rigurosas, as como tambin procedimientos ajustados. El cuestionamiento de la gestin a travs de la evaluacin implica que existe predisposicin al cambio, capacidad de y una capacidad de regulacin ajuste que indica madurez. As como tambin una actitud positiva hacia la renovacin. Cuando la gestin se basa en la rutina y la costumbre, por el contrario, suele existir una actitud negativa hacia la evaluacin interna y se desarrollan mecanismo endgenos que llevan a una regresin o degradacin progresivas. La evaluacin externa u obligada, general resistencias y oposicin siendo percibida como una fiscalizacin, una imposicin. Desde el punto de vista colectivo y social, estas instituciones son las que ms requieren intervencin externa para dinamizar su propia vida interna. 10. Describa los aspectos que considera ms importantes en un proceso de evaluacin institucional. Aspectos que deben tenerse en cuenta en la evaluacin institucional: Contexto sincrnico y diacrnico Valor de los intercambios personales y psicosociales Interpretacin de los hechos Valor de los procesos Valor de los resultados Opiniones de los involucrados y los protagonistas Visin estructural de la institucin Priorizar una vertiente cualitativa y usar datos cuantitativos para interpretar situaciones Crear hbitos y actitudes que favorezcan la construccin de una cultura de evaluacin y autoevaluacin institucional. En sntesis, una evaluacin institucional debe estar contextualizada, tener en cuenta procesos y resultados, promover la opinin, ser en s misma educativa, utilizar variedad de mtodos, no pretender que alguien tenga criterio absoluto de interpretacin, partir de la iniciativa escolar, pretender mejorar la prctica, utilizar un lenguaje sencillo y constituirse un proyecto institucional.

Graciela Paula Caldeiro-Preguntas frecuentes finales de Evaluacin-19 *** Cada evaluador elegir los estndares de evaluacin que considere ms adecuados: 1. Darder y Lopez: a. PEI (aspectos pedaggicos) b. Estructura y funcionamiento de la institucin educativa (aspectos organizativos) 2. NAESP (estndares de excelencia)-OLCICE a. Organizacin b. Liderazgo c. Currculum d. Instruccin e. Clima escolar f. Evaluacin y orientacin Es interesante destacar que todo es evaluable pero que no es necesario evaluarlo todo. Es importante seleccionar. Cuando se instala la constumbre de lo evaluativo en la cultura institucional, se incorpora un importante componente democrtico. Se trata de reconocer que toda escuela tiene el deber social de rendir cuentas del servicio educativo que ofrece a su comunidad a partir de los recursos que disponga y el grado de aceptacin y satisfaccin logrado con su servicio. Implica plantearse internamente qu se puede hacer para optimizar los resultados y externamente, considerar qu recursos o materiales se deben incrementar para favorecer al contexto de forma compensatoria e incrementar la calidad interna. Evaluar, es hacer un balance social en el que se considera el contexto concreto, los recursos humanos, y los materiales disponibles, los procesos de organizacin y utilizacin interna con la finalidad de conseguir una calidad de servicio. Como todo balance, sirve para rendir cuentas y desencadena reflexiones que incrementan la responsabilidad en la toma de decisiones. 11. Explique el concepto de triangulacin. La triangulacin de la informacin es un procedimiento que toma la metfora de la navegacin y la estrategia militar en la que se utilizan mltiples referencias para localizar la exacta posicin de un objeto. Parte del supuesto que mltiples puntos de vista o fuentes de la informacin utilizadas aumentan la precisin de la informacin. Dice Aguerrondo que la triangulacin es un proceso de validacin de la informacin que permite cumplir con criterios cientficos an cuando no se cumplan las prescripciones estadsticas. El supuesto de la consistencia del gran nmero puede ser reemplazado por la idea de la consistencia entre las fuentes, por lo que la validacin de la informacin no depender de la cantidad de respuestas sino de en qu medida la informacin recogida por un pequeo nmero es congruente con la informacin de otras fuentes. La efectividad del mtodo se basa en la idea de que las debilidades de cada procedimiento van a ser compensadas por las fortalezas de otro. As, permite analizar un fenmeno desde mltiples perspectivas enriqueciendo nuestra comprensin. Litwin afirmar tambin que una buena prctica educativa debera incorporar tcnicas de triangulacin, sealando las ventajas de utilizar distintos instrumentos para acceder a diversas fuentes. Lo cual, en trminos de una evaluacin, significa que varios investigadores se ocupen de recoger los datos.

Graciela Paula Caldeiro-Preguntas frecuentes finales de Evaluacin-20 Una forma de concebir la triangulacin es la de considerar las perspectivas de evaluadores internos, externos y los observadores. 12. Explique el concepto de indicador simblico Estos indicadores son ms importantes y difciles de obtener por el carcter vivencial, interno y significativo que les da ms valor a los procesos autoevaluadores y formativos. Son expresiones profundas de los sujetos que hablan de cmo viven la institucin. 13. Explique el concepto de metaevaluacin. La metaevaluacin, es la reflexin y el anlisis sobre la misma evaluacin, sus procesos y resultados. Todas las decisiones del proceso, como la opcin de divulgar el informe, se consideran aspectos para evaluar la evaluacin. 14. Mencione los usos que tiene la informacin que se deriva de una evaluacin institucional, o de programas educativos.???? Los usos de la informacin que surge de las evaluaciones institucionales Mejorar la calidad desde las diversas perspectivas y toma de decisiones Los criterios definitivos para la evaluacin y su enfoquen determinan la orientacin de las decisiones futuras, por eso la parte ms importante de un crculo de evaluacin es siempre el principio ya que indica el grado de conciencia de los problemas que se han de resolver. Se construir un crculo de evaluacin que se orientar a los problemas detectados. Evaluacin en procesos de seguimiento, reforma e innovacin La evaluacin diagnstica es esttica y puede considerarse como una fotografa, las otras son dinmicas y pueden compararse a una pelcula interactiva. La evaluacin de procesos genera siempre un carcter abierto Funciones interrelacionadas: El desarrollo de un proyecto de innovacin y mejora exige coordinacin, control y evaluacin. Estas tres funciones estn interrelacionadas: Seguimiento: interseccin entre coordinacin y control. Regulacin: interseccin entre la evaluacin y el control. Mientras que la coordinacin y el control estn vinculadas a la quehacer del da a da, las tres funciones implican tratamiento, informacin y relaciones interpersonales. La evaluacin implica juicio y mejora de la planificacin de los procesos y consecuencias. La evaluacin puede requerir distanciamiento. 15. Desarrolle el tema evaluacin curricular Todas las dimensiones institucionales resultan importantes e influyen en forma directa sobre la funcin de la escuela. El problema surge cuando las dimensiones secundarias se transforman en vertebrales, por ejemplo cuando la administracin es ms importante que los aspectos pedaggicos. Por ello, es importante centrar la importancia de la evaluacin curricular.

Graciela Paula Caldeiro-Preguntas frecuentes finales de Evaluacin-21 Por currculum entendemos todo aquello que la escuela se propone explcitamente ensear, es decir, la totalidad de la propuesta educativa. Esto incluye tanto las intenciones (documentadas o no) y tambin las acciones que efectivamente se llevan a la prctica. Por lo tanto, evaluar el currculum supone poner a consideracin y juicio de valor, el conjunto de experiencias diseadas en una institucin escolar para contribuir al aprendizaje de los alumnos. Esto incluye objetivos, contenidos, actividades, recursos, mtodos, tiempos, espacios, etc. Pero tal como sealan Bertoni- Poggi-Teobaldo, debemos diferenciar entre currculum enseado y currculum aprendido de manera tal que podamos evaluar de un modo ms eficaz y legtimo los procesos pedaggicos que se desarrollan en la escuela. La escuela debe garantizar y certificar la incorporacin de determinados conocimientos, por lo cual es necesario dar cuenta de los procesos que han favorecido u obstaculizado dichos aprendizajes. La continuidad: La lnea de la escolarizacin se ampla por ambos extremos, al comienzo, con la educacin inicial y al final con los post-obligatorios y voluntarios. A lo largo de su trayectoria escolar, el alumno puede asistir a diferentes instituciones, algunos cambios se producen por causas particulares pero otras son obligatorias al estar relacionadas con la finalizacin de una etapa escolar. Cada nivel educativo tiene caractersticas diferentes pero la continuidad de la trayectoria escolar de los alumnos requiere garantizar la gradualidad y la coherencia de los aprendizajes. Este es un nuevo aspecto de la evaluacin institucional de importancia creciente, sobre todo en momentos de reforma educativa. Es necesario establecer criterios, estndares e indicadores de relaciones institucionales, como el grado de apertura, la coherencia del sistema escolar, etc. Por ejemplo, algunos de los indicadores ms relevantes que se utilizan en algunos paises es el porcentaje de alumnos que acceden a estudios superiores o universitarios. El porcentaje no debera ser inferior al promedio del conjunto del pas. Por otra parte, la evaluacin de instituciones educativas se abre forzosamente a la evaluacin de zonas o distritos y del conjunto del sistema y los programas. Pero an no existe un conjunto de indicadores de centros y de zona escolar aceptado socialmente, polticamente, administrativamente y pedaggicamente, como pasa en otros mbitos como en el econmico. Queda pendiente el desarrollo de una cultura evaluativo institucional que valide perfiles de indicadores que tengan una progresiva adaptacin . Cules son los pasos necesarios para poder elaborar un juicio, de acuerdo con algn patrn, objetivo o ideal, fase final del proceso de evaluacin tpico? Exponga brevemente el significado de cada uno de esos pasos ??? Tradicionalmente se ha concebido la educacin como el timo paso de la tarea de intervencin, actualmente, sin embargo, se la concibe como un proceso integrado y completo de planificacin y desarrollo de la actividad. Siguiendo a Elliot, Gimeno Sacristn menciona las siguientes fases de una evaluacin: 1. Limitar o enfocar una cierta realidad a evaluar: requiere reconocer el objetivo de la evaluacin: alumnos, profesores, currculo, recursos, etc. 2. Seleccionar alguna condicin o caracterstica de dicha realidad: esto implica reconocer qu caractersticas concretas de la realidad se debern evaluar. Estas pueden ser totales o solo considerar aspectos particulares, lo que, por otra parte, es lo ms habitual. 3. Elaborar un juicio de acuerdo a algn patrn objetivo o ideal: esta es la fase ms importante, no consiste solamente en medir sino que requiere contrastar informacin recogida de acuerdo con un patrn o ideal. En este sentido, toda evaluacin es relativa.

Graciela Paula Caldeiro-Preguntas frecuentes finales de Evaluacin-22 Los criterios de evaluacin son construidos y estn construidos y estn condicionados por presupuestos cientficos e ideolgicos, marcos sociales e institucionales y planteamientos psicopedaggicos. El desarrollo de esta fase, involucra los siguientes pasos: 1. Recoger informacin pertinente: responder a todas las preguntas sobre cual es la informacin que se debe recoger y cules son los mtodos y los instrumentos para hacerlo. Se deben trazar objetivos claros y no simplemente recoger informacin disponible si un plan previo. Los objetivos condicionan la seleccin de informacin y las tcnicas de relcoleccin de datos. 2. Elaborar la informacin: implica ponderar los datos seleccionado lo relevante y significativo. Requiere establecer conexiones entre la informacin disponible. El proceso debe ser lo ms objetivo posible, pero no est exento de la subjetividad del evaluador. 3. Apreciar el valor de la realidad evaluada: Implica valorar la distancia que separa el estado detectado y el valor de referencia. El problema de la objetividad reside en reducir la dispersin existente entre los valores de referencia utilizados por los evaluadores, orientndose hacia una subjetividad compartida. 4. Expresar el valor asignado: Estafase consiste en la expresin del resultado de la evaluacin. Se deben tomar decisiones sobre a quin se dirigir el informe final y la forma que ste adoptar. 16. Tyler, Bloom y Scriven son autores que representan enfoques diferentes para la evaluacin de programas educativos. Exponga brevemente el enfoque de cada uno de esos autores e identifique sus diferencias ms relevantes. Modelo de objetivos y comportamiento (Enfoque de Tyler Bloom) La evaluacin se encarga de definir los resultados y los objetivos del programa, de manera que la tarea del evaluadora, consiste en ver hasta qu punto esos objetivos fueron alcanzados. Este modelo de evaluacin utiliza objetivos mesurables como parmetro comparativo para lo cual utiliza diseos experimentales y cuasiexperimentales. Debilidad: la definicin de los objetivos a veces es arbitraria. El conocimiento previo de los objetivos puede sesgar el resultado de la evaluacin (Scriven). Modelo libre de objetivos (Sriven) Este enfoque considera que el evaluador debe desconocer los objetivos del programa de modo tal que stos no condicionen su apreciacin final. Se ha observado que de todas formas, el evaluador podra dejarse influir por su propia subjetividad, esto es, los objetivos que el programa debera tener de acuerdo a su criterio. Scriven seala respecto a esta dificultad, que el evaluador debe enfocarse en el resultado de la evaluacin, en el producto que el programa ha generado, que es ms objetivable, desvinculado la subjetividad del evaluador. De esta forma, la diferencia central entre ambos modelos es que mientras el modelo de Tyler considera a los objetivos una parmetro de evaluacin, el modelo de Scriven los considera un obstculo para una lectura objetiva del programa. 17. Respecto de cualquier pregunta o item de un instrumento de recoleccin de informacin es posible identificar su valor criterial y su valor real . Exponga brevemente el significado

Graciela Paula Caldeiro-Preguntas frecuentes finales de Evaluacin-23 de esta distincin, cmo se recoleta esa informacin en el instrumento y cul es la utilidad de esa informacin.

La valoracin criterial es la importancia asignada por los informantes a un determinado indicador, independientemente de la valoracin otorgada al centro (valoracin real). Para relevar esta informacin, se puede disear un instrumento con doble casillero en la que se le solicite la informate que indique una puntuacin del 1 al 10 de acuerdo a nivel de importancia que personalmente le asigna a cada item. Estos valores, se compararn luego con el valor que, en el otro casillero, debern consignar respecto a la realidad de la institucin educativa que esta siendo evaluada. De esta forma se pueden establecer comparaciones de criterio y permite ver coincidencias y discrepancias entre diferentes grupos de personas. Cuando evaluacin criterial y real son altas, la coincidencia indica necesidad de una poltica que sostenga la situacin actual en vista a evitar el deterioro. Si la valoracin crierial es alta pero, la real es baja, entonces puede pensarse en un plan de actuacin ya que se dispone de buena disposicin de actitud existiendo sensibilizacin de la cuestin valorada. Y si ambas son bajas, no es posible iniciar un plan de accin directo sino que primero debe considerarse un plan de concientizacin sobre el factor poco valorado criterialmente. Lea atentamente la siguiente frase: Bien podra afirmarse que la evaluacin no es sino una forma distinta y nueva de hacer poltica y ms concretamente, de explicar las polticas por medio de los logros alcanzados Organizacin de Estados Iberoamericanos para la Educacin , la Ciencia y la Cultura 1994, Evaluacin de la calidad de la Educacin Documento base OEI. Luego, a) Explique la relacin entre poltica y evaluacin que se desprende de esta frase. La evaluacin no es solo una tarea tcnica sino que posee una naturaleza poltica puesto que tiene como finalidad contribuir a la toma de decisiones. La evaluacin es principalmente un intento por conocer mejor determinados aspectos de la realidad social y educativa utilizando recursos cientfico con la intencin de alcanzar conclusiones que ayuden a la toma de decisiones, lo cual refiere claramente a la dimensin poltica de la actividad evaluativo. Es interesante sealar respecto a este punto el papel alcanzado por la ciencia en este nuevo contexto ya que legitima las polticas a travs de la evaluacin. Se sustituye la coercin por la persuasin, esto es, las decisiones polticas son justificadas a travs de los resultados de las evaluaciones. La ciencia es as una utilizada como fuente de autoridad cultural. As, la evaluacin adquiere una nueva funcin diferente a la tcnica; es un valioso instrumento de informacin y control, por el que tanto gobiernos como ciudadanos muestra gran inters. b) Describa cules son las funciones de la evaluacin con respecto a las polticas pblicas?.

Graciela Paula Caldeiro-Preguntas frecuentes finales de Evaluacin-24 La tendencia actual entiende a la evaluacin como una actividad poltica y administrativa, y es una parcela de las polticas sociales y de administracin pblica en tanto el conjunto mismo de las polticas y los servicios pblicos se han vuelto objeto de evaluacin. Las causas de este fenmeno se deben a: Razones econmicas y presupuestarias (contencin del gasto pblico y prioridades en la asignacin de recursos) Presin de la opinin pblica (rendicin de cuentas)

Consecuentemente, se produce un cambio en la administracin pblica, del modelo del control va legalidad se pasa a otro racional-burocrtico, en donde se miden los resultados de las polticas propuestas. c) Explique el concepto de rendicin de cuentas. En el contexto de las polticas educacionales, tres fenmenos explican la importancia reciente de la evaluacin, la descentralizacin y reparto de poder, los procesos de reforma educativa y, la rendicin de cuentas: La rendicin de cuentas: Se refiere a la exigencia de transparencia, en armona con los principios de una gestin democrtica. (Moral: ante padres y alumnos; Profesional: ante colegas y Contractual: ante los contribuyentes). La rendicin de cuentas debera ser multidireccional (ante todos los involucrados en el sistema) y multidimensional (incluir no solo los resultados econmicos o los ms asequibles) Mencione y explique dos de los principales mtodos y/o modelos de evaluacin de programas educativos. Idem anteriores, elegir a Tyler y a Scriben y compararlos ;o)