Revista Electrnica de Enseanza de las Ciencias Vol.

7 N1 (2008)

Estudio comparativo de dos instrumentos de evaluacin diagnstica aplicados a profesores de Qumica en formacin: un estudio piloto
Marcela Arellano1, Roxana Jara1, Cristian Merino1, 2 , Mario Quintanilla3 y Luigi Cuellar4
Pontificia Universidad Catlica de Valparaso, Instituto de Qumica. E-mails: marellan@ucv.cl; rjarac1@uc.cl; cristian.merino.r@exa.pucv.cl 2 Universidad Autnoma de Barcelona. Departamento de Didctica de las Matemticas y de las Ciencias Experimentales. E-mail: cristiangonzalo.merino@uab.es 3 Grupo GRECIA. Facultad de Educacin. Pontificia Universidad Catlica de Chile. E-mail: mquintag@puc.cl 4 Facultad de Educacin, Departamento de Didctica. Universidad Catlica de la Santsima Concepcin. E-mail: lcuellar@ucsc.cl
1

Resumen: El propsito de este artculo es presentar los resultados de un estudio piloto sobre la aplicacin de dos instrumentos relacionados con la evaluacin diagnstica, acerca de los conocimientos qumicos de los alumnos de primer ao de Pedagoga en Qumica y Ciencias Naturales del Instituto de Qumica de la Pontificia Universidad Catlica de Valparaso (Chile). Los resultados dan cuenta de ciertas diferencias o incoherencias en las respuestas de los alumnos entre ambos instrumentos. Palabras clave: Instrumentos de evaluacin, evaluacin diagnstica, formacin inicial docente, qumica. Title: Comparative study of the answers of two instruments of diagnostic evaluation applied to professors of chemistry in formation: A pilot study. Abstract: The objective of this article is to present the results of the application o two instruments related to the diagnostic evaluation about chemical knowledge that were applied to students of first year of Pedagogical in Chemistry and Natural Sciences of the Institute of Chemistry of the Pontificia Universidad Catlica de Valparaso, Chile. The results methodologically report difference certain or incoherences in the answers of the students. Keywords: Instruments of evaluation, assessment, pre-service teacher, chemistry. Planteamiento del problema Las ideas alternativas utilizadas por el estudiantado para explicar y representarse los fenmenos qumicos (observados o no), son aquellas que tienen acerca de y sobre los nuevos conocimientos cientficos antes de iniciar su aprendizaje formal. Generalmente, la apropiacin terica de dichos conceptos depende de la forma y estrategias de razonamiento que utilizan las personas y que estn condicionadas por el mismo ambiente

Revista Electrnica de Enseanza de las Ciencias Vol. 7 N1 (2008)

sociocultural del sujeto y con la evolucin de las teoras y los conceptos cientficos a lo largo de la propia historia de la ciencia (Quintanilla, 2007; Quintanilla, 2005). Para comprender, por as decirlo, los niveles de conocimientos previos que es estudiantado posee al inicio de un curso, dentro del marco de la regulacin y autorregulacin de los aprendizajes, se hace necesario realizar evaluaciones diagnsticas, debidamente intencionadas, las cuales tienen por objetivo fundamental, establecer el proceso de desarrollo de cada sujeto antes de iniciar una determinada actividad cientfica de enseanza-aprendizaje, a fin de adecuarlo a sus necesidades, motivaciones y expectativas como se ha insistido en los ltimos aos en la literatura de investigacin en didctica de las ciencias experimentales (Jorba y Casellas, 1997). Los resultados debidamente argumentados de las evaluaciones de esta naturaleza permiten tomar decisiones acerca de cmo hacer evolucionar conceptualmente las ideas y modelos tericos de los alumnos hacia concepciones cientficas cada vez ms cercanas a la ciencia de los cientficos (Bello, 2004) A travs del cuestionario KPSI, diseado por Tamir y Lunetta (1978), se obtiene informacin valiosa sobre el grado de conocimiento del alumnado en relacin a los contenidos cientficos que el profesor le propone aprender en determinadas condiciones de enseanza. Se le pide al estudiante que seleccione su respuesta en funcin de 5 niveles o categoras previamente intencionadas en el cuestionario. Aquella categora de mayor valor se refiere normalmente a si es capaz de explicar el concepto o procedimiento a un compaero o compaera, con lo que se estimula al estudiante a tomar conciencia de que cuando algo se conoce (o se comprende) bien se ha de ser capaz de comunicrselo a alguien. Conocer lo que los estudiantes creen que saben o piensan sobre determinados contenidos cientficos se ha revelado tan til como conocer lo que realmente saben o piensan acerca de cmo explicar o comunicar dichos conceptos bajo ciertos ambientes intencionados de aprendizaje sobre la naturaleza de la ciencia y el desarrollo del propio conocimiento cientfico (Quintanilla, 2006). Se ha podido comprobar que, en muchos casos, el alumnado se sita en un nivel superior de las categoras del cuestionario, especialmente si se ponen conceptos o palabras de uso cotidiano que el sujeto conoce o le son muy familiares. Slo consideran que no saben el concepto o procedimiento cuando no conocen la palabra o la expresin utilizada en el mbito de la ciencia. Por el contrario, a veces, cuanto ms saben en relacin a un tema, ms consideran que su nivel es insuficiente para asumir que lo han aprendido o lo pueden comunicar a otros. Una cosa y la otra no necesariamente van de la mano en el proceso de desarrollo del sujeto que aprende ciencias (Labarrere y Quintanilla, 2002) Qu hace que la evaluacin de aprendizajes cientficos sea tan importante en el desarrollo de competencias y habilidades de pensamiento cientfico en el estudiantado? Una posible respuesta puede encontrarse en que los procesos de evaluacin formal en el aula estn ntimamente ligados a cuestiones fundamentales del quehacer pedaggico, pues de alguna manera determinan y modelan en parte el cmo y qu es enseado y aprendido. No es difcil percibir que alrededor de la evaluacin giran prcticas pedaggicas, normativas, horarios y hasta cantidad de horas de clases. Pero sobretodo, sistemas de creencias y concepciones pedaggicas,

Revista Electrnica de Enseanza de las Ciencias Vol. 7 N1 (2008)

didcticas y epistemolgicas de los profesores de ciencia que son resistentes al cambio y a la evolucin conceptual del conocimiento cientfico construido y enseado (Izquierdo el als, 2007). Como lo hemos planteado en otros artculos y cuerpos de investigacin (Quintanilla, 2007) no obstante, para las ltimas tendencias u orientaciones tericas actuales en didctica de las ciencias naturales en general y en didctica de la qumica en particular, lo relevante es que el estudiantado sepa qu y para qu est aprendiendo, es decir, est de por medio un proceso metacognitivo que tiene que ver con sus formas de pensar, comunicar y de actuar sobre el mundo. Aparece nuevamente la interrelacin entre qu tipo de contenidos se han de ensear en la clase de qumica y cual es el aprendizaje que se espera de los mismos y en todo este proceso, es la evaluacin la que finalmente puede ayudar a resolver (o producir) el conflicto, ya que el conocer va asociado al evaluar lo que se hace (instrumento), se piensa (pensamiento), se comunica (cultura) o se escribe (lenguaje). En este sentido, la evaluacin que se emplea debe referirse tanto a los diferentes tipos de conocimiento cientfico, como a las estrategias de razonamiento y a las formas de comunicacin de significados y representaciones del sujeto que aprende qumica en situaciones intencionadas de aprendizaje. Es por esto que aprobar en un marco constructivista de enseanza de las ciencias debe llegar a significar conocer y conocerse y para eso, toda la intervencin docente girar en torno al estilo, etapas, estrategias, instrumentos y formas de evaluacin (Angulo, 1995). Como es sealado sistemticamente por Sanmart (2007, pp. 19-28), de forma tradicional, el concepto de evaluacin puede ser comprendido desde diversas lecturas, las cuales involucran finalidades diversas y medios muy variados de utilizarla. No obstante, se reconoce que ella es una actividad que involucra procesos de recogida de informacin, de anlisis y emisin de juicios y de toma de decisiones de acuerdo al contexto en que se utilice y de manera abiertamente no ingenua Dejando de lado la funcin de carcter social, la evaluacin tomada como oportunidad de orientar e identificar las situaciones de enseanzaaprendizaje necesarias de reconfigurar, adquiere esta funcin formativa, reguladora y autorreguladora, que no solo involucra al profesorado como <detector> de las dificultades, sino que tambin al estudiante en tanto que l mismo las identifique como valiosas y tome sus propias decisiones, ms all de la deteccin de errores, mediante pruebas continuas. As, desde el punto de vista constructivista, la evaluacin se centra en la comprensin del funcionamiento cognitivo del alumno frente a las tareas que se le proponen en la clase de qumica. La informacin que se busca se refiere a las representaciones mentales del alumnado y a las estrategias que utiliza para llegar a un resultado determinado que le permitan valorar lo que aprende o aprender. Propuesta de trabajo Nos propusimos analizar y comparar la congruencia de las respuestas en dos instrumentos de evaluacin diagnstica, KPSI y Pre-test, aplicados a

Revista Electrnica de Enseanza de las Ciencias Vol. 7 N1 (2008)

estudiantes del primer ao de la carrera de Pedagoga en Qumica y Ciencias Naturales de la Universidad Catlica de Valparaso (Chile). Hiptesis de trabajo Sera susceptible pensar que si un alumno responde en el KPSI sobre un concepto la categora 5, lo puedo explicar a un compaero, debiera responder correctamente las preguntas relacionadas con dicho concepto en el Pre-Test, por el contrario si responde la categora 1 No lo s/ No lo comprendo, debera omitir o contestar incorrectamente en el Pre-Test. Metodologa de la investigacin Se confeccionaron los instrumentos de recogida de datos, debidamente categorizados segn la literatura pertinente, y se aplicaron a los profesores en formacin de Qumica y Ciencias Naturales del Instituto de Qumica de la Facultad de Ciencias de la Pontificia Universidad Catlica de Valparaso. Estos estudiantes cursaron durante el primer Semestre del 2006 la asignatura Fundamentos de Qumica I, cuyos contenidos cientficos se especifican en la tabla nmero 1. Dichos contenidos a evaluar se seleccionaron sobre la base de la relevancia que tienen dentro del programa de la asignatura antes mencionada, elaborndose los instrumentos segn la siguiente distribucin de tems en cada uno de ellos:
IDENTIFICACIN DEL CONTENIDO 1. Materia 2. Estructura Atmica 3. Reaccin Qumica, principios y Conceptos subyacentes 4. Disoluciones y equilibrio cido-base Total preguntas NUMERO DE PREGUNTAS 3 6 14 7 30

Tabla 1.- Contenidos cientficos del Programa Fundamentos de Qumica I.

Los instrumentos escogidos para el estudio piloto a) El KPSI Como lo habamos anticipado en este artculo, dentro de la gama de instrumentos que existen relacionados con la evaluacin inicial, se seleccionaron el KPSI (Knowledge and Prior Study Inventory) y un Pre-test. El KPSI es un instrumento para la regulacin del proceso de aprendizaje y representa un Cuestionario de autoevaluacin del alumnado que permite de una manera rpida y fcil efectuar la evaluacin inicial de las ideas previas del alumno. El objetivo de este instrumento es obtener informacin sobre la percepcin que el sujeto tiene de su grado de conocimiento en relacin a los contenidos que el profesor(a) propone para su estudio y comprensin. La puesta en comn de los resultados, cuando se les pide a los alumnos que expliquen sus ideas, les permite darse cuenta que su idea inicial no era tan elaborada o compleja como pensaban en relacin al contenido cientfico que se discute en la clase. Es necesario que estos profesores de qumica en formacin sepan que algunos de los objetivos que se han de lograr durante

Revista Electrnica de Enseanza de las Ciencias Vol. 7 N1 (2008)

y despus del proceso de E/A, puedan dar respuesta a las preguntas que problematizan los formularios KPSI. As, las preguntas planteadas intencionadamente en este tipo de instrumentos pueden utilizarse como evaluacin sumativa al concluir determinada fase del proceso. En el cuestionario KPSI se han considerado los mismos contenidos cientficos que estructuran el Pre-Test. Las respuestas del estudiantado fueron graduadas en 5 tipos o categoras que se sealan en la tabla nmero 2.
CATEGORA 1 2 3 4 5 TIPO No lo s/ No lo comprendo Lo conozco un poco Lo comprendo parcialmente Lo comprendo bien Lo puedo explicar a un compaero

Tabla 2.- Tipologas del cuestionario KPSI.

b) El Pre-test
Corresponde a una prueba formal de seleccin nica, que consta de 30 preguntas con cinco alternativas, de las cuales solo una de ellas es la correcta (Ver Anexo 2). El Pre-Test fue administrado a los profesores de qumica en formacin luego de recogerse los datos del KPSI, comparando as los registros encontrados en ambos protocolos por separado, por estudiante y por contenido, segn el programa del curso evaluado. Anlisis y evaluacin de los resultados obtenidos Los resultados recopilados luego de la aplicacin, fueron analizados sobre la base de dos criterios: 1. el nmero de estudiantes que responden temas especficos en las distintas categoras, 2. la coherencia entre el tipo de preguntas del Pre-Test (correctas, incorrectas y omitidas) que los estudiantes relacionan con dichos contenidos cientficos. El nmero de alumnos que particip en esta evaluacin inicial fue de 31. Resultados En la tabla 3, se sistematizan los resultados obtenidos en el KPSI, y en el Pre-Test de manera separada para cada contenido qumico. Evaluacin de los resultados obtenidos A partir de la evidencia emprica anterior es posible observar lo siguiente: 1. En el primer contenido cientfico relacionado con la Materia, que comprende las preguntas 1, 2 y 3 en los instrumentos aplicados se puede colegir que en la categora 1 del KPSI No lo s/ No lo comprendo un 87% de los alumnos que marcaron este nivel, en el Pre-test omitieron las preguntas o respondieron incorrectamente. Este valor contempla a la sumatoria de las claves RI, PO por considerarse como desconocimiento del

Revista Electrnica de Enseanza de las Ciencias Vol. 7 N1 (2008)

contenido cientfico abordado.

MATERIA Sustancias puras P1 KPSI Categoras 1. No lo se/ no lo comprendo 2. Lo conozco un poco 3. Lo comprendo parcialmente 4. Lo comprendo bien 5. Lo puedo explicar a un compaero Total Cambio qumico y cambio fsico P2 KPSI Categoras 1. No lo se/ no lo comprendo 2. Lo conozco un poco 3. Lo comprendo parcialmente 4. Lo comprendo bien 5. Lo puedo explicar a un compaero Total NA 0 4 10 10 7 31 NA 4 13 10 3 1 31 PRE TEST NA 4 13 10 3 1 31 PRE TEST NA 0 4 10 10 7 31 RC 0 0 6 4 6 % 0 0 60 40 86 RI 0 3 4 5 1 Respuestas % 0 75 40 50 14 PO 0 1 0 1 0 % 0 25 0 10 0 RC 1 4 6 1 0 % 25 31 60 33 0 RI 1 5 2 2 1 Respuestas % 25 38 20 67 100 PO 2 4 2 0 0 % 50 31 20 0 0

Equivalencia de unidades P3 KPSI Categoras 1. No lo se/ no lo comprendo 2. Lo conozco un poco 3. Lo comprendo parcialmente 4. Lo comprendo bien 5. Lo puedo explicar a un compaero Total NA 11 4 9 5 2 31

PRE TEST NA 11 4 9 5 2 31 RC 1 1 2 1 0 % 9 25 22 20 0 RI 6 2 2 3 1

Respuestas % 55 50 22 60 50 PO % 4 1 5 1 1 36 25 56 20 50

Tabla 3.- Plantilla de resultados evaluacin diagnstica. (NP = Nmero de la Pregunta en el Instrumento, RC = Respuesta correcta, RI = Respuesta incorrecta, PO = Preguntas omitidas, NA = Nmero de alumnos que respondi el instrumento que se indica).

2. Con relacin a la categora 2 del KPSI Lo conozco un poco un 76% de los alumnos que marcaron esta categora, en el Pre-test omitieron, o contestaron incorrectamente. 3. En la categora 3 Lo comprendo parcialmente, del KPSI, el 52% de los alumnos que respondieron este nivel, omiti o contest incorrectamente en el Pre-test. 4. En la categora 4 Lo comprendo bien del KPSI, slo un 33% de los alumnos que marc esta categora, en el Pre-test respondi las preguntas correctamente. 5. En la categora 5 del KPSI Lo puedo explicar a un compaero, un 60% de los alumnos que respondieron esta categora, respondieron correctamente en el Pre-Test.

Revista Electrnica de Enseanza de las Ciencias Vol. 7 N1 (2008)

En la grfico 1 se sintetizan los anlisis anteriores. Ntese que en la grfica que para el Pre-test en las categoras 1, 2 y 3 se consideran las cifras de RI + PO y que en las categoras 4 y 5 se consideran las cifras de RC.
RESULTADOS CONTENIDO "LA MATERIA"
35
Frecuencia absoluta

30 25 20 15 10 5 0 1 2 15 13 21 16

29

18 15 10 6 6

KPSI PRETEST

3 Categoras

Grfico 1.- Comparacin de resultados entre ambos instrumentos para la materia.

En el segundo contenido cientfico, relacionado con Estructura Atmica, que comprende las preguntas 4, 5, 6, 7, 8 y 9 (6 en total) se puede distinguir que: 1. En la categora 1 del KPSI No lo s/ No lo comprendo un 86% de los alumnos que marcaron este nivel, en el Pre-test omitieron las preguntas o respondieron incorrectamente, destacando que en la pregunta 8 el 100% omiti la respuesta. 2. Con relacin a la categora 2 del KPSI Lo conozco un poco un 82% de los alumnos que marcaron esta categora, en el Pre-test omitieron, o contestaron incorrectamente. La pregunta 9 fue omitida por el 100% de los alumnos. 3. En la categora 3 Lo comprendo parcialmente, del KPSI, el 67% de los alumnos que respondieron este nivel, omiti o contest incorrectamente en el Pre-test. 4. En la categora 4 Lo comprendo bien del KPSI, slo un 56% de los alumnos que marc esta categora, en el Pre-test respondi las preguntas correctamente. Cabe destacar que donde mayor logro se observa es en las preguntas 4 y 5, por el contrario en las preguntas 8 y 9 el alumno que marc la categora, omiti la respuesta en el Pre-test. 5. En la categora 5 del KPSI Lo puedo explicar a un compaero, un 68% de los alumnos que indicaron esta categora, respondieron correctamente, slo tomando en cuenta las preguntas 4, 5 y 6 en el PreTest. Las preguntas 7, 8 y 9, no fueron respondidas, coincidiendo que en esos contenidos tampoco hubo alumnos que marcaran la categora. En el grfico 2 se sistematizan los valores de KPSI/Pre-Test para Estructura atmica. Ntese que en la grfica para el Pre-Test las categoras

Revista Electrnica de Enseanza de las Ciencias Vol. 7 N1 (2008)

1, 2 y 3 considera las cifras de RI + PO y que en las categoras 4 y 5 se consideras las cifras de RC.

RESULTADOS CONTENIDO "ESTRUCTURA ATMICA"

70 60 50 40 30 20 10 0 60 43 37 28 23 40

Frecuencia absoluta

36 20 19 13

KPSI PRETEST

3 Categoras

Grfico 2.- Comparacin Estructura atmica.

de

resultados

entre

ambos

instrumentos

para

En el tercer contenido relacionado con La Reaccin Qumica, principios y conceptos subyacentes (vase anexo 3) que comprende 14 preguntas (de la 10 a la 23) se observa que: 1. En la categora 1 del KPSI No lo s/ No lo comprendo un 93% de los alumnos que marcaron este nivel, en el Pre-test omitieron las preguntas o respondieron incorrectamente, destacando que en la preguntas 13, 19, 21, y 22 el 100% omiti la respuesta. 2. Con relacin a la categora 2 del KPSI Lo conozco un poco un 86% de los alumnos que seleccionaron esta categora, en el Pre-test omitieron o contestaron incorrectamente. En la pregunta 19 el 100 % de los alumnos y en la 22 prcticamente el 100% de los alumnos omitieron la pregunta. 3. En la categora 3 Lo comprendo parcialmente, del KPSI, el 72% de los alumnos que respondieron este nivel, omiti o contest incorrectamente en el Pre-test. En las preguntas 17 y 22 omiti el 100%. 4. En la categora 4 Lo comprendo bien del KPSI, slo un 37% de los alumnos que marc esta categora, en el Pre-test respondi las preguntas Cabe destacar que donde mayor logro se observa es en las preguntas 10, 11 y 13, por el contrario en las preguntas 19 y 21 los alumno que marcaron la categora, omitieron las respuestas en el Pre-test. 5. En la categora 5 del KPSI Lo puedo explicar a un compaero, un 43% de los alumnos que indicaron esta categora, respondieron correctamente. Se destaca que en las preguntas 10 y 13 se observa un 100% de preguntas respondidas correctamente, por el contrario en las preguntas 19, 22 y 23 no fueron respondidas, observndose un 100% de omitidas. En el grfico 3 se sistematizan los valores de KPSI/Pre-Test para La Reaccin Qumica, principios y conceptos subyacentes.

Revista Electrnica de Enseanza de las Ciencias Vol. 7 N1 (2008)

CONTENIDO "REACCIONES QUMICAS, PRINCIPIOS Y CONCEPTOS SUBYACENTES"

Frecuencia absoluta
140 120 100 80 60 40 20 0 125 108 74 69 115 82 79 29 42 18 KPSI PRETEST

3 Categora

Grfico 3.- Comparacin de resultados entre ambos instrumentos para La Reaccin Qumica, principios y conceptos subyacentes.

Finalmente, en el cuarto contenido vinculado con Disoluciones y Equilibrio cido-Base (vase anexo 3), que incluye 7 preguntas (de la 24 a la 30), se puede distinguir lo siguiente: 1. En la categora 1 del KPSI No lo s/ No lo comprendo un 65% de los alumnos que marcaron este nivel, en el Pre-test omitieron las preguntas o respondieron incorrectamente, destacando que en las preguntas 26 y 30, el 100% omiti la respuesta. Por otra parte en la pregunta 24, de los 8 alumnos que marcaron esta categora, 6 de ellos, sus respuestas en el pretest fueron correctas es decir el 75%. 2. Con relacin a la categora 2 del KPSI Lo conozco un poco un 74% de los alumnos que marcaron esta categora, en el Pre-test omitieron o contestaron incorrectamente. La pregunta 30 fue omitida por el 100% de los alumnos. 3. En la categora 3 Lo comprendo parcialmente, del KPSI, el 65% de los alumnos que respondieron este nivel, omitieron o contestaron incorrectamente en el Pre-test. 4. En la categora 4 Lo comprendo bien del KPSI, slo un 50% de los alumnos que seleccionaron esta categora, en el Pre-test respondieron las preguntas correctamente Cabe destacar que donde mayor logro se observa es en las preguntas 25, 27 y 29, por el contrario en la pregunta 26 los alumnos que marcaron la categora, ninguno respondi correctamente en el Pre-test. 5. En la categora 5 del KPSI Lo puedo explicar a un compaero, un 38% de los alumnos que indicaron esta categora, respondieron correctamente. Se destaca que en las preguntas 24 y 29 se observan un mayor logro, por el contrario en la pregunta 26 nuevamente ningn alumno respondi correctamente en el Pre-Test, como ocurri en la categora anterior. En el grfico 4 se sistematizan los valores de KPSI/Pre-Test para Disoluciones y Equilibrio cido-Base.

Revista Electrnica de Enseanza de las Ciencias Vol. 7 N1 (2008)

CONTENIDO "DISOLUCIONES Y CIDO-BASE"

Frecuencia absoluta
60 50 40 30 20 10 0 1 2 3 Categoras 4 5 37 24 53 39 32 22 13 49

44 34 KPSI PRETEST

Grfico 4.- Comparacin de resultados Disoluciones y Equilibrio cido-Base.

entre

ambos

instrumentos

para

Conclusiones A partir de la evidencia emprica debidamente sistematizada, organizada, categorizada y analizada, es posible adelantar algunas conclusiones preliminares que permitan comprender los hallazgos comunicados en este artculo. Las mismas se dividen en tres grandes aspectos: 1. Los instrumentos utilizados 2. las categoras que refieren los datos 3. la vinculacin entre los instrumentos y los aprendizajes de los profesores en formacin. Los instrumentos utilizados. El KPSI y Pre-Test en la evaluacin diagnstica de los profesores de qumica en formacin revelan ciertas diferencias o inconsistencias en las respuestas de los sujetos. Cuando el estudiante en el KPSI seala que sabe o le puede explicar a un compaero un concepto, en el Pre-test su respuesta no es consistente con ello, al responder en las preguntas que relacionan dichos conceptos o teoras cientficas. Por el contrario las tres primeras categoras del KPSI revelan coherencia con lo que responden los alumnos en el Pre-test. Por lo tanto, la estructuracin lgica y la finalidad evaluativa de los instrumentos diseados para este estudio, explican cada uno, por separado y en conjunto, ideas referidas a la evaluacin, el pensamiento de los estudiantes y las representaciones cientficas que se hacen los sujetos a partir de todo su repertorio cognitivo. Sera interesante a futuro, determinar la validez y la confiabilidad a las dimensiones y tipologas conceptuales con otra muestra de sujetos, similar o diferente, y concluir al respecto. Las categoras que refieren los datos. Al respecto, es posible concluir distintos niveles de coherencia en las respuestas de los sujetos para ambos instrumentos. En efecto: a. En las categoras: No lo s/ No lo comprendo y Lo conozco un poco se puede concluir que hay una coherencia en los dos instrumentos, ya que,

10

Revista Electrnica de Enseanza de las Ciencias Vol. 7 N1 (2008)

la mayora de los alumnos responden incorrectamente u omiten las respuestas, es decir los alumnos estn concientes que no lo comprenden o saben muy poco acerca de los contenidos preguntados. b. La categora en la cual se observan grandes diferencias es lo comprendo parcialmente, los alumnos que contestan esta categora, tiene ciertas nociones acerca del tema en cuestin, pero estas no le permiten contestar correctamente las preguntas acerca de los contenidos en el Pretest. c. Con relacin a las categoras lo comprendo bien y lo puedo explicar a un compaero, muestran muy poca congruencia ambos instrumentos de evaluacin, ya que los alumnos en la mayora de los casos creen que dominan un contenido cientfico y lo pueden explicar, pero responden incorrectamente en el Pre-Test. La vinculacin entre los instrumentos y los aprendizajes de los profesores en formacin. El uso de ambos instrumentos facilita una primera reflexin sobre el grado de conocimiento que creen tener los profesores de qumica en formacin sobre o acerca de los contenidos cientficos que se tratarn formalmente en la asignatura. De alguna manera conocen previamente determinados modelos tericos que habra de complejizar sistemticamente en su proceso de desarrollo profesional. Agradecimientos - El programa de Personal Investigador en Formacin (PIF) para Departamentos de la Universitat Autnoma de Barcelona. - El programa de Perfeccionamiento Docente de la Pontificia Universidad Catlica de Valparaso-Chile. - Al proyecto de investigacin y desarrollo FONDECYT 1070795 que dirige el Dr. Mario Quintanilla en la Pontificia Universidad Catlica de Chile (2007 2009). - Direccin de Investigacin de la Pontificia Universidad Catlica de Valpariso Proyecto DI 125-787. Referencias bibliogrficas Angulo, F. (1995). Aprender a Ensear: Anlisis de la aplicacin de una propuesta basada en la autorregulacin de los aprendizajes. Bellaterra: Universidad Autnoma de Barcelona (Tesina de Master no publicada). Bello S. (2004). Ideas previas y cambio conceptual. Educacin Qumica, 15(3), 210-217. Caamao, A. (2003). La enseanza y el aprendizaje de la Qumica. En MP. Jimnez y A. Caamao (Ed.), Ensear Ciencias (pp. 203-228). Barcelona: Grao. Caamao, A. y A. Oorbe (2004). La Enseanza de la Qumica: conceptos y teoras, dificultades de aprendizajes y replanteamientos curriculares. Alambique, 41, 68-79.

11

Revista Electrnica de Enseanza de las Ciencias Vol. 7 N1 (2008)

Gilbert, J.K., De Jong, O., Justi, R., Treaugust, D.F., y J.H Van Driel (2003). Chemical Education: Towards Research-based practice. London: Kluwer Academic Publischers. Jorba, J. y N. Sanmart (1996). Ensear, aprender y evaluar: un proceso de regulacin continua. Propuestas didcticas para las reas de Ciencias de la Naturaleza y Matemticas. Madrid: Ministerio de Educacin y Ciencias. Jorba, J. y E. Casellas (1997). La Regulacin y Autorregulacin de los aprendizajes. Barcelona: Sntesis. Izquierdo, M., Caamao, A. y M. Quintanilla (2007). Investigar en enseanza de la qumica: modelizar y contextualizar. Bellaterra: Servei de Publicacions-UAB. Labarrere, A. y M. Quintanilla (2002). Anlisis de los planos de desarrollo de estudiantes de ciencia. Efecto en el aprendizaje. Pensamiento Educativo, 30, 121-138. Martn- Daz, M.J., Gmez-Crespo, M. A. y M.S. Gutirrez (2000). La Fsica y Qumica en Secundaria. Madrid: Narcea. Izquierdo, M., Caamao, A., y M. Quintanilla (2007). Investigar en la enseanza de la qumica. Nuevos horizontes: contextualizar y modelizar. Bellaterra: Servei de Publicacions-UAB. Quintanilla, M. (2007). El inventario de ideas previas (KPSI) como un instrumento de regulacin de los procesos de desarrollo profesional de docentes de ciencias naturales en ejercicio. Boletn de Investigacin Educacional Facultad de Educacin. Santiago de Chile: Ediciones Universidad Catlica de Chile. (En prensa) Quintanilla, M. (2006). Identificacin, caracterizacin y evaluacin de competencias cientficas desde una imagen naturalizada de la ciencia. En M. Quintanilla y A. Adriz-Bravo (Ed.), Ensear Ciencias en el nuevo milenio. Retos y propuestas (pp. 17-42). Santiago de Chile: Ediciones Universidad Catlica de Chile. Quintanilla, M. (2005). Historia de la ciencia y formacin docente: una necesidad irreducible. Revista TED. Nmero extra, 34-43. Sanmart, N. (2007). Diez ideas clave. Evaluar para aprender. Barcelona: Grao. Santos Guerra, M.A. (1998). Evaluar es comprender. Buenos Aires: Editorial Magisterio del Ro de la Plata. Sayre, W.G. (1999). A good beginning. Journal Chemical Education, 76, 621. Tamir, P. y V.M. Lunetta (1978). An Analyst of laboratory activities in the BSCS. Yellow version, American Biology Teacher, 40, 426-428. Vermersch, P. (1979). Analyse de la tche et fonctionnement cognitive dans la programation de lenseignement. Bulletin de Psychologie, 33, (343), 179-187.

12

Revista Electrnica de Enseanza de las Ciencias Vol. 7 N1 (2008) ANEXO 1: Evaluacin diagnstica KPSI Qu sabemos sobre la materia, estructura atmica, la reaccin qumica y los principios y conceptos subyacentes, disoluciones y cido-base? Para cada una de las siguientes aseveraciones, indique con mucha honestidad, cul es su grado de conocimiento que tiene sobre el tema, basndose en las siguientes categoras: 1. 2. 3. 4. No lo s/ No lo comprendo Lo conozco un poco Lo comprendo parcialmente Lo comprendo bien

5. Lo puedo explicar a un compaero Materia 1 2 3 4 5

CONCEPTO/TEMA a) Sustancias puras b) Mezclas c) Cambio qumico y fsico d) Equivalencias de unidades Estructura Atmica

CONCEPTO/TEMA 1 a) Nmero atmico (Z) b) Nmero msico (A) c tomo neutro e ion d) Requisitos fundamentales para escribir la configuracin electrnica e) La configuracin electrnica para el 27Co f) La configuracin electrnica para el 27Co2+ g) Caractersticas de la unin inica h) Representacin de molculas e iones poliatmicos a travs de la notacin de Lewis i) La geometra y polaridad de las molculas

Reaccin qumica, Principios y conceptos subyacentes 2 3 4 5

CONCEPTO/TEMA 1 a) Los smbolos de los elementos qumicos b) La nomenclatura de compuestos binarios y ternarios c) Diferencia entre cambio qumico y cambio fsico d) Relacin mol, masa molar y Nmero de Avogadro e) Mtodo simple inspeccin o al tanteo en una reaccin qumica f) Nmero de oxidacin g) Agente oxidante y reductor en una reaccin redox h) Reactivo limitante en una ecuacin qumica i) Cantidad de producto que se forma en una reaccin qumica j) Reactivo en exceso en una reaccin qumica

13

Revista Electrnica de Enseanza de las Ciencias Vol. 7 N1 (2008) Disoluciones y cido base 1 2 3 4 5

CONCEPTO/TEMA a) Identificacin de soluciones b) Molaridad, %en masa, dilucin c) Clculo de concentracin d) Solubilidad e) Expresin constante de equilibrio f) Teora de Bronsted - Lowry g) pH h) Clculo de pH NOMBRE:

FECHA:

14

Revista Electrnica de Enseanza de las Ciencias Vol. 7 N1 (2008) ANEXO 2: Ejemplo de preguntas Pre-test. Fundamentos de Quimica 1. Pre-Test 1. Cul de los siguientes ejemplos corresponde(n) a una sustancia pura? I. agua mineral II. Cloruro de sodio III. Leche A) Slo I B) slo II C) slo III D) I y II E) todos

2. Cul de los siguientes procesos es un cambio qumico? A) La fusin de la mantequilla C) La evaporacin del agua de mar E) El aserrado de la madera B) El avinagramiento de la leche D) El calentamiento del vidrio

3. Cul de las siguientes cantidades de masa son iguales? I. 10 mg A) Ninguna todas 4. El ion Co2+ tiene un Z =27 y un A = 59. Segn estos datos es correcto afirmar que: A) 59 neutrones y 27 protones C) 29 protones y 27 electrones E) 27 protones y 59 electrones B) 27 protones y 32 neutrones D) 27 protones y 29 electrones II. 0,010 g B) I y II III. 0, 0010 Kg D) I y III E)

C) II y III

5. La configuracin electrnica que representa al Ion Ca+2 cuyo Z=20 es: A) 1s22s22p63s23p64s2 C) 1s22s22p63s23p6 E) 1s22s22p63s23p63d4 NOMBRE B) 1s22s22p63s23p64s23d2 D) 1s22s22p63s23p63d2

FECHA

15

Revista Electrnica de Enseanza de las Ciencias Vol. 7 N1 (2008) ANEXO 3: Tabulacin de datos para los contenidos cientficos que se indican
ESTRUCTURA ATMICA Nmero atmico y masa atmica PRE TEST Respuestas KPSI 4 Categoras 1. No lo se/ no lo comprendo 2. Lo conozco un poco 3. Lo comprendo parcialmente 4. Lo comprendo bien 5. Lo puedo explicar a un compaero Total Configuracin electrnica PRE TEST Respuestas KPSI 5 Categoras 1. No lo se/ no lo comprendo 2. Lo conozco un poco 3. Lo comprendo parcialmente 4. Lo comprendo bien 5. Lo puedo explicar a un compaero Total Caractersticas de la unin inica PRE TEST Respuestas KPSI 6 Categoras 1. No lo se/ no lo comprendo 2. Lo conozco un poco 3. Lo comprendo parcialmente 4. Lo comprendo bien 5. Lo puedo explicar a un compaero Total Representacin de molculas e iones PRE TEST Respuestas KPSI 7 Categoras 1. No lo se/ no lo comprendo 2. Lo conozco un poco 3. Lo comprendo parcialmente 4. Lo comprendo bien 5. Lo puedo explicar a un compaero Total NA 7 7 10 7 0 31 NA 7 7 10 7 0 31 RC 1 2 5 3 0 % 14 29 50 43 0 RI 3 1 4 1 0 % 43 14 40 14 0 PO 3 4 1 3 0 % 43 57 10 43 0 NA 8 3 13 5 2 31 NA 8 3 13 5 2 31 RC 2 0 7 2 1 % 25 0 54 40 50 RI 3 1 5 1 1 % 38 33 38 20 50 PO 3 2 1 2 0 % 38 67 8 40 0 NA 3 3 6 12 7 31 NA 3 3 6 12 7 31 RC 2 2 3 9 5 % 67 67 50 75 71 RI 0 1 2 1 2 % 0 33 33 8 29 PO 1 0 1 2 0 % 33 0 17 17 0 NA 1 1 9 10 10 31 NA 1 1 9 10 10 31 RC 0 0 2 6 7 % 0 0 22 60 70 RI 0 0 3 2 1 % 0 0 33 20 10 PO 1 1 4 2 2 % 100 100 44 20 20

16

Revista Electrnica de Enseanza de las Ciencias Vol. 7 N1 (2008)

Geometra y polaridad de las molculas PRE TEST Respuestas KPSI 8 Categoras 1. No lo se/ no lo comprendo 2. Lo conozco un poco 3. Lo comprendo parcialmente 4. Lo comprendo bien 5. Lo puedo explicar a un compaero Total Polaridad de las molculas PRE TEST Respuestas KPSI 9 Categoras 1. No lo se/ no lo comprendo 2. Lo conozco un poco 3. Lo comprendo parcialmente 4. Lo comprendo bien 5. Lo puedo explicar a un compaero Total NA 12 7 11 1 0 31 NA 12 7 11 1 0 31 RC 1 0 0 0 0 % 8 0 0 0 0 RI 3 0 2 0 0 % 25 0 18 0 0 PO 8 7 9 1 0 % 67 100 82 100 0 NA 12 7 11 1 0 31 NA 12 7 11 1 0 31 RC 0 1 3 0 0 % 0 14 27 0 0 RI 0 1 0 0 0 % 0 14 0 0 0 PO 12 5 8 1 0 % 100 71 73 100 0

REACCION QUMICA, PRINCIPIOS Y CONCEPTOS SUBYACENTES Los smbolos de los elementos qumicos PRE TEST Respuestas KPSI 10 Categoras 1. No lo se/ no lo comprendo 2. Lo conozco un poco 3. Lo comprendo parcialmente 4. Lo comprendo bien 5. Lo puedo explicar a un compaero Total NA 1 2 8 13 7 31 NA 1 2 8 13 7 31 RC 0 1 8 12 7 % 0 50 100 92 100 RI 0 1 0 1 0 % 0 50 0 8 0 PO 1 0 0 0 0 % 100 0 0 0 0

Nomenclatura de compuestos PRE TEST Respuestas KPSI

11

Categoras 1. No lo se/ no lo comprendo 2. Lo conozco un poco 3. Lo comprendo parcialmente 4. Lo comprendo bien 5. Lo puedo explicar a un compaero Total

NA 6 8 9 4 4 31

NA 6 8 9 4 4 31

RC 0 2 4 3 2

% 0 25 44 75 50

RI 2 2 5 1 1

% 33 25 56 25 25

PO 4 4 0 0 1

% 67 50 0 0 25

17

Revista Electrnica de Enseanza de las Ciencias Vol. 7 N1 (2008)

Nomenclatura de compuestos PRE TEST Respuestas KPSI 12 Categoras 1. No lo se/ no lo comprendo 2. Lo conozco un poco 3. Lo comprendo parcialmente 4. Lo comprendo bien 5. Lo puedo explicar a un compaero Total n als 6 8 9 4 4 31
n als buenas % malas % omitidas %

6 8 9 4 4 31

1 1 3 0 0

17 13 33 0 0

2 1 4 3 3

33 13 44 75 75

3 6 2 1 1

50 75 22 25 25

Relacin mol, masa molar, nmero de Avogadro PRE-TEST Respuestas KPSI

13

Categoras 1. No lo se/ no lo comprendo 2. Lo conozco un poco 3. Lo comprendo parcialmente 4. Lo comprendo bien 5. Lo puedo explicar a un compaero Total

NA 2 9 10 8 2 31

NA 2 9 10 8 2 31

RC 0 2 6 5 2

% 0 22 60 63 100

RI 0 0 0 0 0

% 0 0 0 0 0

PO 2 7 4 3 0

% 100 78 40 38 0

Relacin mol, masa molar, nmero de Avogadro PRE TEST Respuestas KPSI 14 Categoras 1. No lo se/ no lo comprendo 2. Lo conozco un poco 3. Lo comprendo parcialmente 4. Lo comprendo bien 5. Lo puedo explicar a un compaero Total NA 2 9 10 8 2 31 NA 2 9 10 8 2 31 RC 1 2 3 2 1 % 50 22 30 25 50 RI 0 0 0 0 0 % 0 0 0 0 0 PO 1 7 7 6 1 % 50 78 70 75 50

Relacin mol, masa molar, nmero de Avogadro PRE TEST Respuestas KPSI

15

Categoras 1. No lo se/ no lo comprendo 2. Lo conozco un poco 3. Lo comprendo parcialmente 4. Lo comprendo bien 5. Lo puedo explicar a un compaero Total

NA 2 9 10 8 2 31

NA 2 9 10 8 2 31

RC 0 0 1 1 0

% 0 0 10 13 0

RI 1 1 4 3 2

% 50 11 40 38 100

PO 1 8 5 4 0

% 50 89 50 50 0

18

Revista Electrnica de Enseanza de las Ciencias Vol. 7 N1 (2008)

Mtodo de simple inspeccin PRE TEST Respuestas KPSI 16 Categoras 1. No lo se/ no lo comprendo 2. Lo conozco un poco 3. Lo comprendo parcialmente 4. Lo comprendo bien 5. Lo puedo explicar a un compaero Total Mtodo de simple inspeccin PRE TEST Respuestas KPSI 17 Categoras 1. No lo se/ no lo comprendo 2. Lo conozco un poco 3. Lo comprendo parcialmente 4. Lo comprendo bien 5. Lo puedo explicar a un compaero Total Nmero de oxidacin PRE TEST Respuestas KPSI 18 Categoras 1. No lo se/ no lo comprendo 2. Lo conozco un poco 3. Lo comprendo parcialmente 4. Lo comprendo bien 5. Lo puedo explicar a un compaero Total Nmero de oxidacin PRE TEST Respuestas KPSI 19 Categoras 1. No lo se/ no lo comprendo 2. Lo conozco un poco 3. Lo comprendo parcialmente 4. Lo comprendo bien 5. Lo puedo explicar a un compaero Total NA 5 3 12 8 3 31 NA 5 3 12 8 3 31 RC 0 0 0 0 0 % 0 0 0 0 0 RI 0 0 0 0 0 % 0 0 0 0 0 PO 5 3 12 8 3 % 100 100 100 100 100 NA 5 3 12 8 3 31 NA 5 3 12 8 3 31 RC 1 0 4 3 2 % 20 0 33 38 67 RI 0 1 4 2 1 % 0 33 33 25 33 PO 4 2 4 3 0 % 80 67 33 38 0 NA 10 11 5 2 3 31 NA 10 11 5 2 3 31 RC 1 2 0 0 0 % 10 18 0 0 0 RI 3 2 0 2 2 % 30 18 0 100 67 PO 6 7 5 0 1 % 60 64 100 0 33 NA 10 11 5 2 3 31 NA 10 11 5 2 3 31 RC 0 0 0 0 0 % 0 0 0 0 0 RI 5 1 1 1 1 % 50 9 20 50 33 PO 5 10 4 1 2 % 50 91 80 50 67

19

Revista Electrnica de Enseanza de las Ciencias Vol. 7 N1 (2008)

Agente oxidante y reductor PRE TEST Respuestas KPSI 20 Categoras 1. No lo se/ no lo comprendo 2. Lo conozco un poco 3. Lo comprendo parcialmente 4. Lo comprendo bien 5. Lo puedo explicar a un compaero Total NA 5 7 8 8 3 31 NA 5 7 8 8 3 31 RC 1 2 1 3 2 % 20 29 13 38 67 RI 1 3 4 5 1 % 20 43 50 63 33 PO 3 2 3 0 0 % 60 29 38 0 0

Cantidad de producto que se forma en una reaccin qumica PRE TEST Respuestas KPSI

21

Categoras 1. No lo se/ no lo comprendo 2. Lo conozco un poco 3. Lo comprendo parcialmente 4. Lo comprendo bien 5. Lo puedo explicar a un compaero Total

NA 5 14 7 2 3 31

NA 5 14 7 2 3 31

RC 0 4 1 0 2

% 0 29 14 0 67

RI 0 1 1 0 0

% 0 7 14 0 0

PO 5 9 5 2 1

% 100 64 71 100 33

Reactivo limitante PRE TEST Respuestas KPSI

22

Categoras 1. No lo se/ no lo comprendo 2. Lo conozco un poco 3. Lo comprendo parcialmente 4. Lo comprendo bien 5. Lo puedo explicar a un compaero Total

NA 8 16 4 2 1 31

NA 8 16 4 2 1 31

RC 0 0 0 0 0

% 0 0 0 0 0

RI 0 0 0 1 0

% 0 0 0 50 0

PO 8 16 4 1 1

% 100 100 100 50 100

Reactivo en exceso en una reactivo qumica PRE TEST Respuestas KPSI

23

Categoras 1. No lo se/ no lo comprendo 2. Lo conozco un poco 3. Lo comprendo parcialmente 4. Lo comprendo bien 5. Lo puedo explicar a un compaero Total

NA 7 15 5 2 2 31

NA 7 15 5 2 2 31

RC 0 1 1 0 0

% 0 7 20 0 0

RI 3 2 1 1 0

% 43 13 20 50 0

PO 4 12 3 1 2

% 57 80 60 50 100

20

Revista Electrnica de Enseanza de las Ciencias Vol. 7 N1 (2008)

DISOLUCIONES Y CIDO -BASE Identificacin de soluciones PRE TEST Respuestas KPSI 24 Categoras 1. No lo se/ no lo comprendo 2. Lo conozco un poco 3. Lo comprendo parcialmente 4. Lo comprendo bien 5. Lo puedo explicar a un compaero Total Molaridad, % en masa, dilucin PRE TEST Respuestas KPSI 25 Categoras 1. No lo se/ no lo comprendo 2. Lo conozco un poco 3. Lo comprendo parcialmente 4. Lo comprendo bien 5. Lo puedo explicar a un compaero Total Clculo de concentracin PRE TEST Respuestas KPSI 26 Categoras 1. No lo se/ no lo comprendo 2. Lo conozco un poco 3. Lo comprendo parcialmente 4. Lo comprendo bien 5. Lo puedo explicar a un compaero Total Expresin de constante de equilibrio PRE TEST Respuestas KPSI 27 Categoras 1. No lo se/ no lo comprendo 2. Lo conozco un poco 3. Lo comprendo parcialmente 4. Lo comprendo bien 5. Lo puedo explicar a un compaero Total NA 5 6 11 6 3 31 NA 5 6 11 6 3 31 RC 3 4 8 5 1 % 60 67 73 83 33 RI 0 1 3 1 0 % 0 17 27 17 0 PO 2 1 0 0 2 % 40 17 0 0 67 NA 5 12 5 5 4 31 NA 5 12 5 5 4 31 RC 0 0 0 0 0 % 0 0 0 0 0 RI 0 1 1 2 1 % 0 8 20 40 25 PO 5 11 4 3 3 % 100 92 80 60 75 NA 3 11 7 6 4 31 NA 3 11 7 6 4 31 RC 1 3 1 4 2 % 33 27 14 67 50 RI 0 3 2 1 0 % 0 27 29 17 0 PO 2 5 4 1 2 % 67 45 57 17 50 NA 8 10 5 3 5 31 NA 8 10 5 3 5 31 RC 6 3 3 2 3 % 75 30 60 67 60 RI 0 4 1 1 0 % 0 40 20 33 0 PO 2 3 1 0 2 % 25 30 20 0 40

21

Revista Electrnica de Enseanza de las Ciencias Vol. 7 N1 (2008)

Teora Bronsted Lowry PRE TEST Respuestas KPSI 28 Categoras 1. No lo se/ no lo comprendo 2. Lo conozco un poco 3. Lo comprendo parcialmente 4. Lo comprendo bien 5. Lo puedo explicar a un compaero Total Definicin de pH PRE TEST Respuestas KPSI 29 Categoras 1. No lo se/ no lo comprendo 2. Lo conozco un poco 3. Lo comprendo parcialmente 4. Lo comprendo bien 5. Lo puedo explicar a un compaero Total Clculo de pH PRE TEST Respuestas KPSI 30 Categoras 1. No lo se/ no lo comprendo 2. Lo conozco un poco 3. Lo comprendo parcialmente 4. Lo comprendo bien 5. Lo puedo explicar a un compaero Total NA 3 5 8 6 9 31 NA 3 5 8 6 9 31 RC 0 0 0 1 1 % 0 0 0 17 11 RI 0 0 3 3 3 % 0 0 38 50 33 PO 3 5 5 2 5 % 100 100 63 33 56 NA 3 4 7 10 7 31 NA 3 4 7 10 7 31 RC 2 4 5 9 5 % 67 100 71 90 71 RI 0 0 1 0 1 % 0 0 14 0 14 PO 1 0 1 1 1 % 33 0 14 10 14 NA 10 5 6 8 2 31 NA 10 5 6 8 2 31 RC 1 0 0 1 1 % 10 0 0 13 50 RI 1 1 1 3 0 % 10 20 17 38 0 PO 8 4 5 4 1 % 80 80 83 50 50

22