Comprendiendo las rbricas*

Understanding rubrics**

Heidi Andrade*** Traduccin: Ana Atorresi

La evaluacin autentica suele utilizar rbricas1 para describir los logros del estudiante. He aqu claridad sobre el trmino. Cada vez que presento rbricas a grupos de docentes la reaccin inmediata muestra siempre el mismo atractivo (S, esto es lo que necesito!) seguida de cerca por el pnico (Dios mo, cmo pueden esperar que desarrolle una rbrica para cada cosa?). Cuando se aprende acerca de qu rbricas hacer -y por qu- estas se pueden crear y usar para apoyar y evaluar el aprendizaje del estudiante sin perder la cordura.

* Publicado originalmente en Goodrich Andrade, H. (1997). Understanding Rubrics, Educational Leadership, 54(4). ** HAndrade@uamail.albany.edu University of Albany. Grupo de Investigacin en Evaluacin Universidad Nacional de Colombia 1 En espaol, las rbricas suelen recibir el nombre de matrices de valoracin (N. del T.). Mantendremos sin embargo rbricas.

Enunciacin Vol 15, Nm. 1 enero junio de 2010 Bogot, Colombia/ ISSN 0122-6339151/ pp. 157-163

Artculo de investigacin

Qu es una rbrica?
Una rbrica es una herramienta de puntuacin que enumera los criterios que deben tenerse en cuenta para la elaboracin de un trabajo escrito, o lo que cuenta (por ejemplo, propsito, organizacin, detalles, voz y mecnica, que es lo que en general se tiene en cuenta en un trabajo escrito); adems articula las gradaciones de calidad para cada uno de estos criterios, desde sobresaliente hasta deficiente. Este trmino desafa la definicin que se encuentra en un diccionario, pero parece ya haberse aceptado, as que contino usndolo. El ejemplo de la Figura 1 (adaptado de Perkins et al, 1994) enumera los criterios y los niveles de la calidad de informes verbales, escritos o grficos en creaciones de los estudiantes; por ejemplo, invenciones diseadas para facilitar el viaje a Occidente de los pioneros del Siglo IX o para resolver un problema ambiental local o para representar una cultura y uso de habitantes imaginarios o cualquier otra cosa que hayan podido inventar los estudiantes. Esta rbrica lista los criterios en la columna de la izquierda: el informe debe explicar 1) los propsitos de la invencin, 2) las caractersticas o partes de la invencin y cmo ayudan a lograr el propsito, 3) las ventajas y desventajas del diseo y 4) cmo el diseo se conecta a otras cosas pasadas, presentes y futuras. La rbrica puede fcilmente incluir criterios relacionados con el estilo y la efectividad de la presentacin, el proceso del trabajo escrito y la calidad de la invencin en s. Las cuatro columnas ubicadas a la derecha de los criterios describen los diferentes niveles de calidad, desde sobresaliente hasta deficiente. De manera muy concisa, estas columnas describen qu hace que el trabajo bueno sea bueno y qu hace que el malo sea malo.

Criterios

Figura 1 Rbrica para un informe de invencin Calidad

El informe describe los propsitos clave de la invencin y tambin puntualiza los menos obvios. El informe describe todos los propsitos clave de la invencin. El informe describe algunos de los propsitos de la invencin dejando por fuera algunos propsitos clave. El informe deja de lado algunas caractersticas de la invencin o su propsito. El informe no hace referencia a los propsitos de la invencin.

Propsitos

Caractersticas

El informe detalla tanto las caractersticas clave de la invencin como las ocultas y expresa sus diferentes propsitos.

El informe detalla las caractersticas clave de la invencin y expresa sus propsitos.

El informe no detalla ni las caractersticas de la invencin ni sus propsitos.

Enunciacin Vol 15, Nm. 1 enero junio de 2010 Bogot, Colombia/ ISSN 0122-6339151/ pp. 157-163

Comprendiendo las rbricas

Crtica

El informe presenta las fortalezas y debilidades de la invencin y sugiere las formas de mejorarla. En el informe se establecen conexiones apropiadas entre los propsitos y las caractersticas de la invencin y diferentes clases de fenmenos.

El informe presenta las fortalezas y debilidades de la invencin.

El informe presenta las fortalezas o las debilidades de la invencin pero no ambas. En el informe se establecen conexiones inapropiadas o poco claras entre la invencin y otros fenmenos.

El informe menciona ni fortalezas ni debilidades la invencin.

no las las de

Conexiones

En el informe se hacen conexiones apropiadas entre los propsitos y las caractersticas de la invencin y uno o dos fenmenos.

El informe no establece conexiones entre la invencin y otros elementos.

Por qu utilizar rbricas?

Las rbricas son atractivas para los estudiantes y los docentes por muchas razones. En primer lugar, son herramientas poderosas tanto para la enseanza como para la valoracin. Las rbricas pueden mejorar el desempeo del estudiante, as como monitorearlo, haciendo que las expectativas de los docentes sean claras y mostrando a los estudiantes cmo pueden alcanzarlas. El resultado por lo general muestra mejoras en la calidad del trabajo del estudiante y su aprendizaje. Por consiguiente, el argumento ms comn para usar rbricas es que permiten definir la calidad. A una estudiante no le gustaban las rbricas precisamente por este motivo: Si hago algo mal, el profesor me puede demostrar que yo saba lo que deba hacer (Marcus 1995). Una segunda razn para utilizar rbricas es que ayudan a los estudiantes a ser jueces ms reflexivos sobre la calidad de su propio trabajo, as como sobre el trabajo de otros. Cuando se utilizan rbricas como gua de la auto-evaluacin o la evaluacin entre pares, los estudiantes se vuelven cada vez ms capaces de detectar y resolver problemas tanto en sus trabajos como con los de sus compaeros. Las prcticas de evaluacin continua entre compaeros, y especialmente la auto-evaluacin, aumentan en los estudi-

antes su sentido de responsabilidad por el propio trabajo y hacen que disminuya el nmero de preguntas como Esto ya est terminado?. En tercer trmino, las rbricas permiten reducir el tiempo que los maestros pasan evaluando el trabajo de los estudiantes. Los docentes suelen ver que, cuando el trabajo ha sido ya evaluado por los compaeros y por el estudiante mismo, es poco lo que les queda por decir. Cuando deben decir algo, simplemente pueden trazar un crculo alrededor del indicador correspondiente en la rbrica en lugar de tener que explicar la falla o la fortaleza que han encontrado y sugerir diferentes formas de mejorar. Las rbricas ofrecen al estudiante una retroalimentacin ms informativa acerca de sus fortalezas y de los aspectos que necesitan mejorar. En cuarto lugar, los docentes valoran las rbricas porque su naturaleza de acorden les permite adecuarlas a clases heterogneas. Los ejemplos expuestos aqu tienen tres o cuatro niveles de calidad, pero no hay razn para que el acorden no pueda ser extendido para reflejar el trabajo de los nios ms talentosos y de aquellos con problemas de aprendizaje. Finalmente, las rbricas son fciles de utilizar y de explicar. Christine May, una maestra de cuarto grado comenta cmo tanto estudiantes como padres respondieron al uso de las rbricas:

Enunciacin Vol 15, Nm. 1 enero junio de 2010 Bogot, Colombia/ ISSN 0122-6339151/ pp. 157-163

Artculo de investigacin

Los estudiantes pudieron articular lo aprendido y, hacia fin de ao, podan ser precisos en sus evaluaciones. Los padres estaban muy emocionados con el uso de las rbricas. Durante las reuniones con los padres, utilic ejemplos de rbricas para explicarles su propsito y su utilizacin en el aula. La reaccin de los padres fue muy alentadora. Saban exactamente lo que sus hijos necesitaban hacer para alcanzar el xito.

6. Revisar: siempre se les debe ofrecer a los estudiantes el tiempo necesario para revisar su trabajo basndose en la retroalimentacin que han recibido en el paso 5 7. Utilizar la evaluacin del maestro: utilizar la misma rbrica que usaron los estudiantes para evaluar usted mismo el trabajo de ellos. El paso 1 puede ser necesario solo cuando se les pide a los estudiantes que participen en una tarea con la que estn poco familiarizados. Los pasos 3 y 4 son tiles, pero demandan tiempo; los puede desarrollar usted mismo, especialmente cuando ya se han estado utilizando rbricas. Una clase o un grupo con experiencia en la evaluacin basada en rbricas puede dinamizar el proceso comenzando con la lista de criterios; despus el maestro describe los niveles de calidad, los verifica con los estudiantes, hace revisiones y luego utiliza la rbrica para la auto-evaluacin, la evaluacin entre pares y la suya propia. Ann Tanona, una maestra de segundo grado, atraves el proceso de siete pasos con sus estudiantes. El resultado fue una rbrica para evaluar comentarios sobre libros2 al estilo Reading Rainbow grabadas en video (Figura 2).

Cmo crear rbricas?

Las rbricas son cada vez ms aceptadas por los educadores que avanzan hacia evaluaciones ms autnticas y basadas en rendimientos. Publicaciones recientes contienen algunas rbricas (Brewer, 1996; Marzano et al, 1993). Sin embargo, es muy probable que usted tenga que desarrollar rbricas propias, segn su propio currculo y su estilo de enseanza. Para incrementar la potencia de las rbricas en el aprendizaje, su proceso debe involucrar a los estudiantes en los siguientes pasos: 1. Mirar modelos: mostrar a los estudiantes ejemplos de trabajos buenos y no tan buenos. Identificar qu caractersticas hacen que los buenos sean buenos y los malos sean malos. 2. Hacer una lista de criterios: utilizar la discusin de los modelos para comenzar una lista de lo que cuenta en un trabajo de calidad. 3. Articular los grados de calidad: describir el mejor y el peor nivel de calidad y luego llenar los niveles intermedios sobre la base de su conocimiento de los problemas comunes y de la discusin de los trabajos no muy buenos. 4. Practicar sobre modelos: hacer que los estudiantes utilicen rbricas para evaluar los modelos que se presentaron en el paso 1. 5. Utilizar la auto-regulacin y la co-evaluacin: asignar la tarea a los estudiantes. Mientras ellos trabajan, detenerlos ocasionalmente para que se auto-evalen y evalen a sus pares.

2 Book talks en el original. Se trata de un comentario oral que por lo general tiene lugar en el mbito escolar y que se propone a los estudiantes para estimular la lectura, la escritura y las habilidades discursivas propias de la escucha y el habla.

Enunciacin Vol 15, Nm. 1 enero junio de 2010 Bogot, Colombia/ ISSN 0122-6339151/ pp. 157-163

Comprendiendo las rbricas

Criterios

Figura 2 Rbrica para comentar un libro Calidad

Comienzo aburrido. No hubo comienzo.

Me he ganado la Comienzo creativo. atencin del auditorio?

Inform qu clase Se mencion exactamente La descripcin no fue clara ni No se hizo mencin. de libro era? de qu tipo de libro se tra- segura taba Habl sobre el per- Se incluy informacin Se mencion superficialmente. No se dijo nada sobre sonaje principal? acerca de sus caracterstiel personaje principal. cas Mencion el esce- Se habl sobre cundo y No hubo claridad ni seguridad No se mencion el esnario? dnde sucede la historia. al respecto. cenario. Hice referencia a Se mencion algo intere- Se coment parcialmente una Se olvid mencionar alguna parte intere- sante Me encantara com- situacin y se salt a otro tema este punto. prar el libro! sante? Coment a quin S, fue mencionado. le podra interesar este libro? Se mencion brevemente. No se mencion.

Cmo era mi apari- Bien peinado, bien vestido, Dejada, perezosa. encia personal? sonriente, mirando al pblico, con expresin feliz. Cmo fue mi ex- Clara, fuerte, alegre presin verbal? No se dio expresin a la voz.

Pareca recin levantada, con la cabeza gacha. Difcil de entender (tono muy bajo o estridente).

Sugerencias para el diseo de rbricas

La rbrica de evaluacin de Ann es poderosa ya que expresa las caractersticas de un buen comentario sobre libros en las palabras propias de los estudiantes. Tambin muestra algunas de las dificultades que se presentan al disear una buena rbrica. Probablemente el desafo ms grande es evitar el uso de un lenguaje poco claro, como comienzo creativo. Si una rbrica ha de servir tanto para ensear como para evaluar trminos como estos deben definirse para los estudiantes. Ciertamente, la palabra creativo

es difcil de definir. Ann manej este problema comentando lo que el trmino comienzo creativo significaba en referencia con los comentarios de libros. Patricia Crosby y Pamela Heinz, ambas maestras de sptimo grado, resolvieron el mismo problema en una rbrica para presentaciones orales enumerando las diversas formas en que los estudiantes podan alcanzar los criterios (Figura 3). Este enfoque ofrece informacin muy valiosa para los estudiantes al mostrarles cmo pueden comenzar a hablar y, al mismo tiempo, evitando la definicin de trminos tan abstractos como creativo.

Enunciacin Vol 15, Nm. 1 enero junio de 2010 Bogot, Colombia/ ISSN 0122-6339151/ pp. 157-163

Artculo de investigacin

Figura 3 Rbrica para una presentacin oral Calidad

Plantea dos frases introduc- No se intenta ganar la torias y luego contina con la atencin de la audiencia; charla. comienza la charla directamente. Presenta una frase introductoria y luego comienza a hablar.

Criterio

Se ofrecen detalles, una ancdota divertida, una serie de preguntas, una demostracin corta, ayuCautiva la atencin das visuales con colorido del auditorio o una razn personal por la cual se escogi el tema.

Un segundo desafo para el diseo de rbricas es evitar el innecesario lenguaje negativo. El fragmento de la rbrica que se muestra en la Figura 3 evita utilizar palabras como aburrido al describir el comienzo de una presentacin no muy buena, comparndola implcitamente con lo que se hizo durante otra de mejor calidad. As, los estudiantes saben exactamente qu hicieron mal y cmo lo pueden mejorar la prxima vez y no simplemente que la introduccin de su charla fue aburrida. La articulacin de los niveles de calidad es muchas veces un desafo. Dedicar tiempo a pensar los criterios y a cmo subdividirlos antes de definir los grados de

calidad puede servir de ayuda. Tambin es posible ensayar una inteligente tcnica que aprend de una maestra de quinto grado en Gloucester, Massachussets. Ella describe los niveles de calidad de la siguiente manera: S; S, pero; No, pero y No. Por ejemplo, la Figura 4 muestra un fragmento de una rbrica para evaluar un lbum que documenta una historia. Esta propuesta tiende a funcionar bien, siempre y cuando usted no sea extremadamente rgido frente a ella. La rigidez puede dar resultados divertidos: un estudiante hizo un escrito dentro del nivel de calidad ms bajo respecto al criterio: Est el escrito libre de anacronismos? l respondi: No, no me acord de usar anacronismos!

Figura 4 Rbrica de Evaluacin de un lbum

Criterio
Present su- Si, ofrec suficientes detficientes de- alles para darle al lector talles un sentido de tiempo, lugar y eventos.

Calidad
Si, ofrec algunos det- No, no inclu sufici- No, no inclu casi alles, pero me faltaron entes detalles, pero ningn detalle. algunos elementos s algunos. clave.

Enunciacin Vol 15, Nm. 1 enero junio de 2010 Bogot, Colombia/ ISSN 0122-6339151/ pp. 157-163

Comprendiendo las rbricas

Qu hacer una vez creadas las rbricas

La creacin de las rbricas es la parte ms difcil; utilizarlas es relativamente fcil. Una vez creadas las rbricas debe entregarles copias a los estudiantes y solicitarles que valoren su propio progreso en una tarea o proyecto. Las valoraciones no deben conducir a una calificacin. El objetivo de la rbrica es ayudar a los estudiantes a aprender ms y a producir mejores productos finales, por lo que incluir auto-calificaciones es innecesario y puede comprometer la honestidad de los estudiantes. Proporcione siempre a los estudiantes tiempo para revisar su trabajo una vez realizada la auto-valoracin, y luego permtales valorar el trabajo de los dems. Es difcil acostumbrarse a la valoracin entre pares. Debe enfatizarse el hecho que la valoracin entre compaeros, al igual que la auto-valoracin, tiene como objetivo ayudar a todos a lograr un mejor trabajo. Para que los estudiantes se responsabilicen por la valoracin que hacen del trabajo de sus compaeros tambin puede ser necesario que escriban su nombre en la rbrica utilizada. De esta manera el maestro puede ver qu tan justa y precisa ha sido la retroalimentacin del estudiante y puede solicitarle que muestre evidencias que apoyen sus opiniones cuando sus valoraciones no coincidan con las suyas. Una vez ms, es crucial dar tiempo a la revisin despus de la evaluacin entre pares. Los padres pueden utilizar las rbricas para ayudar a sus hijos en sus tareas. Finalmente, cuando valore el trabajo de los estudiantes, utilice la misma rbrica que se utiliz para la valoracin entre compaeros y la auto-valoracin. Cuando les devuelva la rbrica a los estudiantes con anotaciones, ellos sabrn qu hicieron bien y en qu tendrn que trabajar en el futuro. La calificacin (si debe darla) es tambin relativamente fcil cuando se utilizan rbricas. Un trabajo que refleje el nivel ms alto de calidad para cada uno de los criterios merece una A3, mientras que el que constantemente cae en el nivel ms bajo una D o F, y as
3 Recurdese que el sistema de calificaciones en los Estados Unidos es por letras y que A corresponde a la calificacin ms alta (N. del T.).
Enunciacin Vol 15, Nm. 1 enero junio de 2010 Bogot, Colombia/ ISSN 0122-6339151/ pp. 157-163

sucesivamente. Debido a que un trabajo rara vez se encuentra en su totalidad en un mismo nivel de calidad, muchos maestros promedian, formal o informalmente, dichos niveles. Las rbricas tambin pueden incluirse en portafolios. Sin embargo, si usted los utiliza la idea es apoyar y evaluar el aprendizaje del estudiante. Los estudiantes, as como los docentes, deberan atender al uso de las rbricas pensando: S, esto es lo que necesito!.

Referencias
Brewer, R. (1996) Exemplars: A Teachers Solution. Underhill, VT: Exemplars. Marcus, J. (1995) Data on the Impact of Alternative Assessment on Students. Manuscrito no publicado. The Education Cooperative, Wellesley, MA. Marzano, R., D. Pickering, and J. McTighe. (1993) Assessing Student Outcomes: Performance Assessment Using the Dimensions of Learning Model. Alexandria, VA: ASCD. Perkins, D., H. Goodrich, S. Tishman, and J. Mirman Owen. (1994) Thinking Conectarions: Learning to Think and Thinking to Learn. Reading, MA: AddisonWesley.