9/2/2009

Objetivos
Este convesatorio nos guiar en el anlisis de: 1. qu es AVALO de la efectividad institucional; 2. qu rol juega el AVALO del aprendizaje estudiantil en el proceso de alcanzar efectividad institucional; 3. qu aporta el AVALO del aprendizaje estudiantil a la efectividad institucional de la UPR- Ro Piedras; y 4. qu se espera aporten los Coordinadores de Avalo del aprendizaje estudiantil para que OEAE impacte y facilite la efectividad institucional de la UPR-RP.

9/2/2009

Efectividad Institucional
El desempeo institucional se mide para: - conocer cmo se sita el Recinto de Ro Piedras entre otras instituciones de educacin superior - ayuda a redefinir prioridades - dirige el fortalecimiento de la calidad - promueve la productividad http://opa.uprrp.edu/indicadores.htm Tema 8 : Avalo de la efectividad del proceso educativo (a nivel sistema UPR)

Efectividad Institucional
El desempeo institucional de UPR RP Normas de medicin DIEZ PARA LA DECADA PLEA - VISION 2016 MSCHE STANDARDS OF EXCELLENCE

9/2/2009

Assessment de Efectividad Institucional -proceso sistemtico, articulado y continuo - requiere recopilar, analizar e interpretar datos e informacin obtenidos de mltiples fuentes - el propsito es determinar en qu medida el Recinto est logrando su misin y sus metas

AVALO del Aprendizaje

La Prof. Diana Rivera Viera, Ed.D, ve til la definicin que Angelo (1995) ofrece del AAE:
1. an ongoing process aimed at understanding and improving student learning 2. involves making our expectations explicit and public 3. setting appropriate criteria and high standards for learning quality 4.systematically gathering, analyzing, and interpreting evidence to determine how well performance matches those expectations and standards; 5. using the resulting information to document, explain, and improve performance

9/2/2009

Medicin de ejecucin en relacin a una norma para obtener evidencia de progreso. Valida prcticas efectivas y transforma aquellas no efectivas.

AVALO

El proceso de avalo se entiende como aquello que nos permite recopilar y analizar informacin de mltiples fuentes para evidenciar, evaluar y fortalecer el aprendizaje estudiantil.

El aprendizaje es lo que resulta de los esfuerzos del programa; su producto final.

AVALO
La informacin que genera el avalo da testimonio de la ejecucin de un programa, por lo que debe ser constante y sistemtico. La efectividad de un programa acadmico se valida atravs de la evaluacin del aprendizaje estudiantil.

9/2/2009

AVALO - Contextos
Criterios ms rigurosos Ttulo IV del Higher Education Act Departamento de Educacin Federal. Agencias acreditadoras Peer review Grupos de opinin nfasis y presin en demostrar eficiencia, efectividad y calidad de ofrecimientos acadmicos

investigaciones educativas y organizacionales (TQM)

Contexto - Investigacin
* QU ES APRENDER * CMO APRENDEMOS *PARA QU APRENDEMOS *AVALUAR VS. EVALUAR
Marton, F., y Slj, R. (1979) On qualitative differences in learning - Outcome as a function of the learners conception of the task. British Journal of Educational Psychology. No. 46, pp. 115--127 Ramsden, Paul. (1992) Learning to Teach in Higher Education. Routledge: London Captulo 4, Approaches to Learning. Trigwell, Keith and Prosser, Michael. (1991) Improving the Quality of Student Learning: The Influence of Learning Context and Student Approaches to Learning on Learning Outcomes. Higher Education. Vol. 22, No. 3. Shulman, Lee S. (1999) Taking Learning Seriously. Change, Vol. 31, No. 4. Sadler, D. Royce. (1983) Evaluation and the Improvement of Academic Learning. The Journal of Higher Education. Vol. 54, No. 1, p. 60-61.

9/2/2009

Contexto - Investigacin
Colombia:http://pensamientoycultura.unisabana.edu.co/index.php/eye/article
/viewFile/1707/3805

Argentina Observatorio de Educacin Superior y Polticas Universitaria http://www.unsam.edu.ar/insti/oespu Per - Sistema Avanzado de Rendimiento y Performance Estudiantil Gestin del Conocimiento http://www.unsm.edu.pe Unin Europea
http://www.dicoruna.es/ipe/doce/2005c_14120050610es00070008.pdf

Contexto Agencias Acreditadoras

Este proceso sistemtico y continuo de determinar el logro de los aprendizajes esperados por los estudiantes se acoge cun mtodologa que permite rendir cuentas (accountability).
Middle States Association of Colleges and Schools (MSA). 1990 Framework for Outcomes Assessment 2006 Characteristics of Excellence in Higher Education

9/2/2009

Agencias Acreditadoras
Sesenta y cinco (65) agencias u organizaciones evalan los programas acadmicos y servicios de la UPR National Council for Accreditation of Teacher Education (NCATE). Association of Collegiate Business Schools & Programs (ACBSP) y Association to Advance Collegiate Schools of Business (AACSB) American Chemical Society (ACS), Accreditation Board for Engineering & Technology (ABET). Accrediting Council for Education in Journalism and Mass Communications (ACEJMC) Accreditation Comission for Programs in Hospitality Administration (ACPHA)

9/2/2009

Contextos: gobierno y grupos opinin pblica

2002 No Child Left Behind Act Enmienda the Elementary and Secondary Education Act (ESEA). Impone a instituciones educativas nuevos principios y/o normas de responsabilidad sobre los resultados del aprendizaje estudiantil. Refuerza la idea de auscultar modelos que han probado ser efectivos y que se fundamentan en la investigacin cientfica. Da apertura a exigencias de padres (rendir cuentas) y, expande la toma de decisiones hacia lo local; tolera control y flexibilidad .

1. 2. 3. 4. 5.

Contextos: gobierno y grupos opinin pblica

2002 No Child Left Behind Act Enmienda the Elementary and Secondary Education Act (ESEA). Impone a instituciones educativas nuevos principios y/o normas de responsabilidad sobre los resultados del aprendizaje estudiantil. Refuerza la idea de auscultar modelos que han probado ser efectivos y que se fundamentan en la investigacin cientfica. Da apertura a exigencias de padres (rendir cuentas) y, expande la toma de decisiones hacia lo local; tolera control y flexibilidad .

1. 2. 3. 4. 5.

9/2/2009

Contextos: gobierno y grupos opinin pblica

Middle States Commission of Higher Education (2002) Consejo de Educacin Superior Agencias Acreditadoras: Iniciativa emblemtica de acreditacin profesional de la UPR
Cuanto ms se acerque el producto del aprendizaje a la expectativa inicial del programa (VISION-MISION-METASOBJETIVOS-PERFIL) y cuanto ms las actividades del mismo contribuyan a alcanzarla (ACCIONES CRUCIALMENTE IMPORTANTES) ms cerca se encontrar el programa de lograr su misin y ms eficazmente contribuir a alcanzar la institucional (EFECTIVIDAD INSTITUCIONAL).

NORMA Visin-Misin-Metas-Objetivos
PERFIL del Programa PERFIL del Egresado

Todo proceso de avalo genera informacin para alcanzar congruencias en la planificacin estratgica de programas acadmicos.
DOMINIOS ASPECTOS QUE DEMUESTRAN APRENDIZAJE Comunicacin efectiva Investigacin y creacin Pensamiento crtico Responsabilidad social

9/2/2009

Avalo en UPR-RP
Plan de Avalo del Aprendizaje outcomes at all levels. Allocate funds Estudiantil : for staff training on institutional research and assessment issues 1.Certificacin No. 67, 1989-90 Misin (such as testing methodologies, del Recinto de Ro Piedras , aprobado por el Senado Acadmico statistical analysis and others). el 15 de marzo de 1990. 2. Certificacin No. 93-113 Consejo de 4. Middle States Commission on Higher Education, Framework for Outcomes Educacin Superior de Puerto Rico Assessment (Pennsylvania, USA: 3. Evaluation team - Commission on Higher Education of the MSA (Feb. 26- 1996). March 1, 1995) institutional planning 5. Plan Estratgico del Recinto 1997(section XI), should include to 2006 establish infrastructure and 6. 1999 - Certificacin No. 46 Acciones mechanisms for evaluating and Estratgicas del Plan Estratgico del assessing progress of the University. Senado Assign the office the responsibility of 7. Plan de Avalo del Aprendizaje assisting colleges to assess student Estudiantil Marzo 2006

10

9/2/2009

Herramientas y documentos de trabajo

Principios Operacionales Perfil de programa y Perfil del egresado Perfil del estudiante nuevo ingreso Indicadores de efectividad institucional

11

9/2/2009

Alinear Avalos
Perfil del estudiante como norma que delimita efectividad: -Establecer un logro esperado (Ej. Un 70% de ejecutoria) -Recogido de datos y anlisis de los hallazgos como proceso de aprendizaje -Comparacin de los hallazgos con el logro esperado - Acciones transformadoras como instancias de cambio institucional

Oficina de Planificacin Acadmica

La Oficina de Planificacin Acadmica (OPA) mantiene una agenda de investigacin institucional. Utiliza mtodos objetivos de bsqueda, recopilacin y anlisis de datos para rescatar y producir documentacin que le permita a la gerencia universitaria tomar decisiones informadas y desarrollar polticas institucionales atadas a su ejecucin.

12

9/2/2009

Oficina de Planificacin Acadmica

Desarrolla investigaciones propias del componente estudiantil e incursiona en temas como: -informe de bajas parciales y totales -tendencias de matrcula -demanda por programacin nocturna -anlisis de currculos de programas y catlogos de cursos -inventario de actividades de "assessment -indicadores de desempeo institucional

Indicadores
Un indicador de ejecucin es una estadstica relevante a una poltica, un nmero o una descripcin cualitativa que seala que la universidad, algn aspecto de sta, o el sistema universitario est funcionando como se esperaba.

13

9/2/2009

Avalo del Aprendizaje como Indicador de Efectividad Institucional

En carta del 21 de junio de 2004 a los decanos de las facultades, la Rectora del Recinto de Ro Piedras, Dra. Gladys Escalona de Motta indica que: Es nuestro inters, y el Plan del Presidente, Lcdo. Antonio Garca Padilla, que los datos recopilados para toda la institucin sean discutidos y comparados con los datos especficos de cada programa o departamento.

Avalo del Aprendizaje como Indicador de Efectividad Institucional

Retroalimentacin y cambio como instancias de conocimiento sobre quines somos, qu hacemos y hacia dnde vamos. Coordinadores como interlocutores

14

9/2/2009

Discusin
1. Qu desafos enfrenta el AVALO del aprendizaje estudiatil como indicador de efectividad institucional en la UPR-Ro Piedras ? 2. Qu rol juega el coordinador de AVALO del aprendizaje estudiantil en el logro de la efectividad institucional? 3. Cmo aportan las acciones transformadoras producto del AVALO del aprendizaje al logro de la efectividad institucional de la UPR- Ro Piedras?

Referencias
Anderson, L. W. (2003). Classroom assessment: Enhancing the quality of teacher decision- making. Mahwah, NJ: Lawrence Erlbaum. Anderson, S. B., Ball, S., Murphy, R. T. & Associates (1975). Encyclopedia of Educational Evaluation. San Francisco, CA: Jossey-Bass. Anderson, L. W. (2003). Classroom assessment: Enhancing the quality of teacher decision- making. Mahwah, NJ: Lawrence Erlbaum. Angelo, T. A. & Cross, P. K. (1993). Classroom assessment techniques: A handbook for college teachers. San Francisco, CA: Jossey-Bass. Association of American Collage. (1985). Integrity in the college curriculum. Washington, D.C.: Association of American Collage. Astin, A. W. (1993). Assessment for Excellence: The philosophy and practice ofassessment and evaluation in higher education. New York: American Council on Education & Oryx Press Banta, T. W., Lund, J. P., Black K. E. & Oblander, F. W. (1996). Assessment in practice. San Francisco, CA: Jossey-Bass Publishers. Banta, T. W. & Associates (1993). Making a difference: Outcomes of a decade of assessment in higher education. San Francisco, CA: Jossey-Bass Publishers. Brown, S. & Glasner, A. (1999). Assessment matters in higher education: Choosing and using diverse approaches. Philadelphia: The society for research into higher education & Open University Press. Erwin, T. D. (1991). Assessing student learning and development. San Francisco: Jossey- Bass Ewell, P. T. (1985). Assessing educational outcomes. New Directions for Institutional Research, No. 47. San Francisco: Jossey-Bass Ewell, P. T., Hutchings, P. & Marchese, T. (1991). Reprints of two papers onassessment history and implementation. Washington, DC: American Association for Higher Education. Ewell, P. T. (1983). Student-Outcomes questionnaires: An implementation handbook. Colorado: National Center for Higher Education Management Systems. Gray, P. J. (1989). Achieving assessment goals using evaluation techniques. New Directions for Teaching and Learning, No.67. San Francisco: Jossey-Bass Halpern, D. F. (1987). Student outcomes assessment: What Institutions Stand to Gain. San Francisco, CA: Jossey-Bass Publishers. Joint Committee on Standards for Educational Evaluation (2003). The student evaluation standards: How to improve evaluations of students. Thousand Oaks, CA: Corwin Press. Maki, P. (January 15, 2002). Using multiple assessment methods to explore student learning and development inside and outside of the classroom. Net Results, April 25, 2003. (Recuperado de www.naspa.org/NetResults/article.cfm?ID=558 en 4/25/2003). McMillan, J. H. (1988). (Editor). Assessing students learning. New Directions for Teaching and Learning, No.34. San Francisco: Jossey-Bass. Medina-Daz, M. & Verdejo-Carrin, A.L. (2000). Evaluacin del aprendizaje estudiantil. San Juan, PR: Isla Negra Editores. Messick, S. J. (1999). Assessment in higher education: Issues of Access, Quality, Student Development and Public Policy. New Jersey: Lawrence Erlbaum. Middle States Commision on Higher Education (2003). Student learning assessment: Options and resourses. Philadelphia: MSCHE Middle States Commision on Higher Education (2002). Characteristics of excellence in higher education: Eligibility requirements and standards for accreditation. Philadelphia: MSCHE Palomba, C. A. & Banta, T. W. (1999). Assessment essentials: Planning, implementing and improving assessment in higher education. San Francisco: Jossey-Bass. Walvoord, B. E. (2004). Evaluation clear and simple: A practical guide for institutions, departments and general education. San Francisco, CA: Jossey-Bass.

15