Evaluacin de Indicadores de Calidad para la Educacin a Distancia

Lautaro Guerra Genskowsky, Juan Francisco Brunet Ziga

lautaro.guerra@usm.cl; juan.brunet@mindfree.cl

Resumen
El estudio de distintos modelos que han servido para evaluar la calidad de los
programas de educacin a distancia, permite seleccionar aquel que cumple con una
evaluacin de la institucin completa y tiene exibilidad para medir el proceso de
enseanza en las reas relevantes.
Se aplica la evaluacin a la Empresa MindFree Ingeniera a cargo de los
servicios informticos y de apoyo a la educacin a distancia para el Departamento
de Mecnica de la Universidad Tcnica Federico Santa Mara para as determinar la
validez del modelo.
Palabras Claves: Educacin a Distancia, E-Learning, Calidad, Informtica
Educativa.

Abstract
The study of the various models that have served to assess the quality of
distance education programs, allows the selection of one that meets a
comprehensive assessment of the institution and has the exibility to measure the
teaching process.
In order to determine the validity of the model in the IT service area, the model
is applied to the Enterprise MindFree Ingeniera, in charge of IT services and
support distance education for the Departmento de Ingeniera Mecnica at the
Universidad Tcnica Federico Santa Mara.
Keywords: Distance education, E-Learning, Quality assesment, Educational IT.

Introduccin
La educacin a distancia ha crecido los ltimos aos con la incorporacin de
tecnologas que permiten trasladar la experiencia de la enseanza a medios no
tradicionales. Las universidades han incorporado este formato como complemento a
la enseanza presencial y en programas totalmente a distancia. Para evaluar la
calidad de estos programas y procesos de enseanza es imperioso contar con un
modelo con indicadores y una estructura acorde a la actividad educacional. Existen
estudios asociados a medir y determinar esta calidad en los cursos a distancia, o de
la incorporacin de la tecnologa en el proceso educativo. A partir de distintas
dimensiones postuladas, en este artculo se proponen objetivos coherentes con
estos estudios y los indicadores que servirn para determinar su calidad.
Se usa la clasificacin de Belanger y Jordan[BJ00] que aborda los distintos modelos
de la docencia , evaluacin diagnstica y evaluacin de los aprendizajes del curso.

Evaluacin de la Accin Formativa

Modelo Sistmico de Van Slyke et al. [VSea98]. Evala: Caractersticas
institucionales, caractersticas de los discentes, caractersticas del curso y las
caractersticas de la formacin a distancia.
Modelo de los cinco niveles de evaluacin de Marshall and Shriver[McA99].
Se centra en cinco niveles de accin orientados a asegurar el conocimiento y
competencias del estudiante virtual. "El modelo combina diferentes elementos del
acto educativo, pero pone un especial nfasis en el docente, como agente
dinamizador de la formacin en entornos virtuales. En el entorno virtual el docente
se ha de situar en un nuevo espacio formativo como gua y acompaante del
protagonista del aprendizaje, el participante, siendo la interaccin la base para el
desarrollo formativo [Dua1a]. Aunque los estndares sobre los niveles de actuacin
del profesorado son distintos en la formacin on-line, muchos de los parmetros
considerados en los modelos de evaluacin del docente presencial [Mat0b] pueden
ser los mismos." [Rub03]
Modelo de los cuatro niveles de Kirkpatrick [Kir99]. El ms usado en la
evaluacin de capacitaciones. Se ha modificado para alinearlo con las necesidades
de la educacin tanto semi-presencial como totalmente a distancia ([Ros01],
[BJ00]). Define un plan de evaluacin de cuatro reas: Reaccin, Aprendizaje,
Transferencia e Impacto

Figura 1: Los 4 niveles de Kirkpatrick y el nivel de Retorno de la Inversin

en la Evaluacin de programas de Capacitacin [Kir99]

No cuenta con herramientas para llevar a cabo la evaluacin puesto que no fija
mtricas ni indicadores.
Modelo de Fidalgo. [Fid07] presenta una mini-gua desarrollada por el Laboratorio
de Innovacin en Tecnologas de la Informacin de la Universidad Politcnica de
Madrid registra indicadores para asegurar la calidad de la imparticin de los cursos
a distancia basados en los distintos tipos de modalidades a seguir para comunicar
contenidos: Contenidos de Aprendizaje, organizacin de contenidos,
Retroalimentacin del alumnado, accin tutorial y otros indicadores.

Evaluacin de los materiales.

Los materiales se convierten en una variable importantsima en el contexto de la
educacin a distancia para la comunicacin de contenidos. Richard E. Mayer
desarroll principios para dirigir el diseo de multimedia. En [May01, MM97],
entrega pautas y postula la teora cognitiva del aprendizaje multimedia. Se basa en
el Principio de la Representacin Mltiple, el cual indica que es mejor presentar
una explicacin en palabras e imgenes que solo en palabras y el Principio de la
Continuidad que dice los alumnos aprenden mejor cuando las explicaciones se
presentan junto a imgenes y textos que cuando se presentan por separado.

Evaluacin de las plataformas.

Una iniciativa para evaluar plataformas para impartir e-learning, es el proyecto
JOIN del "Grupo de Inters Especial en Software Libre en la Educacin en Europa
(SIGOSSEE)"[SIG05], establece un listado con varias decenas de productos LMS de
software libre (SL), peridicamente actualizada con la pretensin de ser un catlogo
de todas las plataformas disponibles de software libre.
La metodologa de evaluacin desarrollada por el equipo de JOIN e inspirada en
un estudio de Peter Baumgartner [Bau02] y en la recomendacin ISO/IEC 9126,
establece la comprobacin inicial de que el sistema examinado responde a una
'Definicin funcional mnima de LMS'.
Estudios como Commonwealth of Learning: LMS open source [COL03] muestran
que muchos de los sistemas clasificados como 'Sistema de Gestin de la Tele-
enseanza' (LMS) son muy pobres en trminos de funcionalidad. Los criterios de la
metodologa son: Requisitos funcionales, Mantenibilidad, Facilidad de uso, Calidad
del soporte y Coste Total.

Evaluacin financiera.
El Instituto ROI relaciona los cuatro niveles de Kirkpatrick con un quinto nivel
utilizado para evaluar financieramente los indicadores definidos para los niveles
especficos.

Enfoque Global. Evaluacin y gestin de la calidad

En la educacin superior, calidad es un constructo relativo a la perspectivas e
interpretaciones nicas de los diferentes grupos de stakeholders (estudiantes,
alumnos, profesores, facultades, administrativos, padres, consultores, empleados,
asociaciones acreditadas y pblico en general) [Cle01]. A nivel nacional (Chile)
existe la iniciativa del Servicio Nacional de Capacitacin y Empleo [SEN07], quien
ha elaborado una gua para acreditar localmente con una norma similar a la ISO,
pero asociada a las instituciones que deben impartir capacitaciones. La Norma
Chilena NCh2728 obliga a las instituciones a certificarse con una norma menos
exigente que la ISO9001:2005, el nivel de calidad mnimo para impartir programas
de capacitacin se asegura mediante: Personas competentes, infraestructura
adecuada y ambiente de trabajo
La NCH2728 se apoya en otras normas para su certificacin. En la ISO9000:2000
con el concepto de vocabulario tcnico necesario para hablar de calidad, en la
ISO10013 para el desarrollo de la documentacin (procedimiento, manual,
instrucciones de trabajo) y la ISO19011 para configurar el sistema de auditoras
internas.
A travs del Quality Project Team, el Comit Europeo de Normalizacin est
promoviendo junto a ISO una norma especfica para el mbito de la formacin, la
ISO/IEC 19796-1. El estndar se entiende como un marco de trabajo para
comparar, describir, analizar e implementar la gestin de la calidad y un
acercamiento al aseguramiento de la calidad. (Reference Framework for the
Description of Quality Approaches, RFDQ)[ISO05]. Establece nueve criterios para
identificar buenas prcticas.
De acuerdo a estos lineamientos establecidos, una buena prctica debera:
[Lat06] Provenir de proyectos efectivamente realizados, de aquellas organizaciones
que efectivamente estn implementando criterios de calidad en situaciones
concretas, Demostrar mejoras, resultados y efectividad comprobables y Fomentar
la mejora continua, entre otros aspectos.

Modelo de Fundacin Europea para la Gestin de Calidad [EFQ99]. El modelo

auspiciado por la Fundacin Europea para la Gestin de la Calidad y por la Comisin
de la Unin Europea, tiene como objetivo ayudar a las organizaciones a mejorar su
gestin en base a la auto-evaluacin y al auto-conocimiento de sus procesos
internos. Los criterios son los Agentes y los Resultados. Los Resultados es lo que la
organizacin consigue para cada uno de los actores involucrados (clientes, sociedad
y personal) y los Agentes son aspectos del sistema de gestin que sirven para
conseguir esos resultados.
 Figura 2: Los 9 criterios del Modelo EFQM

Para cada grupo se propone un conjunto de reglas para su evaluacin basadas en la

llamada lgica REDER (Resultados, Enfoque, Despliegue, Evaluacin y Revisin).
Para el grupo Agentes, se busca que se integren con otros aspectos de la gestin,
revisiones peridicas acerca de su efectividad para aprender y mejorar, adems de
estar desplegados en la operacin de la organizacin.

Otros Estudios. Se muestra una seleccin de iniciativas internacionales para la

evaluacin de la educacin a distancia en base a buenas prcticas, propuesta de
estndares y modelos de evaluacin elaborados por instituciones de gran
importancia en el rea de certificacin y evaluacin [OCS06]
Memoria del Proyecto "Centro Virtual para el desarrollo de estndares de
calidad para la Educacin Superior a distancia en Amrica Latina y el Caribe"
Memoria de estndares de calidad, realizada en el ao 2001 y coordinada
por la Asociacin Iberoamericana de Educacin Superior a Distancia
(AIESAD), el Consorcio Red de Educacin a Distancia (CREAD) y la
Universidad Tcnica Particular de Loja (Ecuador). [Cen05]
"Distance Education: guidelines for good practice". Gua de buenas prcticas
elaborada en el ao 2000 por la American Federation of Teachers.
"Best Practices for Electronically Offered Degree and Certificate Programs".
Gua de buenas prcticas publicada en el ao 2001 como resultado de los
trabajos de The Council of Regional Accrediting Commissions y The Western
Cooperative for Educational Telecommunications (WCET). [WCE05]
"Criteria for evaluating the quality of online courses". Criterios de evaluacin
de calidad de los cursos online, diseados por Clayton R. Wright, Grant Mc
Ewan College (Canad). Un conjunto de profesionales del Grant Mc Ewan
College han desarrollado criterios para el desarrollo de los cursos en
lnea.[Wri05]
"ODL QC Standards". Estndares acordados por el "Open and Distance
Learning Quality Council Standards" (ODL QC) de Reino Unido y
considerados como necesarios para asegurar una buena calidad en cualquier
aprendizaje a distancia, se adoptaron en 1999, se revisaron en 2000 y 2005,
entraron en vigor el 1 de abril de 2006.
"ADEC Guiding principles for Distance Learning". Gua de buenas prcticas
elaborada en el ao 2003 por la Asociacin de Universidades Americanas de
Educacin a Distancia (The American Distance Education
Consortium).[ADE03]
"Code of practice. Information technologies e-learning" Documento
normativo construido por FFFOD (el forum francs para ODL) en cooperacin
con AFNOR (el cuerpo de estandarizacin francs), para ayudar a los
proveedores de e-Learning a aplicar buenas prcticas en el diseo, la
produccin, la realizacin y las fases de evaluacin de sus prestaciones,
 segn un enfoque de calidad orientado al cliente y a los propios procesos de
calidad.[FFF04]

Formato de Indicadores.
Dentro de los modelos de calidad global, destaca la ISO 19796 [ISO05]. Esta
iniciativa estar completa el ao 2009. El estndar propuesto por el Centro Virtual
para el desarrollo de estndares de Calidad para la Educacin a Distancia en
Amrica Latina y el Caribe de la Universidad de Loja, Ecuador [Cen05], ha
entregado las guas a seguir para evaluar la calidad de los procesos que hoy se
llevan a cabo en la empresa y en la Universidad.
Este modelo seleccionado toma en cuenta un conjunto de parmetros que
permiten poner en marcha la implementacin de la gestin de la calidad en un
plazo acotado. El modelo de [Cen05] se adecua a la realidad de la Empresa y de la
institucin que imparte la instruccin, est basado en un modelo de calidad total,
proponer una calificacin para el proceso completo, es exible en la calificacin y
propone herramientas de medicin de sus indicadores.
El modelo de la EFQM [EFQ99] es reconocido y utilizado ampliamente,
entregando un conjunto de medidas de calidad para la organizacin completa y es
la base de normas de calidad internacionales como la ISO9000 (que cubre solo el
25 % de la EFQM) [ISO00] y la norma nacional NCh2728 [INN05]. El estndar
adapta este modelo al contexto educacional al darle sentido a los trminos y
analizar la organizacin desde nueve dimensiones para obtener una diagnstico
global. Divide una calificacin total de 1000 puntos en estos criterios manteniendo
una ponderacin similar a la propuesta originalmente por la EFQM, compatibilizando
la medicin para hacer benchmarking con otras instituciones. La estructura
entregada permite gestionar las metas de la organizacin en calidad y adecuar la
puntuacin especfica de acuerdo a las necesidades de la organizacin o la
empresa.

Construccin del Indicador. El modelo de la EFQM tiene dos conjuntos de

criterios a evaluar, los primeros cinco criterios se conocen como facilitadores o
agentes y son los encargados de monitorear el funcionamiento de la organizacin,
sus procesos internos y la toma de decisiones. Los otros 4 son los criterios
resultados y son explicados a raz de los criterios facilitadores. El modelo de
[Cen05] adeca los nombres y la definicin de estos criterios en torno a la
educacin a distancia.
 Figura 3: Los 9 criterios de la EFQM para el modelo de la [Cen05]

La estructura del modelo, define una jerarqua para organizar los indicadores,
como lo muestra la figura 4:
Criterio. Cada uno de los 9 criterios definido por el modelo EFQM para
analizar el trabajo en la organizacin: Liderazgo y Estilo de Gestin, Poltica
y Estrategia, Desarrollo de las Personas, Recursos y Alianzas, Destinatarios
y Procesos Educativos, Resultados de los Destinatarios y de los Procesos
Educativos, Resultados del Desarrollo de las Personas, Resultados de
Sociedad y Resultados Globales.
Sub-criterio, Un rea especfica dentro del criterio que se evala.
Objetivo. Profundizacin dentro de cada sub-criterio.
Estndar. Norma a cumplir para el objetivo especfico.
Indicador. Medicin de estndar. El indicador de calidad es el elemento
distintivo que permite identificar de forma objetiva el cumplimiento de un
estndar.

Figura 4: Jerarqua para organizar los indicadores del modelo propuesto

[Cen05]

Definicin del indicador. Por cada uno de los estndares definidos en el modelo
[Cen05] se desarrollan procedimientos para conseguirlos. Los indicadores que se
relacionan con el estndar son agrupados en una tabla que considera: definicin del
indicador, responsable de medirlo, en que etapa del ADDIE se debe utilizar,
procedimiento para medirlo.
Justificacin tcnica del indicador. Cmo ste puede ayudar a cumplir con los
estndares. Se entrega el marco terico para justificar su aplicacin.
Responsable. Alguno de los actores participantes del proceso de desarrollo.
Etapa. Cada una de las etapas del ADDIE. ste es un modelo para llevar el
proceso de desarrollo de cursos de entrenamiento e implica un conjunto de
tareas interrelacionadas en cada una de las 5 etapas que lo componen.
Anlisis. Se define lo que se debe aprender, el problema, su origen y soluciones.
Las tareas especficas de esta etapa consideran la identificacin del problema, la
evaluacin de las necesidades formativas y el anlisis de las tareas a realizar
durante todo el proceso de desarrollo. Como resultado se espera obtener el
perfil del estudiante, las necesidades y la definicin del problema.
Diseo. Como se debe aprender lo que se ha definido para ensear. Las tareas
son definicin de los objetivos, el desarrollo de los temas a evaluar, el plan de la
instruccin y la identificacin de los recursos disponibles. Los resultados sern
objetivos medibles mediante evaluaciones, una estrategia instruccional a seguir
y las especificaciones del prototipo del curso a impartir.
Desarrollo. Se prepara el material a utilizar en la formacin. Las tareas
 especficas dan cuenta del trabajo de productores, desarrollo del libro de
trabajo, de los programas y del organigrama del equipo. Los ejercicios prcticos
y las condiciones del ambiente de aprendizaje. El resultado de esta etapa
cuenta con el StoryBoard, la instruccin basada en computadora, instrumentos
de retroalimentacin (foros, chat, cuestionarios de autoevaluacin) y de
medicin (cuestionarios, tareas), instruccin medida por computadora,
aprendizaje colaborativo y entrenamiento basado en Web.
Implementacin. Se lleva a cabo el proyecto y se instala en el contexto real. Se
consideran tareas de esta etapa el entrenamiento docente (a los tutores) y un
plan piloto. Como resultado se deben conseguir los comentarios de los
estudiantes e informacin acerca de las evaluaciones.
Evaluacin. Se determina cmo se ha adecuado la instruccin al escenario real.
Se revisan los datos de registro de tiempo (visitas, disidentes, accesos),
interpreta los resultados de la evaluacin, encuesta a los graduados y revisa las
actividades del curso. Entrega recomendaciones sobre mejoras al curso, un
informe de la evaluacin del curso, revisin de los materiales y revisin total del
prototipo.
Procedimiento. El cmo medir el indicador, indica qu evaluar y como hacerlo.
Medicin. Desarrollado el indicador, se evalua el grado de cumplimiento con el
estndar al que fue asociado. Como generalmente este grado de cumplimiento
se mide de manera subjetiva, se propone utilizar una escala basada en la Escala
de Likert [Oso02].

Se procede a medir los aspectos relacionados con el soporte informtico y el rea

de recursos tcnicos que son actualmente las reas de competencia de las
empresas vinculadas con la Institucin que imparte educacin. Incluye la
estructuracin completa del estndar para mantener el marco global de la
evaluacin, comprender sus alcances y proponer mejoras.

Experiencia en el mejoramiento de Cursos en una Universidad

Para utilizar los indicadores definidos por [Cen05] se presenta el caso de la
empresa MindFree Ingeniera Limitada que provee servicios tecnolgicos al
departamento de Mecnica de la Universidad Tcnica Federico Santa Mara1. Dentro
de los servicios y proyectos desarrollados estn: gestin de los servicios
informticos, desarrollo de proyectos especficos en el rea pedaggicos, desarrollo
de portales webs para el departamento y apoyo a la direccin en el rea
tecnolgica. El proyecto a evaluar se desarroll durante el primer Semestre del ao
2007 y consisti en migrar 4 cursos presenciales a un formato semi-presencial o de
b-learning.

Objetivo. El objetivo general del proyecto es: Incorporacin de tecnologas en el

proceso de formacin de los alumnos de ingeniera de la UTFSM, especficamente:
desarrollar competencias en el rea tecnolgicas en los alumnos.
incorporar actividades no presenciales al programa.
revisar los programas curriculares de las asignaturas del programa.
desarrollar material didctico apropiado para la formacin.
Equipo de Trabajo. Se estructura en base a las necesidades del programa definido
por los objetivos, los costos y el tiempo disponible para desarrollar la solucin
planteada:
un Director del Proyecto encargado de gestionar los recursos en forma
adecuada, respondiendo a las especificaciones definidas en el diseo y
respetando tiempos y costos.
2 Pedagogas responsables de la estructuracin del currculo, el desarrollo del
programa del curso, proponer actividades y material para el proyecto.

1
http://www.mec.utfsm.cl
 Un Diseador grfico quin plasma las necesidades del diseo instruccional y
genera los objetos grficos adecuados para el curso.
Un Ingeniero Informtico responsable de la mantencin, seleccin,
desarrollo y puesta en marcha de los objetos de software requeridos por el
programa, as como tambin, de optimizar los ujos internos de informacin
entre los desarrolladores del curso.
Los ayudantes son alumnos de cursos superiores que participan
tradicionalmente el apoyo de los alumnos que cursan la asignatura, cumplen
un rol de tutores en la plataforma.
El profesor del curso, es el Experto en Contenidos, quin junto con las
pedagogas, define los objetivos y metas a conseguir en el curso adems de
proveer el material disponible y evaluar la incorporacin de material anexo.
encargados de finanzas para gestionar las matriculaciones de los alumnos.

Formacin de Tutores. La formacin debe permitir a profesores, tutores y

facilitadores adquirir las competencias especiales que son necesarias para realizar
su accin.
mbito tecnolgico: para que el facilitador adquiera habilidades en la
plataforma tecnolgica definida para apoyar el curso. Algunas herramientas
como foros, chats y sistemas de mensajera son indispensables cuando se
realizan experiencias a distancia.
mbito Tcnico: El facilitador debe tener las competencias asociadas al
tema especfico que cubre la formacin. La tutora debe estar alineada al
modelo pedaggico definido, a la cultura organizacional y a las
caractersticas del alumnado.
Diseo de Propuesta Didctica: Toda propuesta didctica debe encuadrarse en
una propuesta pedaggica-didctica que defina qu es lo que los alumnos deben
haber logrado para el final del curso. Cules actividades debern desarrollar, con
qu estrategias y metodologa. La propuesta considera adems el sistema de
evaluacin utilizado y las condiciones que se desarrollarn.
Definicin del Soporte Tecnolgico
Definicin de la plataforma. Se bas en los planteamientos propuestos por el
proyecto JOIN, se evalu la utilizacin de la plataforma LMS Moodle, por la
popularidad dentro de los campus e otras universidades de la regin.
1. El sistema debe ser de cdigo abierto. Moodle es distribuido bajo licencia
GPL GNU versin 2, es software libre el que se puede distribuir, copiar y
modificar respetando la autora en el resultado.
2. Debe ser accesible a travs de un navegador web estndar. La tecnologa
usada para el desarrollo de la plataforma (PHP) es desplegable por cualquier
servidor web y entrega contenidos HTML compatible con cualquier
navegador.
3. Las opciones de autora as como el resto de funciones del sistema deben
poder ser utilizadas sin la necesidad de comprar ningn plug-in o
visualizador adicional. La plataforma ofrece la posibilidad de integrar
contenidos de varios formatos, tanto propietarios como libres. Los plug-in y
visualizadores compatibles son los que cualquier web pueda integrar y son
los resultantes del diseo instruccional y la decisin de implementacin.
4. Deben haber funciones bsicas para la administracin de usuarios. Moodle
permite agregar usuarios en lotes, personalizar la grfica de la plataforma
por usuarios, recuperacin de contraseas de acceso, mensajera, permisos
de usuarios, entre otras funcionalidades bsicas para el registro, contacto e
informacin de los usuarios de la plataforma.
5. El sistema debe ofrecer una funcin de autenticacin. En la plataforma, esta
funcin es compatible con Email, servidor CAS (SSO), FirstClass, IMAP,
LDAP, NNTP, POP3, RADIUS, Shibboleth, PAM, Base de Datos externa o,
incluso, con otros Moodles, cada una de las opciones anteriores tiene una
interfaz de configuracin includa.
 6. El sistema debe ofrecer gestin de permisos. La plataforma permite asignar
roles en los cursos individuales, permitiendo que un usuario tenga perfil de
estudiante o profesor dependiendo del curso.
7. El sistema debe estar abierto a la localizacin. Moodle soporta actualmente
ms de 75 lenguajes y tiene soporte en la comunidad en ms de 150 pases.
8. El alumno debe poder interaccionar a travs del navegador con el profesor,
el sistema y otros alumnos. La comunicacin debe poder ser electrnica. La
plataforma incluye herramientas de comunicacin sincrnica y asincrnica
tales como mensajera interna, foros, chats, entre otros.
9. Deben haber funciones bsicas para la evaluacin y progreso de los alumnos
y funciones bsicas para al menos la autora de tests y evaluaciones. Se
dispone de un sistema de registro de las actividades y un libro de
calificaciones que registra las evaluaciones de las actividades de la
plataforma.
10. Debe haber funciones para la gestin de cursos. ste tem es abordado
desde la importacin y exportacin de cursos con alumnos, contenidos y
archivos asociados, visualizacin de los cursos permite agruparlos en
categoras y agregar, eliminar o modificar las caractersticas (formato,
costos, disponibilidad, claves, entre otros parmetros) del curso.
11. Deben haber funciones para la gestin de contenidos. La informacin que es
entregada en la plataforma puede ser organizada en un curso por temas,
semanas, moverse entre ellos, modificarse en la misma plataforma, entre
otras funcionalidades de gestin.

Evaluacin y Viabilidad. Busca definir cules son las variables e indicadores a

tener en consideracin para la decisin de realizar el proyecto o para el control de
los resultados durante el desarrollo. Se analiza los desvos (si los resultados difieren
de lo esperado) y propone las acciones correctivas necesarias. Durante el desarrollo
se debe evaluar el impacto y hacer las modificaciones para mejorar o mantener la
calidad del curso. Entrevistas o encuestas programadas son herramientas usadas.

Resumen
Criterio Propuesta de Ponderacin
ponderacin sugerida
1. Liderazgo y Estilo de Gestin 120 -
2. Poltica y Estrategia 85 -
3. Desarrollo de las Personas 105 2 de 8 medidos
4. Recursos y Alianzas 90 10 de 21 medidos
5. Destinatarios y Procesos Educativos 150 40 de 59 medidos
6. Resultados de los Destinatarios y Procesos 130 38 de 63 medidos
Educativos
7. Resultados del Desarrollo de las Personas 120 -
8. Resultados de Sociedad 70 -
9. Resultados Globales 130 -
Total 1000 89 de 151
medidos

Conclusiones
El estndar seleccionado[Cen05] provee el marco de trabajo completo para la
autoevaluacin del proceso de creacin , diseo, desarrollo, imparticin y
evaluacin de un programa a distancia de educacin, comprende entrevistas, hojas
de observacin y un gran nmero de documentos que permiten cubrir todos los
objetivos del estndar. Esto genera una gran cantidad de indicadores y
herramientas para la medicin pero que resultan ser muy detallistas para su
implementacin.
La consecuencia de esto es generar el listado de indicadores y asociar preguntas
y observaciones que la definicin de las tareas debe responder satisfactoriamente
para cumplir con el estndar. Se transcriben los estndares e indicadores, reunidos
en una tabla por estndar relativo a un objetivo particular. As, resulta ms
operativo para una evaluacin rpida y centrada en la gestin del proceso.
Se propone una tabla para la propuesta de la [Cen05] y as hacer una
autoevaluacin ms rpida, que permita tener una visin de lo que est
implementado actualmente y lo que debe implementarse para cumplir con las
metas de revisin de la calidad del proceso, permite:
Contar con los indicadores agrupados por estndar dentro de un objetivo
para un criterio especfico.
Asociar a los responsables del estndar especfico
Asociar una o varias etapas del desarrollo de los cursos para la medicin de
los indicadores.
Proponer un procedimiento bsico y simple para medir los indicadores del
estndar
Asignar una medicin ponderada al estndar
La evaluacin del estndar se realiza en torno al trabajo realizado en el rea de
recursos tcnicos informticos y del apoyo pedaggico que se dieron a algunos
cursos.
La evaluacin total entrega un 89.25 sobre 151 puntos posibles de los 1000
totales. Esto quiere decir que la empresa tiene un 59% de rendimiento frente a sus
responsabilidades tcnicas y los trabajos realizados. Esta aproximacin del
rendimiento no debe considerarse como definitiva puesto que se explican criterios
evaluados globalmente cuando se est tratando de hacer una evaluacin especfica.
Esto es consecuencia del modelo elegido y se toma como el costo de elegir una
evaluacin global que permite visualizar todas las reas y tener una mejor idea de
todos los aspectos a considerar en el desarrollo y la gestin de la enseanza.

Bibliografa
[ADD08] Learning Theories ADDIE.
ADDIE Model.
http://www.learning-
theories.com/addie-model.html, 2008.
Revisado 072008.
[ADE03] The American Distance
Education Consortium ADEC. Guiding
principles for Distance Learning.
http://www.adec.edu/admin/papers/d
istance-teaching_principles.html,
2003. Revisada 15032008.
[Cen05] Centro Virtual para el
desarrollo de estndares de calidad
para la Educacin Superior a distancia
en Amrica Latina y el Caribe.
Memoria de estndares de calidad.
http://www.utpl.edu.ec/centrovirtual/i
nternas/memorias.html, 2005.
Revisado 15022008.
[Cle01] T. S. Cleary. Indicators of
quality. Planning for Higher Education.
2001.

[Bau02] Peter Baumgartner. E- [COL03] Commonwealth of Learning

learning Praxishandbuch: Auswahl von COL. LMS open source.
Lernplattformen. Innsbruck, 2002. http://www.col.org/colweb/webdav/si
te/myjahiasite/shared/docs/03LMSOp
[BJ00] F. Belanger and D.H. Jordan. enSource.pdf, 2003. Revisado
Evaluation and Implementation of 13112007.
Distance Learning: technologies, tools
and techniques. Idea Group [EFQ99] European Foundation Quality
Publishing, London, 2000 Model EFQM. Modelo EFQM de
Excelencia.
http://www.tqm.es/TQM/ModEur/Mod Latinoamrica. El CEN seleccion a
eloEuropeo.htm, 1999. Revisado AXG Tecnonexo por sus buenas
05042008. prcticas en e-learning.
http://www.elearningamericalatina.co
[ELA07] E-Learning LMS Awards ELA. m/edicion/junio1_2006/nt_1.php,
Guild Research. 2006. Revisado 05032008.
http://www.elearningguild.com/conte
nt.cfm?selection=doc.1, 2007. [Mat0a] J. Mateo. La evaluacin del
Revisado 15112007 profesorado y la gestin de la calidad
de la educacin. Hacia un modelo
[FFF04] Foro Francs para la comprensivo de evaluacin
Formacin Abierta y a Distancial sistemtica de la docencia. Revista de
FFFOD. Code of practice. Information Investigacin Educativa, 18, 2000a.
technologies e-learning.
http://www.fffod.org/fr/doc/RBPZ760 [Mat0b] J. Mateo. La evaluacin
01-EN.doc, 2004. Revisada 082008. educativa, su prctica y sus
metforas. Horsori, 2000b.
[Fid07] A. Fidalgo. Blog de Innovacin
Educativa, MicroGua de Indicadores [May01] R. E. Mayer. Multimedia
para el elearning, Laboratorio de learning. Cambridge, UK: Cambridge
Innovacin en Tecnologas de la University
Informacin. Departamento de Press.,
Matemtica Aplicada y Mtodos http://www.ipfw.edu/as/tohe/2001/Pa
Informticos. Universidad Politcnica pers/multimedia.pdf, 2001. Revisado
de Madrid. 15102007.
http://innovacioneducativa.files.wordp
ress.com/2007/06/micro-guia- [McA99] G.E. McArdle. Training
indicadores-on-linccc.pdf, 2007. Design and Delivery. Alexandria, VA.
Consultado 14112007. American Society for
Training and Development. 1999.
[INN05] Instituto Nacional de
Normalizacin INN. Norma Chilena [McN07] S. McNeil. CUIN 6373,
Nch2728. www.inn.cl, 2005. Revisado Instructional Design for Fall 2006, The
072008. Instructional Technology Program in
the Department of Curriculum and
[ISO00] ISO 9001 Help. ISO 9001 Instruction, College of Education,
Quality Manual & Training ISOUKCO. University of Houston, 2007.
http://www.iso9001help.co.uk/Beyon http://www.coe.uh.edu/courses/cuin6
d_ISO_9000.htm, 2000. Revisado 373/index.html, 2007. Revisado
072008. 102007.

[ISO05] International Standarization [MM97] R. E. Mayer and R. Moreno. A

Organization ISO/IEC. ISO/IEC cognitive theory of multimedia
19796-1:2005 Information technology learning: Implications for design
- Learning, education and training - principles. Wiley,
Quality management, assurance and http://www.unm.edu/~moreno/PDFS/
metrics - Part 1: General approach. chi.pdf, 1997. Revisado 15102007.
http://www.iso.org/iso/catalogue_det
ail?csnumber=33934, 2005. [OCS06] Observatorio para la
CiberSociedad OCS. III Congrs
[Kir99] D.L. Kirkpatrick. Evaluacin de ONLINE OCS.
acciones formativas: los cuatro http://www.cibersociedad.net/congres
niveles. Barcelona. 2006/gts/comunicacio.php?id=510,
EPISE-Gestin 2000. 1a Edicin 2006. Revisada el 14 de Febrero de
1994., 1999. 2008.

[Lat06] Revista E-Learning [Oso02] R. Osorio. El Cuestionario.

http://www.nodo50.org/sindpitagoras
/Likert.htm, 2002. Consultado 6 de
Marzo de 2008.

[Ros01] M. Rosenberg. E-learning:

Estrategias para transmitir
conocimiento en la era digital.
McGraw-Hill Intramericana, 2001.

[Rub03] M. J. Rubio. Enfoques y

modelos de evaluacin del e-learning.
Revista Electrnica de Investigacin y
Evaluacin Educativa, 9.
http://www.uv.es/RELIEVE/v9n2/RELI
EVEv9n2_1.pdf, 2003. Consultado
10102007.

[SEN07] Servicio Nacional de

Capacitacin y Empleo SENCE. Gua
de apoyo para la implementacin de
la norma nch 2728 en los otec, 2007.
Consultado 122007.

[SIG05] Special Interest Group in

Open Source Software for Education
in Europe SIGOSSEE. Joint Open
source Information Network JOIN.
http://www.ossite.org/join/sp/, 2005.
Revisado 072008.
[VSea98] C. Van Slyke et al.
Identifying Candidates for Distance
education: A telecommuting
perspective. Proceedings of the
America's Conference on Information
Systems. 1998.

[WCE05] The Council of Regional

Accrediting Commissions y The
Western Cooperative for Educational
Telecommunications WCET. Best
Practices for Electronically Offered
Degree and Certificate Programs.
http://www.wcet.info/resources/accre
ditation, 2005. Revisada 16022008.

[Wri05] Clayton R. Wright. Criteria for

evaluating the quality of online
courses. Grant Mc Ewan College,
http://www.imd.macewan.ca/imd/con
tent.php?contentid=36, 2005.
Revisada 03032008.