Documente Academic
Documente Profesional
Documente Cultură
INSTRUMENTOS,VALIDEZ Y CONFIABILIDAD
Amrica Odar Rosario* I. INSTRUMENTOS
En el Proceso de la Investigacin cientfica un aspecto importante es el que est relacionado con la obtencin de la informacin, pues debe considerarse que si los datos son mal obtenidos la investigacin pierde su validez y objetividad. Entre los principales instrumentos de investigacin tenemos: La Entrevista, La observacin y el Cuestionario. Los instrumentos en investigacin se seleccionan en funcin: Del Problema de investigacin De la (s )Hiptesis planteadas De la muestra previamente determinada
A. Propsitos principales:
Como instrumento exploratorio: para ayudar a identificar variables y relaciones, sugerir hiptesis y dirigir otras fases de la investigacin
Como principal instrumento de la investigacin: las preguntas diseadas para medir las variables de la investigacin deben incluirse en el programa de entrevista.
Como complemento de otros mtodos: para seguir resultados inesperados, validar otros mtodos y profundizar respecto de las motivaciones de los encuestados y de sus razones de sus respuestas. B. Aspectos a considerar en una entrevista:
Los entrevistadores deben estar entrenados, deben poseer por lo menos una cultura media que comprenda la importancia de cada dato recogido. Tendrn que ser mentalmente giles, no tener prejuicios marcados frente a ninguna categora de personas Deben, sobre todo, ser capaces de dejar hablar libremente a los dems, dejando de lado todo intento de convencerlos, apresurarlos, o agredirlos por sus opiniones, evitando innecesarias reacciones de temor, agresividad y desconfianza en el entrevistado.
Debe eliminarse el sesgo del entrevistado Las preguntas deben ser probadas previamente y revisarse para descartar ambigedades y la redaccin inadecuada.
C. Tipos de entrevista:
c.1 Entrevistas no estructuradas: Son aquellas en que no existe una
estandarizacin formal, habiendo por lo tanto un margen ms o menos grande de libertad para formular las preguntas y las respuestas. Las formas ms conocidas son las que exponemos a continuacin. Entrevista informal: Lo importante no es aqu definir los lmites de lo tratado ni ceirse a algn tipo de esquema previo, sino "hacer hablar" al entrevistado, de modo de obtener un panorama de los problemas ms importantes para l. Es de gran utilidad en estudios exploratorios y es recomendable cuando se trata de abordar realidades poco conocidas por el investigador. Tambin suele utilizarse en las fases iniciales -aproximativas- de investigaciones de cualquier naturaleza, recurriendo a informantes claves que pueden ser expertos sobre el tema en estudio, lderes formales o informales, personalidades destacadas, etc.
Entrevista focalizada: es similar a la anterior, pero se caracteriza por tratar sobre un nico tema. El entrevistador deja hablar al entrevistado, proponindole apenas algunas orientaciones pero, cuando ste se desva del tema original y se desliza hacia otros distintos, el entrevistador vuelve a centrar la conversacin sobre el primer asunto, y as repetidamente. Son importantes en situaciones experimentales, con el objeto de explorar a fondo alguna experiencia vivida en condiciones precisas. Tambin es la forma ms utilizada cuando nuestros informantes son testigos presenciales de hechos de inters. c.2 Entrevistas formalizadas Estas se desarrollan en base a un listado fijo de preguntas, cuyo orden y redaccin permanece invariable; comnmente se administra a un gran nmero de entrevistados para su posterior tratamiento estadstico. Por este motivo es la forma de recoleccin de datos ms adecuada para el diseo de la encuesta, tanto que a veces provoca confusiones entre instrumento y mtodo. Entre sus ventajas principales mencionaremos su rapidez, su posibilidad de ser administradas por personas con mediana preparacin, etc., todo lo cual redunda en su bajo costo, su facilidad para el procesamiento estadstico, ya que al guardar homogeneidad sus respuestas resultan comparables y agrupables. Su mayor desventaja mayor es que reducen
1.2 LA OBSERVACIN
La observacin permite acumular y sistematizar informacin de un hecho o fenmeno en tiempo presente. Tiene la ventaja de facilitar la obtencin de datos lo ms prximo a cmo ocurren en la realidad y su principal desventaja reside en que los datos obtenidos se refieren a un solo aspecto del fenmeno observado.
B. Tipos de observacin
b.1 Observacin estructurada: En la observacin de enfoque cuantitativo, la observacin se caracteriza por tener un plan que incluye: Qu variables deben observarse (qu se va a observar? Circunstancias del proceso de observacin (dnde y cundo se va a observar? Caractersticas de los observadores (quines va a observar y cmo?.
La observacin permite probar ms adecuadamente la hiptesis referente al problema en estudio. No es indispensable que el investigador se incorpore al grupo observado.
En la observacin de enfoque cualitativo, la observacin se caracteriza por: Ser menos planificada, de estructura flexible totalmente personal, donde el investigador juega un papel fundamental. Es un proceso complejo, en el que la calidad de un buen proceso de observacin depende de la capacidad del observador para captar aquello que tenga el potencial de convertirse en un dato de investigacin El papel del observador no se puede delegar y siempre recae en el propio observador. Observacin no estructurada: El observador no tiene un plan referente a qu variables va a observar con mayor nfasis y recoge todo tipo de informacin. Se utiliza generalmente en estudios de tipo exploratorio que permiten definir con ms precisin el problema, las variables e hiptesis a investigar.
Tanto la observacin no estructurada como la observacin estructurada son tcnicas que permiten la recoleccin de datos en experimentos controlados
1.3 EL CUESTIONARIO
El cuestionario conjuntamente con la entrevista son tcnicas de la encuesta El cuestionario est compuesto por un conjunto de preguntas elaboradas cuidadosamente sobre los hechos y datos que son de inters en una investigacin (Cea, 1995). Se caracteriza por:
En general es para todos los informantes No existe la posibilidad de hacer repreguntas; en todo caso cualquier otra repregunta debe figurar en el cuestionario Es uniforme para todos los entrevistados.
A. Tipos de cuestionario
Existen tres tipos de cuestionario: Cuestionario estructurado o con preguntas cerradas, en el cual el informante, para cada pregunta, tiene como nicas alternativas de respuesta las que indica el cuestionario. Cuestionario no estructurado o con preguntas abiertas, donde el informante, para cada pregunta, tienen la total libertad de expresar su propia respuesta. Cuestionario mixto, incluye tanto preguntas abiertas como cerradas. Este tipo de cuestionario es generalmente el ms utilizado.
una prdida de informacin importante para el anlisis del problema de investigacin .Es demasiado formal y puede ocasionar resistencia en el informante a contestar determinadas preguntas. En la medida que las preguntas deben ser hechas a todos los informantes, tal como estn escritas, existe mayor posibilidad, que en la entrevista, de obtener demasiadas no respuestas o respuestas errneas; sobre todo cuando el informante no comprende el correcto sentido de la pregunta.
II.
Las etapas de la construccin de un instrumento pueden variar su orden o se pueden llevar a cabo varias etapas de forma simultnea. 1 Definicin del constructo a medir Antes de proceder a medir algo debemos tener una idea muy clara de lo que queremos medir, eso se llama constructo, ello puede bibliografa y la consulta con expertos en la materia. El constructo es una variable abstracta y latente ms que concreta y observable, es algo que los cientficos construyen y que no existe como una dimensin observable de la conducta. Sean actitudes, conductas o conocimientos se debe definir en forma clara y precisa el objeto de la medida y, de ser posible, determinar y conocer las teoras que lo sustentan. Un problema puede medirse desde diferentes perspectivas tericas y, por tanto pueden proponerse diferentes definiciones de un mismo constructo. requerir la revisin de la
Debe considerarse variables como la edad, el nivel intelectual, educacin, orgenes socioeconmicos y nivel de cultura. Ejemplo: Si interesa medir la calidad de vida, debera revisarse exhaustivamente todas las posibles caractersticas que conforman la calidad de vida: independencia fsica, vitalidad, equilibrio emocional, sueo, capacidad para relacionarse con otros, etc. Cada una de estas caractersticas se denomina dimensiones o factores y una definicin clara de cada una de ellas nos facilitar la construccin de las preguntas que nos ayuden a explorar lo que queremos medir.
Para elaborar un instrumento, a partir del constructo a medir, se debe determinar las dimensiones, o factores grandes a aspectos que conforman el constructo a medir, y luego, identificar los indicadores, para cada una de las dimensiones. Incluye, asimismo, especificar las operaciones para su construccin, en dos grandes reas: contenido y formato.
Debe decidirse tambin el formato de la prueba, es decir el modo en que se presentarn los reactivos. Debe decidirse si se va tener una hoja separada de respuestas, o si las respuestas se indicarn directamente en el bloque de la prueba. Las hojas separadas de respuestas son ms fciles de calificar y econmicas, sin embargo tienden a limitar el formato de los tems y reducirlos a tems de eleccin mltiple, con lo que aumenta ligeramente la posibilidad de que el sujeto se equivoque al anotar sus respuestas.
Los tems deben ser claros y deben transmitir al sujeto la idea sin ambigedades, la comunicacin debe estar desprovista de complejidad sintctica o semntica confusa.
Despus de hacer los cambios finales que se consideren oportunos, se imprime el instrumento, se tiene ahora una coleccin de buenos reactivos, pero no necesariamente un buen instrumento. El hecho de s el instrumento es buena o no, depende de su estandarizacin y de anlisis tericos posteriores.
Brown (1993), sostiene que es posible eliminar gran parte de la variabilidad extraa en la comparacin de las calificaciones de la aplicacin de los reactivos a grupos de sujetos, utilizando instrucciones para la aplicacin de las pruebas, lmites de tiempo estndar y mtodos objetivos de calificacin. Agrega, que se requieren dos tipos de instrucciones: 1). Para quien se somete al instrumento y 2) Para quien le aplica. En el primero se debe proporcionar uno o ms tems como ejemplos, para informarle al sujeto cmo se resuelve cada tem y el *Profesora Principal de la UNS aodar_5@hotmail.com
criterio pertinente para elegir la opcin correcta, en el segundo caso, debe considerarse las mismas instrucciones que se dan a los sujetos e incluir adems instrucciones sobre cmo manejar los problemas y las preguntas que se presenten durante la aplicacin de la prueba.
E) 5 ms horas
Se codifica: 1 = No veo televisin, 2= Menos de 1 hora, 3= 1 2 horas, 4= 3 4 horas y 5= 5 ms horas Pueden ser tambin: Analgica lineal: La gradacin se da en una lnea medida en cm (10cm)
Ejemplo: Escala de dolor o bienestar del paciente (lnea de 10 cm) Ningn dolor __________________________Mximo dolor imaginable Analgica numrica: La gradacin es similar a la anterior pero con nmeros Ejemplo: Ninguna ansiedad 0 1 2 3 4 5 6 7 Mxima ansiedad imaginable Analgica verbal: Escalas tipo Likert, donde generalmente las respuestas oscilan entre 5 y 7
Ejemplo: Deberan prohibirse los anuncios de tabaco A) Muy en desacuerdo D) De acuerdo B) En desacuerdo C) Ni de acuerdo, ni en desacuerdo
E) Muy de acuerdo
Se codifica: 1 = Muy en desacuerdo, 2= En desacuerdo, 3= Ni de acuerdo ni en desacuerdo, 4= De acuerdo y 5= Muy de acuerdo Escala del Diferencial Semntico. Consiste en una serie de adjetivos extremos que califican al objeto de actitud, ante los cuales se solicita la reaccin del sujeto. Es decir entre cada par de adjetivos se presentan varias opciones y el sujeto selecciona aquella que refleje su actitud en mayor medida. Ejemplo:
RESPECTO A LA UNIVERSIDAD DE MI PREFERENCIA: Universidad Mayor de San Marcos La informacin que de ella tengo es: Abundante --- --- --- --- --- --- --Escasa
-----------------2. La definicin de cada tem debe ser mutuamente excluyente. INCORRECTA El trabajo de los docentes y del personal de salud en cuanto a la preparacin de la familia en aspectos de promocin y educacin para la salud es: Suficiente ( ) CORRECTA A continuacin se mencionan dos de los grupos encargados de la preparacin de las familias en aspectos de promocin y educacin para la salud. cmo considera su trabajo? (Marque con una X su opcin de respuesta) Del colectivo docente: Suficiente ( ) Del personal de salud: Suficiente ( ) Regular ( ) Insuficiente ( ) Regular ( ) Insuficiente ( ) Regular ( ) Insuficiente ( )
3. Utilizar preguntas breves y fciles de comprender INCORRECTA Actualmente tiene dismenorrea? SI ( ) No ( ) CORRECTA tiene actualmente dolor con la menstruacin? SI ( ) No ( )
4. En lo posible no redactar preguntas en forma negativa INCORRECTA No debe permitirse la publicidad de la leche artificial SI ( ) No ( ) CORRECTA Marque en la casilla adecuada, de acuerdo a su punto de vista. La publicidad de la leche artificial: Puede permitirse ( ) Debe prohibirse *Profesora Principal de la UNS aodar_5@hotmail.com ( )
No tengo opinin ( )
Diplomado en Investigacin Cientfica 2012 5. Evitar el uso de la interrogacin porqu? INCORRECTA Con relacin al funcionamiento del uso del comedor su valoracin es negativa porqu? _________________
CORRECTA qu aspectos considera que deben mejorar con respecto al comedor universitario? que la comida sea caliente que el servicio sea ms rpido ( ) ( ) uso del
6. Evitar preguntas que obliguen a hacer clculos o esfuerzos de memoria INCORRECTA A largo del pasado ao cuntas veces acudi a un centro de salud? _______
7. No formular preguntas en las que una de las alternativas de respuesta sea tan deseable que difcilmente pueda rehusarse INCORRECTA El personal del Centro de Salud se encuentra suficientemente preparado
CORRECTA
Para el tratamiento de los contenidos de educacin sexua lel personal de saludse encuentra suficientemente preparado? Si ( ) No ( ) No tengo opinin
Desde el punto de vista psicomtrico un instrumento tiene que poseer dos caractersticas para que se le pueda considerar como un buen instrumento de medicin: debe ser confiable y vlido.
3.1. Confiabilidad
Un instrumento es confiable en la medida en que conduzca a los mismos resultados o similares, sin importar las oportunidades para que ocurran variaciones y de esta forma las medidas confiables permiten generalizar de un uso particular del mtodo a una amplia gama de circunstancias relacionadas (Nunnally y Bernstein, 1995 Brown, 1993 y Adkins, 2001). .
Obtencin de la confiabilidad
Existen diversos procedimientos para estimar la confiabilidad de un test. a. Formas alternativas o paralelas: Se aplican dos versiones equivalentes del Instrumento. b. Test-retest: Se aplica el mismo instrumento en dos ocasiones separadas y se debe analiza la correlacin entre los resultados obtenidos en las dos versiones. c. Confiabilidad por mitades: Se aplica un solo instrumento y se divide el instrumento en dos mitades equivalentes y, luego se analiza la correlacin existente entre las calificaciones obtenidas en ambos instrumentos d. Confiabilidad de consistencia interna: Para estimar la confiabilidad de un instrumento se hace en el anlisis interno de una sola aplicacin del instrumento. Este tiene grandes ventajas prcticas debido a que: 1) requiere el desarrollo de una sola versin del instrumento y 2) la cooperacin de los sujetos se necesita solamente en un cierto perodo de prueba, en contraposicin a la limitacin de este procedimiento, en que todos los instrumentos suelen realizarse durante un nico perodo breve, de modo que no es posible obtener evidencia en cuanto a la variabilidad temporal. Entre estos procedimientos el Coeficiente Alfa de Cronbach es el indicador ms importante, ya que proporciona estimaciones reales de confiabilidad.
En cuanto al nivel satisfactorio de confiabilidad, una confiabilidad de 0,70 es justo lo mnimo y una confiabilidad de 0,95 se considerara la norma deseable, sin embargo Garrett (1977), seala que este coeficiente depende de la ndole del test, del nmero y la variabilidad del grupo y del propsito con el cual se administra el test. Se recomienda que en el caso de obtener un valor del Coeficiente Alfa de Cronbach muy bajo, debe revisarse este valor del coeficiente obtenido por otros investigadores en estudios *Profesora Principal de la UNS aodar_5@hotmail.com
similares y si se encuentra en el rango debe aceptarse y proceder a aplicar el instrumento a la muestra definitiva.
3.2 Validez:
Diversos tratadistas del tema, como Garret (1974), Thorndike (1989) Bernstein (1995) y Brown (1993), Nunnally y sostienen que el trmino validez denota la
utilidad cientfica de un instrumento de medida, en el que puede establecerse ampliamente qu tan bien mide lo que pretende medir. Es decir un instrumento o test es vlido si los desempeos que miden corresponden a los mismos desempeos medidos independientemente de otra manera o definidos en forma objetiva, y adems precisa que un test es vlido para un propsito en particular o en una situacin especial pero no es universalmente vlido.
Por ejemplo, un test de inteligencia no ser vlido, si lo que mide es realmente memoria y no inteligencia. Ciertas variables como el gnero, lugar de procedencia son fciles de observar o de preguntar y obtener una respuesta vlida. Pero cuando se trata de variables de inters, por ejemplo, en Ciencias Sociales como motivaciones, actitudes, sentimientos, etc, la validez de un instrumento que pretendas medirlas se torna ms compleja, cabe entonces preguntarse el instrumento realmente medir lo que se pretende medir?
3.2.1Tipos de validez
1) Validez de criterio: Implica que la medicin del instrumento se ajusta o sirve a un criterio externo. Puede distinguirse tres tipos de validez de criterio:
La validez de un constructo es importante siempre que se disea un instrumento para medir algn atributo o alguna cualidad (constructo) que se suponga posean las personas, como el caso del constructo desempeo docente universitario, la calidad del servicio de los hospitales, etc..
En la determinacin de la validez de construccin del instrumento, es preciso examinar varias evidencias, stos tienden a ser de cuatro tipos: 1) El juicio comparativo de los tems de la prueba con la definicin del constructo, es decir se debe valorar primeramente la validez de contenido de la prueba, para resolver la pregunta Con el contenido de la prueba, se hace aflorar el rango que se trata de evaluar hasta un nivel razonable?
2) Evidencia correlacional de la validez de constructo. Un instrumento no surge del vaco, es probable que existan otros instrumentos diseados, para evaluar el atributo de inters. El instrumento, se puede correlacionar tanto con diversos instrumentos diseados, para evaluar el mismo atributo como con los diseados para medir otros atributos que se tema puedan contaminar al instrumento nuevo como instrumento de *Profesora Principal de la UNS aodar_5@hotmail.com
medicin del atributo de inters que se desea medir. El instrumento que se tiene debe mostrar correlacin ms alta con otras mediciones diseadas para evaluar el mismo atributo, que con las diseadas para evaluar otros atributos diferentes. Esto es posible lograr con el
anlisis factorial,
para apreciar un mismo atributo deben agregarse a un factor comn, lo cual permite determinar cuntos factores (construcciones) se necesitan para explicar las intercorrelaciones entre un conjunto de calificaciones de varias pruebas.
En tanto que un instrumento se contemple como un instrumento para medir un rango que indique una caracterstica persistente del sujeto, se puede esperar que no dependa de modificaciones ni de condiciones de fondo, como tampoco de circunstancias de medicin. Un instrumento de medicin puede ser confiable pero no vlido, puede medir consistentemente un aspecto ms no medir lo que el investigador pretende medir. Por ello es requisito que un instrumento de medicin sed demuestre que es confiable y vlido.
1. Prueba piloto
Normalmente se recomienda aplicar la primera versin del cuestionario a una muestra piloto de pequeo tamao de personas, con caractersticas semejantes a las de la muestra o poblacin objetivo de nuestra investigacin. Los investigadores aconsejan un 10% de personas semejantes a las que integrarn la muestra definitiva. Esto permitir determinar: a. Tipos de preguntas ms adecuadas b. Si el enunciado es correcto y comprensible, y si las preguntas tienen la extensin adecuada c. Si es correcta la categorizacin de la respuesta d. Si existen resistencias psicolgicas o rechazo hacia algunas preguntas e. Si el ordenamiento interno es lgico, si la duracin est dentro de lo aceptable para los encuestados.
En relacin a los mtodos utilizados puede realizarse mediante: a. Entrevistas informales b. Grupos focales de la poblacin c. Encuesta sobre la comprensin de las preguntas d. Valoracin del cuestionario por parte de los participantes en el estudio
respaldados por otros estudios o investigaciones y nos ofrecen garanta de lo deseamos medir o considerar un tem criterio para correlacionarlo con los tems del cuestionario. Se utilizar el coeficiente de correlacin de Pearson.
Validez de constructo: A travs del Anlisis factorial que es una tcnica estadstica multivariante.
Anlisis Factorial
El anlisis factorial es una tcnica utilizada para descubrir agrupaciones de variables de tal forma que las variables de cada grupo estn altamente correlacionadas, y los grupos estn relativamente incorrelacionados. De este modo se consigue reducir un nmero de variables intercorrelacionadas a un nmero inferior de factores no correlacionados, que permitan explicar la mayor parte de variabilidad de cada una de las variables (Pea,2002, Prez,22004; Hair, 1999 y y Anderson, 1984)
Para aplicar el anlisis factorial, es importante que las variables consideradas para el Anlisis Factorial se midan con una escala de intervalo y que el tamao de la muestra sea, cuando menos, el quntuplo de las variables empleadas. Pasos para realizar el Anlisis Factorial:
1. Elaboracin y anlisis de la Matriz de Correlaciones Se debe obtener, en primer lugar, una matriz en la que se ubican las correlaciones entre todas las variables consideradas. Es conveniente solicitar una serie de pruebas conexas que nos indicarn si es pertinente llevar a cabo el Anlisis Factorial con la data y muestras disponibles. Estas pruebas son las siguientes: a. El determinante de la matriz de correlaciones: Si dicho determinante es muy bajo, entonces significa que existen variables con intercorrelaciones muy altas, y entonces es factible continuar con el anlisis factorial. Sin embargo, el determinante no debe ser igual a cero, pues en este caso los datos no seran vlidos.
b. El Test de Esfericidad de Bartlett: Se utiliza para probar la Hiptesis Nula que afirma que las variables no estn correlacionadas en la poblacin. Es decir, comprueba si la matriz de correlaciones es una matriz de identidad. Se puede dar como vlidos aquellos resultados que nos presenten un valor elevado del
test y cuya fiabilidad sea menor a 0.05. En este caso se rechaza la Hiptesis Nula y se contina con el anlisis. c. El ndice Kaiser-Meyer-Olkin: Mide la adecuacin de la muestra. Indica que tan apropiado es aplicar el Anlisis Factorial. Los valores entre 0.5 y 1 indican que es apropiado aplicarlo
d. El coeficiente de correlacin parcial: Se utiliza como un indicador que muestra la fuerza de las relaciones entre dos variables eliminando la influencia de las otras variables. Estos coeficientes deben tender a ser prximos a cero cuando se dan las condiciones para el anlisis factorial.
e. El coeficiente de correlacin anti-imagen: En la matriz de correlacin de antiimagen se deben observar pocos valores elevados en trminos absolutos y no debe haber un nmero elevado de coeficientes ceros, pues de lo contrario se recomienda no llevar a cabo el anlisis factorial. f. La diagonal de la matriz de correlacin anti-imagen: Aqu se toman como valores mnimos y mximos respectivamente el 0 y el 1, siendo tanto mejor cuanto mayor sea el valor del MSA. Esto significa que si los valores de la diagonal de la matriz de correlacin anti-imagen son altos (superiores a 0.5), se puede continuar con el anlisis factorial.
2.
3.
los factores con races latentes menores que 1, explican menos de una variable, no son significativos y debemos desestimarlos. 3. Rotacin de los Factores Iniciales Con frecuencia es difcil interpretar los factores iniciales, por lo tanto, la extraccin inicial se rota con la finalidad de lograr una solucin que facilite la interpretacin. Hay dos sistemas bsicos de rotacin de factores: Los mtodos de rotacin ortogonales(mantienen la independencia entre los factores rotados: varimax, quartimax y equamax) y los mtodos de rotacin no ortogonales (proporcionan nuevos factores rotados que guardan relacin entre s). El Mtodo de Rotacin Varimax es el ms utilizado.
5. Denominacin de los factores La denominacin que debe adjudicarse a los factores encontrados, es algo subjetivo y requiere de una combinacin de intuicin y gran conocimiento de las variables. Se recomienda contar con la ayuda de expertos en la materia.
IMPORTANTE 1. En caso de elegir uno o ms instrumentos debe elegirse aquellos que reporten mayor validez y confiabilidad. Si se selecciona un instrumento de otro pas debe hacerse una prueba piloto y realizar la validacin del instrumento en el contexto donde se aplican. Los grupos, las personas cambian y tienen valores diferentes de acuerdo a la cultura. Por lo tanto, se deben aplicar instrumentos ya validados en el contexto. 2. En caso de no encontrar un instrumento desarrollado adecuado, vlido y confiable y se quiera construir o desarrollar uno propio, debe definirse el en primer lugar el constructo o variable a medir, luego determinarse las dimensiones , a partir de stas los indicadores y finalmente a partir de los indicadores los reactivos o tems de medicin. 3. En el caso de construccin o modificacin de un instrumento de medicin debe realizarse la validacin de constructo mediante el Anlisis Factorial
INSTRUMENTO PARA MEDIR LA CALIDAD DE SERVICIO DE LAS BIBLIOTECAS UNIVERSITARIAS Constructo / Aspectos 1.Elementos tangibles Personas Infraestructura Equipamiento Elementos asociados al servicio 1. El equipamiento es moderno y permite fcil acceso a la informacin que necesito. 2.El personal tiene apariencia pulcra. 2.Valor servicio del Confianza en el personal Atencin personalizada Conocimiento Fiabilidad Quejas y/o sugerencias 1. El personal tiene conocimiento y es capaz de responder a las preguntas que se le formulen 2.El personal le inspira confianza y seguridad Calidad de servicio de las bibliotecas universitari as del control de la informacin 3.Valor Materiales audiovisuales Base de datos Acceso a la informacin Servicios de fotocopiado y otros recursos de reprografa Revistas electrnicas Localizacin de recursos bibliogrficos 1. La biblioteca tiene una base de datos adecuado para uso del estudiante. 2.Las revistas en versin electrnica y/o impresa cubren las necesidades de informacin de los estudiantes Dimensin 4.Valor de la biblioteca como lugar Espacio de la biblioteca como lugar de estudio y/o investigacin Sealizacin de los distintos servicios de la biblioteca Horario de la biblioteca 1.La biblioteca es importante como lugar de estudio, aprendizaje o investigacin. 2. La biblioteca cuenta con sealizacin adecuada de sus distintos servicios Dimensiones/ variables Indicadores Ejemplos de tems
REFERENCIAS BIBLIOGRFICAS
1. Adkins, D. (2001). Elaboracin de Tests. Mxico: Editorial Trillas. 2. Anderson, T.(1984). An Introduction to Multivariate Stastistical Analysis. Graww-Hill Book Company 3. Brown, F. (1980). Principios de la medicin en Psicologa y Educacin. Mxico: El Manual Moderno S.A. 4. Catena, A., Ramos,M. y Trujillo,H.(2003). Anlisis Multivariado. Editorial. Biblioteca Nueva. 5. Cea, D Ancona (1995). Mtodos de encuesta, teora y prctica. Errores y mejora. Madrid: Editorial Sntesis S.A. 6. Garrett, J. (1985). Estadstica en psicologa y educacin. Buenos Aires: Ed Mc.
Paidos.Nunnally, J. y Bernstein, I. (1995). Teora Psicomtrica. Mxico: Mc. Graw Hill. 7. Hair, J., Anderson R., Tatham, R. y Black; w. (1999) AnlisisMultivariante. Editorial Mc. Graw Hill. 8. Hernndez, R., Fernndez,C. y Baptista, P. 2003. Metodologa de la investigacin. Editorial Mc. Graw Hill. 9. Nangnusson, D. (1998) Teora de los tests. Mxico: Trillas 10. Nunnally, J. y Bernstein, I. (1995). Teora Psicomtrica. Mxico: Mc. Graw Hill. 11. Pea, D. (2002). Anlisis de Datos Multivariantes. Ed. McGraw Hill. 12. Prez, C. (2004). Tcnicas de Anlisis Multivariante de datos SPSS. Editorial. Pearson. Prentice Hall. .Aplicaciones con
TUTORIAL PARA EL MANEJO DEL SPSS I. PROCEDIMIENTO PARA EL ANLISIS FACTORIAL: Abrir Data de Bibliotecas. 1 Seleccionar Analisis / Reduccin de datos Data / Factor se obtiene el siguiente cuadro
4 En el botn Extraccin: seleccionamos Componentes Principales, Matriz de correlacin, solucin factorial no rotada, grfico de sedimentacin y Valores propios mayores que 1 y pulsar continuar
6 En el botn Puntuaciones: Seleccionar guardar como variables, mtodo de Regresin y Mostrar matriz de coeficientes de puntuaciones factoriales y pulsar continuar.
7 En el botn Opciones: seleccionamos la opcin ordenados por tamao, suprimir valores absolutos menores que 0,40 y escribimos en el cuadro 0,40. (0,40 criterio considerado como aceptable, 0,30 el mnimo aceptable y 0,50 ptimo)
PRESENTACIN DE RESULTADOS EN EL INFORME I. Validez de constructo del instrumento: Identificacin de los factores de evaluacin de la calidad de servicio de las bibliotecas Verificacin de supuestos para aplicar el Anlisis Factorial:
1. Determinante de la Matriz de correlaciones: el valor del Determinante = 5,34E-11, valor extremadamente bajo, que nos indica la existencia de correlaciones altas entre los tems, lo que nos permite aplicar esta tcnica. 2. Test de esfericidad de Bartlet: El valor obtenido es de 3654,436, con un valor P = 0,000, significativo a un nivel de significancia de 0,05, nos indica que la matriz de correlaciones no es una matriz de identidad e indica la existencia de correlaciones
significativas as como que la matriz de datos es adecuada para proceder al anlisis factorial. 3. Medida de adecuacin de la muestra KMO de Kaiser-Meyer- Olkin: Este valor es de 0,903 que es un valor aceptable y nos indica que podemos aplicar esta tcnica, dado que las correlaciones entre pares de variables no pueden ser explicadas por las otras variables. 4. Medida de adecuacin de la muestra MSA: Este ndice queda reflejado en la diagonal principal de la matriz de correlaciones anti imagen. Los resultados de nuestro estudio nos indican valores altos que oscilan entre 0,629y 0,932, lo que aconseja la aplicacin de esta tcnica
5. Anlisis de las comunidades finales, expresan el porcentaje de informacin (varianza) que se ha logrado explicar de cada una de las variables mediante el anlisis factorial y presentan valores superiores a 0,436, valores bastante satisfactorios que es un indicador de que todos los tems contenidos en el estudio son explicados por los componentes extrados. Los valores extrados cercanos a cero indican una ausencia en la explicacin de la variabilidad de la variable. 6.
CUADRO 1. RESULTADOS DE COMPONENTES PRINCIPALES PARA EVALUAR LA CALIDAD DE SERVICIO DE LAS BIBLIOTECAS DE LA UNS
Componente 1 2 3 4 5 6 7 Valor propio 13,533 2,839 2,146 1,667 1,342 1,175 1,101 %Varianza Inicial 35,612 7,472 5,646 4,386 3,531 3,091 2,898 % Varianza % Varianza despus %Varianza acumulada de la rotacin acumulada 35,612 43,084 48,73 53,117 56,648 59,739 62,638 18,447 11,114 18,433 8,073 5,801 5,526 5,243 18,447 29,561 37,994 46,067 51,868 57,394 62,638
tratamiento de quejas y sugerencias.LaTabla4.7 muestra la configuracin de este segundo factor. En la Tabla 4.8 se muestra los tems de la tercera Dimensin Valor del prstamo y apoyo en el servicio, consta de 05 tems, tiene una varianza explicada de5,646%. En este factor los contenidos se relacionan con los materiales audiovisuales y el prstamo de los recursos bibliogrficos y otros elementos asociados con el servicio. La cuarta Dimensin Valor del orden y seguridad contiene 04 tems, con una
varianza explicada de 4,386%. Los contenidos se relacionan con la adecuacin de los ambientes y seguridad de los recursos bibliogrficos(Tabla 4.9)
3,531%. Con respecto al nmero mnimo de variables que debe configurar un factor, Garca, Gil y Rodrguez (2000), sealan que el nmero mnimo debe ser mayor de tres, dado que con un nmero ms reducido es claro que matemticamente encontraremos un nico factor que aglutine la informacin de las correlaciones entre variables. Para lograr un buen modelo factorial se necesita definir gradualmente la muestra de variables que mejor representen el dominio del constructo eliminando los factores de menor importancia (los que menor varianza expliquen o los de contenido menos general). La stima Dimensin contiene 03 tems, con una varianza explicada de 2,898% y una confiabilidad de 0,635.Este factor fue analizado ms detenidamente para lograr una conformacin ms estable. Los resultados del anlisis de confiabilidad, el anlisis de las correlaciones entre los reactivos y sus cargas factoriales permitieron ampliar el anlisis y se aadieron los tres tems de este Factor al quinto Factor, este ltimo factor present una confiabilidad inicial de 0,652. La quinta Dimensin Valor de la biblioteca y de las necesidades del estudiante qued finalmente conformada por 07 tems que presentan una confiabilidad de 0,754.Los contenidos de este factor se relacionan con aspectos relacionados a la importancia de la biblioteca como lugar de estudio y a la atencin de las necesidades de los estudiantes. La sexta Dimensin Valor de la atencin y confianza en el servicio contiene 04 tems,con una varianza explicada de 3,091%. Los contenidos de este factor se
muestran en la Tabla 4.11 y se relacionan con aquellos aspectos de apariencia del personal y a la confianza en el personal de la biblioteca.
Cuadro 2. DIMENSIN 1: VALOR DEL SERVICIO DESPUS DE LA ROTACIN tem del cuestionario Peso factorial 0,680 0,544 Comunalidad
17.El personal tiene conocimientos y es capaz de responder a las preguntas que se le formulan. 21.Puedo acceder fcilmente a la informacin para usarla y procesarla en mis tareas 22.El personal brinda ayuda adecuada para encontrar la informacin que necesito
0,436
0,684
0,693
0,670
24.El personal muestra buena disposicin para responder las preguntas que le formulan 25.El personal de biblioteca comprende las necesidades de los estudiantes 26.El personal muestra fiabilidad en el tratamiento de los problemas del servicio manifestadas por los estudiantes 27.El personal de biblioteca brinda el servicio con rapidez 29. Los estudiantes se sienten seguros y satisfechos con el servicio recibido 37. El personal de biblioteca muestra voluntad de ayudar a los estudiantes
0,819
0,659
0,756
0,578
Cuadro 3. DIMENSIN 2: VALOR DE LOS RECURSOS E INFORMACIN,DESPUS DE LA ROTACIN tem del cuestionario 2.Las bibliotecas tienen equipos (computadoras, estantes, etc) idneos y de apariencia modernos 30. Los libros corresponden a ediciones actualizadas 31.Las charlas y sesiones de informacin sobre el uso de servicios disponibles me permiten usar los servicios de forma ms eficiente 32. La localizacin de los recursos bibliogrficos y/o de informacin es adecuada 33.La biblioteca cuenta con medios adecuados (buzones, formularios, web, etc.) para la presentacin de quejas y/o sugerencias 34.La biblioteca cuenta con un adecuado tratamiento de las quejas y/o sugerencias 38. Existen espacios colectivos para el aprendizaje y estudio en grupo 0,771 0,617 0,616 0,703 Peso factorial 0,463 Comunalidad 0,643
0,480 0,580
0,590 0,570
0,496
0,665
0,671
0,694
Cuadro 4. DIMENSIN 3: VALOR DEL PRSTAMO Y APOYO EN EL SERVICIO DESPUS DE LA ROTACIN Peso Comunalid tem del cuestionario
factorial ad
11. Los materiales audiovisuales ( Videos, DVD y otros) son suficientes 12.La biblioteca cuenta con catlogo automatizado adecuado 13.El servicio de prstamo a domicilio es adecuado 14.El plazo establecido para el prstamo a domicilio es suficiente 19.Las revistas en versin electrnica y/o impresa cubren las necesidades de informacin de los estudiantes
0,464
0,624
Cuadro 5. DIMENSIN 4: VALOR DEL ORDEN Y SEGURIDAD, DESPUS DE LA ROTACIN tem del cuestionario 20.La biblioteca cuenta con sealizacin adecuada de sus distintos servicios 28.La biblioteca dispone de ambientes adecuados (con iluminacin y ventilacin adecuados) para el estudio y la lectura 35.Las bibliotecas tienen apariencia pulcra y ordenada 37. La biblioteca cuenta con adecuadas medidas de seguridad 0,598 0,613 0,714 0,578 0,566 0,586 Peso factorial 0,657 Comunalidad 0,650
Cuadro 6. DIMENSIN N 5: VALOR DE LA BIBLIOTECA Y DE LAS NECESIDADES DE LOS ESTUDIANTES, DESPUS DELA ROTACIN tem del cuestionario 4.Los elementos asociados con el servicio (fotocopiado, otros servicios de reprografa, etc) son adecuados y de calidad. 5.La biblioteca es importante como lugar de estudio, aprendizaje o investigacin 6.La biblioteca ofrece comodidad y es accesible 7. El espacio de la biblioteca es tranquilo para el trabajo individual 8.El horario de atencin de las bibliotecas es adecuado a las necesidades de los estudiantes 9.El nmero de puestos de lectura y/o estudio es suficiente 10.Los libros, revistas, etc. de la biblioteca cubren mis necesidades de informacin. Peso factorial 0,524 Comunalidad 0,548
Cuadro 7. DIMENSIN N 6: VALOR DELA ATENCIN Y CONFIANZA EN EL SERVICIO, DESPUS DE LA ROTACIN tem del cuestionario 3.El personal tiene apariencia pulcra 15.La atencin y trato recibido del personal de biblioteca es siempre amable 16.El personal de biblioteca le inspira confianza y seguridad 36. El personal es atento con las necesidades de los estudiantes Peso factorial 0,503 0,760 Comunalidad 0,501 0,757
0,741 0,714
0,595 0,708
II.
3 Pulsar el Botn Estadsticos y seleccionar Escala si se elimina el elemento y luego pulsar continuar
CUDRO N 1. ESTADSTICO ALFA DE CRONBACH GLOBAL Y POR DIMENSIN Dimensin Elementos tangibles Compromiso con el servicio Control personal Biblioteca como lugar Alfa de Cronbach 0,730 0,922 0,854 0,716
Calidad Global
0,947
Importante:
III.
PROCEDIMIENTO
CON
SPSS
PARA
OBTENER
VALIDEZ
CONCURRENTE DEL INSTRUMENTO 1 Seleccionar Analizar/Regresin /Lineales, se obtiene el siguiente cuadro de dilogo
563 Pulsar Estadsticos y seleccionar Estimaciones, Ajuste del Modelo y Cambio en r cuadrado, luego pulsar continuar
Estadsticos de cambio R cuadrado corregida ,720 Error tp. de la estimacin ,32690 Cambio en R cuadrado ,722 Cambio en F 433,844 gl1 gl2 1 167 Sig. Cambio en F ,000
o
a
,850
,722
a. Variables predictoras: (Constante), 40.Cmo evala la calidad de servicio que recibe de las bibliotecas de la UNS?
correlacin positiva y significativa entre ambas medidas con valor R= 0,785(p< 0,05), lo *Profesora Principal de la UNS aodar_5@hotmail.com
cual nos permite concluir que los tems estn muy correlacionadas por lo tanto poseen validez concurrente. TABLA 4.3 CORRELACIN DE LOS REACTIVOS CON EL TEM CRITERIO R 0,850 R ajustada 0,720 F 433,844 Significatividad 0,000 (p< 0,05)
Fuente: Instrumento de investigacin IV. PROCEDIMIENTO CON SPSS PARA OBTENER VALIDEZ DIFERENCIAL DEL INSTRUMENTO 1 Seleccionar Analizar/Compara medias /ANOVA de un factor, se obtiene el siguiente cuadro de dilogo
2 Trasladar MEDIA GLOBAL (PROMEDIO) al cuadro Lista de dependientes y trasladar AO DE ESTUDIOS al cuadro FACTOR
3 Pulsar OPCIONES y seleccionar Descriptivos y Prueba de la homogeneidad de la varianza, luego pulsar continuar y aceptar.
RESULTADOS
Descriptivos MEDIA GLOBAL Intervalo de confianza para la media al 95% Desviacin N SEGUNDO AO TERCER AO CUARTO AO QUINTO AO Total 36 22 27 169 2,9409 2,9767 2,8538 3,0797 ,51219 ,75472 ,53055 ,61821 ,08537 ,16091 ,10210 ,04755 2,7676 2,6421 2,6439 2,9858 3,1142 3,3113 3,0636 3,1735 1,87 1,64 1,62 1,62 3,92 4,41 3,82 4,97 84 Media 3,2387 tpica ,61424 Error tpico ,06702 Lmite inferior 3,1054 Lmite superior 3,3720 Mnimo 1,82 Mximo 4,97
Prueba de homogeneidad de varianzas MEDIA GLOBAL Estadstico de Levene 1,945 gl1 3 gl2 165 ANOVA MEDIA GLOBAL Suma de cuadrados Inter-grupos Intra-grupos Total 4,429 59,777 64,206 gl 3 165 168 Media cuadrtica 1,476 ,362 F 4,075 Sig. ,008 Sig. ,124
PRESENTACIN DE RESULTADOS EN EL INFORME La validez diferencial del cuestionario permiti determinar la eficacia del cuestionario para apreciar diferencias significativas en la evaluacin de la calidad de servicio de las bibliotecas. La evaluacin de la calidad de servicio de las bibliotecas por los alumnos de los diferentes aos de estudios presenta diferencias estadsticamente significativas (P < 0,05), como se observa en la Tabla 3
TABLA N 3. COMPARACIN DE MEDIAS POR AO DE ESTUDIOS Ao de estudios Media Desviacin estndar Lmite Inferior II III IV V TOTAL 3,2387 2,9409 2,9767 2,8538 3,0797 0,61424 0,51219 0,75472 0,53055 0,61821 3,0774 2,7676 2,6790 2,6439 2,9858 Intervalo de confianza para la media al 95% Lmite superior 3,3483 3,1142 3,3255 3,0636 3,1735 Fo = 4,07 Diferencia de medias
p= 0,008
Fuente: Elaboracin propia en base a SPSS v. 18.0 TUTORIAL PARA OBTENER LA MEDIA CON EL SPSS 1 1 Seleccionar Transformar/calcular variable, se obtiene el siguiente cuadro de dilogo
2 Escribir MEDIA:GLOBAL en cuadro Variable de destino/ Seleccionar Estadsticas en Grupo de funcione Seleccionar Mean en el cuadro Funciones y variables especiales y trasladar Mean con la flecha al cuadro Expresin numrica
TRABAJO DE APLICACIN 1. Elabore un instrumento de Evaluacin, considerando el proceso de construccin de un instrumento de medicin 2. Aplique el instrumento en una muestra piloto ( n= 15) y elabore la Matriz de datos 3. Obtenga la Confiabilidad del instrumento 4. Determine la Validez del instrumento
*Profesora Principal de la UNS aodar_5@hotmail.com
3 Ingresar las variables (tems ) y separarlas con coma (,)en el cuadro EXPRESIN NUMRICA, Y LUEGO ACEPTAR.
5. Con la Data de FUNCIONAMIENTO FAMILIAR obtenga el Alfa de Cronbach, analice ste coeficiente si se elimina el tem y obtenga las conclusiones pertinentes. 6. Con la Data CALIDAD DE SERVICIO DE UNA INSTITUCIN EDUCATIVA DE NIVEL INICIAL, aplique el Anlisis Factorial y elabore un informe.