Universidad Nacional Mayor de San Marcos Facultad de Medicina Proyectos de investigacin

Prueba Piloto Validez interna y externa

26 de octubre 2013

PLANIFICACION DISEO DEL PROYECTO

Problema Marco Terico Objetivos Hiptesis Variables Diseo Metodolgico

Prueba piloto

INFORME FINAL Artculo cientfico Publicacin

DESARROLLO DE UN PROYECTO

EJECUCION Recoleccin de datos Resultados Anlisis Conclusiones Recomendaciones

MONITOREO SUPERVISION EVALUACION

PRUEBA PILOTO Prctica de investigacin donde se prueba: La metodologa La muestra La funcionalidad de instrumentos Anlisis de datos y La viabilidad del proyecto de investigacin

PRUEBA PILOTO Conducta del investigador Responsabilidad Transparencia Etica Compromiso Veracidad Tolerancia Respeto

PRUEBA PILOTO Requiere de elaborar un plan Lugar Fecha Cronograma Responsables Resultados Anlisis de la prueba piloto Conclusiones Rediseo y ajustes

PRUEBA PILOTO
Evaluar pertinencia de instrumentos y procedimientos de recoleccin de datos Verificar la data recolectada: Cumpla especificaciones del plan de anlisis. Evaluar el plan de anlisis para aplicar a la data recolectada

PRUEBA PILOTO Organizar base de datos temporal que permita evaluar la data recolectada con los instrumentos diseados. Evaluar caractersticas de datos recolectados y Evaluar el proceso de informacin realizado en la prueba.

PRUEBA PILOTO Establecer parmetros que garanticen la calidad de los datos a ser recolectados Dimensionar el tiempo y los recursos necesarios para la recoleccin de datos Evaluar la disponibilidad de datos requeridos en la investigacin

PRUEBA PILOTO Definir las personas que deben aportar los datos en la investigacin Detectar las dificultades y/o limitaciones que se puedan presentar en el trabajo de campo.

VALIDACION DE INSTRUMENTOS DE RECOLECCION DE DATOS

Prueba piloto
Juicio de expertos y/ o especialistas Prueba de los instrumentos Rediseo y ajustes de los instrumentos Puede requerir nuevas validaciones

VALIDACION DE INSTRUMENTOS DE RECOLECCION DE DATOS

Prueba de los instrumentos Estructura Contenido Calidad Coherencia

PRUEBA PILOTO Validacin de los instrumentos Preguntas Nmero Pertinencia/ Sndrome del Ya que Tipo de preguntas Comprensin Claridad Grado de aceptacin

PRUEBA PILOTO
Aplicacin dirigida

El responsable debe estar presente mientras el encuestado o grupo de encuestados responden por escrito el instrumento. Ejemplo un cuestionario auto-desarrollado a un grupo de estudiantes de secundaria

Aplicacin mediante entrevista

El responsable debe aplicar oralmente el instrumento a los sujetos de estudio de manera individual, garantizando la privacidad y con un lenguaje claro y sencillo. Ejemplo entrevista estructurada a madres gestantes adolescentes

PRUEBA PILOTO
Auto-aplicacin
No requiere de la presencia del responsable. Se entrega el instrumento y se revisa en el momento en que ste le es devuelto. Ejemplo encuestas de opinin

Observacin
El responsable es quien contesta algunas preguntas en funcin de lo que observa. Ejemplo listas de verificacin o de chequeo

PRUEBA PILOTO
Realizacin de algunas pruebas con grupos similares a los que se usarn en la investigacin. El propsito es verificar si el instrumento ha sido correctamente elaborado y si es claro para los entrevistados, los encargados de aplicarlo y el tiempo que tomar aplicarlo.

PRUEBA PILOTO DE INSTRUMENTOS Aplicacin a muestra pequea, para la muestra definitiva Anlisis de instrucciones Comprensin de tems Si los resultados son tiles para la confiabilidad del instrumento Los instrumentos deben ser: Modificados mejorados, o sometidos a nuevas pruebas para el instrumento definitivo

PRUEBA PILOTO Validacin de metodologa Definir tipo metodologa cuanti o cualitativa Criterios seleccin sujetos de estudio: Inclusin y exclusin Rediseo y ajustes de la metodologa Puede requerir nueva validacin

PRUEBA PILOTO Diseo Muestral Poblacin Tipo de muestra Tamao de muestra Rediseo y ajustes de metodologa Puede requerir nueva validacin

PRUEBA PILOTO
Verificacin y definicin de Tiempos y Movimientos

Proceso de capacitacin Tipo de instrumento: encuesta, cuestionario autodesarrollado, lista de chequeo, entrevista a profundidad, consentimiento informado Traslado al lugar Uso Materiales apoyo: grabadora, cmara fotogrfica, video. Rediseo y ajustes

PRUEBA PILOTO
Evaluar el proceso de capacitacin Identificar las formas de promocionar el proyecto antes de iniciar la recoleccin de datos Realizar los ajustes necesarios en el proceso de diseo del proyecto

PRUEBA PILOTO Verificacin y definicin de los Recursos N de entrevistadores N de monitores de campo N de supervisores Personal de apoyo: Elaboracin de base de datos Proceso de digitacin Calidad de la data

PRUEBA PILOTO

Revisar los procedimientos

diseados para recolectar la data Tener en cuenta las experiencias, observaciones y recomendaciones Redisear y ajustar antes del proceso de ejecucin del proyecto de investigacin

PRUEBA PILOTO
Resolver primero NUESTROS PROBLEMAS INTERNOS y luego los de la COMUNIDAD o POBLACION donde TRABAJAREMOS. Recuerden que siempre es necesario

APRENDER A ANDAR para despus PODER CORRER.

PRUEBA PILOTO

Evaluar los instrumentos, el plan de anlisis y los dems elementos contemplados en el proceso del diseo del proyecto Ejemplo Modelo de oferta y demanda de Recursos Humanos en salud en Colombia

PRUEBA PILOTO
CONFIABILIDAD Y VALIDEZ INSTRUMENTO

Confiabilidad externa e interna Validez Externa e Interna Formas de calcular la confiabilidad y validez de un instrumento de medicin. Sensibilidad Especificidad Validacin. Pruebas

Validez Externa

Posibilidad de generalizar los resultados de un experimento o situaciones no experimentales, as como los del sujeto de estudio y las poblaciones.

VALIDEZ EXTERNA

Para lograr validez externa es conveniente tener grupos lo ms parecido posible a la mayora de personas a quienes se desee generalizar y repetir

FUENTES
Efecto reactivo o de interaccin de las pruebas Efecto de interacin entre los errores de seleccin y el tratamiento experimental Efectos reactivos de los tratamientos experimentales

Invalidacin externa

Interferencia de tratamientos mltiples Imposibilidad de replicar los tratamientos

FUENTES DE INVALIDACION
Efecto reactivo o de interaccin de las pruebas

Cuando la pre-prueba aumenta o disminuye la sensibilidad o la calidad de reaccin de los sujetos a la variable experimental haciendo que los resultados obtenidos para una poblacin con prepruebas no puedan generalizarse Ejemplo: Pelcula y efecto de racismo

Eleccin de personas con una o varias caractersticas que hagan que el tratamiento experimental produzca un efecto que no se dara si las personas no tuvieran esas caractersticas. Ejemplo: Seleccin de trabajadores motivados para un experimento de productividad, puede ser que el tratamiento slo resulte en este tipo de trabajadores

Efecto de interacin entre los errores de seleccin y el tratamiento experimental

FUENTES DE INVALIDACION

La artificialidad de las condiciones puede hacer que el contexto experimental resulte atpico, respecto a la manera en que se aplica regularmente el tratamiento Personas que son observadas, modifican su conducta normal Ejemplo Estudio sobre competencias en la atencin integral del nio y de la Mujer en la consulta externa. Proyecto CARE-OSAN

Efectos reactivos de los tratamientos experimentales

FUENTES DE INVALIDACION

FUENTES Interferencia de tratamientos mltiples

Si los tratamientos no son de efecto reversible, las conclusiones solamente podrn hacerse extensivas a las personas que experimentaron la misma secuencia de tratamientos sean mltiples o repeticin del mismo

FUENTES DE INVALIDACION
Imposibilidad de replicar los tratamientos Cuando los tratamientos son tan complejos que no pueden replicarse en situaciones no experimentales, es dficil generalizarlos Para lograr validez externa es conveniente tener grupos lo ms parecido posible a la mayora de personas a quienes se desee generalizar

Validez Interna
Requisito de un experimento verdadero es el control o validez interna. Cuando hay control es posible conocer la relacin causal Se da una observacin controlada Es controlar la influencia de otras variables extraas en las variables dependientes, para as saber en realidad si las variables independientes que nos interesen tienen o no efecto en las dependientes

Validez Interna
El Control en un experimento logra la validez interna. El control se logra: 1. Varios grupos de comparacin (dos como mnimo)

2.Equivalencia de los grupos en todo, excepto en la manipulacin de las variable( s) independiente (s)

El experimentador Fuente de invalidacin interna Interaccin sujeto-experimentador

Sujetos ingresan al experimento con actitudes, expectativas y prejuicios que alteren su comportamiento durante el estudio Ejemplo Poco colaboradores Muy crticos negativos Hostiles

El experimentador Fuente de invalidacin interna Interaccin sujetoexperimentador

Tenerlo en cuenta antes y durante la investigacin Identificar que sujetos pueden arruinar la investigacin El mismo investigador puede afectar los resultados de la investigacin, no es un observador pasivo, sino que interactua, observador activo Desea comprobar su hiptesis

El experimentador Fuente de invalidacin interna Interaccin sujeto-experimentador

Los sujetos de estudio no deben conocer las hiptesis ni las condiciones experimentales. Efectos de los medicamentos Uso de placebos Nuevo mtodo Ejemplos Programas de TV Experiencias motivacionales Pruebas de sabor de alimentos

Muchas gracias !