Descarga la aplicación para disfrutar aún más
Vista previa del material en texto
Técnicas y construcción de instrumentos de recolección de datos. Validez del instrumento. Validez de juicio de expertos, validez de contenidos. Sesión 3 Mg. @ucvvirtual.edu.pe DÍA EL Motivación Analizamos las siguientes situaciones: Determinar las condiciones de vida de las familias, integrantes en hogar, servicios básicos. Objetivo Conocer si los trabajadores en construcción usan los equipos de protección y seguridad durante la jornada laboral Analizar el perfil clínico y epidemiológico de pacientes hospitalizados en una clínica local durante el periodo 2010 - 2020 Conocer el perfil de un candidato según su experiencia, formación y motivación a un puesto laboral ¿Qué técnica de recolección de datos usarías en cada situación? Situación A Situación B Situación C Situación D Participa en el chat de forma ordenada o usa la opción levantar mano de zoom para intervenir. Hacerlo más emotivo y potente el mensaje. 2 EVIDENCIAS DE APRENDIZAJE Al finalizar la sesión, el estudiante aprende a elaborar un instrumento de recolección de datos adecuado. Introducción https://www.youtube.com/watch?v=1gM3QPRTbFQ Técnicas e instrumentos de recolección Técnicas de recolección: Estrategias que sigue el investigador para recolectar información. Instrumentos de recolección: Medio físico o virtual que utiliza el investigador para registrar la información obtenida. Técnicas e instrumentos de recolección TÉCNICA INSTRUMENTO ENCUESTA CUESTIONARIO ENTREVISTA GUÍA DE ENTREVISTA o CUESTIONARIO NO ESTRUCTURADO ANÁLISIS DOCUMENTAL FICHA DE REGISTRO DE DATOS OBSERVACIÓN EXPERIMENTAL - NO EXPERIMETAL HOJA O FICHA DE REGISTRO DE DATOS GUIA DE OBSERVACION 1 2 3 4 Encuesta Es una técnica destinada a obtener datos de varias personas, cuyas opiniones interpersonales interesan al investigador. Instrumento: cuestionario. Es un conjunto de preguntas que miden una o más variables, para ser tabuladas. Características Es estructurada y sistematizada Preguntas: Es la forma interrogativa del indicador. El cual se obtiene de la Operacionalización de Variables. Es el dato más empírico de este proceso. Las primeras Preguntas: se las considera socialmente básicas. Como introducción en el tema. Preguntas de control: Corroboran la información. Categorías: Todas las respuestas deben ser exhaustivas y mutuamente excluyentes. No deben solaparse las respuestas. Muestra: Debe ser representativa del Universo 1 Encuesta Ventajas Se puede suministrar a todo tipo de población. No se entrena al personal que suministra la encuesta. Puede enviarse por correo, vía e-mail Puede aplicarse a mayor cantidad de Unidades de Análisis Desventajas No hay posibilidades de re-preguntas. No existe el cara a cara. Pre-Test: sirve para corroborar y verificar el método de Recolección de datos, que se va a utilizar, antes del suministro de la técnica para garantizar su confiabilidad y validez. Rol del Encuestador: Cualquiera puede suministrar la técnica Anonimato https://www.youtube.com/watch?v=2kecjMkMzzc Instrumento: Cuestionario https://www.youtube.com/watch?v=W8loPmJu1Vs ESCALA DE LIKERT (Creador:Rensis Likert) La escala de Likert se clasifica dentro de las escalas llamadas sumativas, ya que el puntaje que arroja se obtienen sumando los puntajes de las respuestas a las distintas preguntas o estímulos. Para construir una escala Likert hay que realizar el siguiente procedimiento: . Definición conceptual de la actitud que se va a medir, de acuerdo a cierto contexto teórico. . Recopilación de ítems o indicadores de la variable (operacionalización). La posibilidad de las respuestas (valores de la variable) se presentan en forma de alternativas, como por ejemplo: Muy de acuerdo De acuerdo Indiferente En desacuerdo Muy en desacuerdo 1 2 3 4 5 Lista de cotejo Escala de estimación Escala Likert Escala Golbert Escala Guttman Sí No Bueno Regular Malo Totalmente de acuerdo, De acuerdo, Ni de acuerdo ni en desacuerdo, Totalmente en desacuerdo Moderadamente, Bastante, Mucho, Muchísimo, No, Un poco Para estudiar ansiedad, depresión Para investigar actitudes De acuerdo, En desacuerdo Otras escalas 1.- NORMAS: En forma de opiniones (actitud verbalizada), con las que se puede estar o no de acuerdo, o de conductas o rasgos personales y nunca hechos objetivos. 2.- ITEMS FAVORABLES Y DESFAVORABLES: ITEM + : Estar de acuerdo muestra actitud favorable. “ESTUDIAR ES DIVERTIDO”. ITEMS - : Estar de acuerdo manifiesta actitud desfavorable. “ ESTUDIAR ES ABURRIDO”. 3.- ORDEN DE ITEMS: Pueden presentarse por “dimensiones”, pero siempre en el mismo orden. 4.- NÚMERO DE ITEMS: No hay número óptimo, pero a mayor número de items “buenos”, mayor fiabilidad. REDACCIÓN DE ITEMS ITEMS TOTALMENTE EN DESACUERDO EN DESACUERDO INDIFERENTE DE ACUERDO TOTALMENTE DE ACUERDO Siento que soy una persona digna 1 2 3 4 5 Pienso que soy un inútil. 5 4 3 2 1 Ejemplo 2: Entrevista Es la comunicación interpersonal establecida entre el investigador y el sujeto de estudio, con el fin de obtener información o respuestas verbales a los interrogantes planteados sobre un problema determinado. Diálogo entre dos personas (entrevistador - entrevistado) Se utiliza en la metodología cualitativa Instrumento: Guía de preguntas (abiertas o semi-estructuradas) Rol del Entrevistador: Establecer un vínculo, focalizar la charla, dejar hablar, guia para no perder el objetivo, evitar el riesgo de las sanciones sociales a las posibles respuestas 2 Entrevista Características Ventajas Aplicable a toda clase de sujetos, en diferentes situaciones Posibilidad de profundizar en temas de interés Orienta hipótesis Se utiliza cuando la población es pequeña. Mayor costo. Cuando se considera necesario que haya diálogo Posibilidad de preguntar y re-preguntar.. Desventajas Requiere más tiempo Requiere habilidad técnica para obtener información y conocimiento del problema Cara a cara Flexible Abierta LA ENTREVISTA- GUÍON Análisis documental 3 Es la recopilación de datos mediante el análisis de documentos o fuentes secundarias. Según Castro (2010), es el hecho de trabajar materiales ya elaborados de tipos secundarios determinan lógicamente las principales ventajas e inconvenientes. Complementará el estudio de a través de la utilización de fuentes primarias y secundarias como textos, trabajos de grado pertinentes al estudio, manuales, folletos, revistas, historias clínicas, expedientes, libros contables, internet entre otros recursos. Observación Permite obtener información sobre un fenómeno o acontecimiento tal y como éste se produce Registro visual de una situación real. Se utiliza en ambos modos de abordajes (cuantitativo – cualitativo) Modalidades Campo Laboratorio Individual Equipos Otras ... Pasos a seguir Determinar el objeto, situación o caso que se va a observar. Determinar los objetivos. Determinar la forma de registrar los datos Observar cuidadosamente Registrar los datos observados Rol del observador Participante / (-) participante / No participante Directa – Indirecta 4 OBSERVACIÓN : Lista de cotejo EJEMPLO: Sirve para anotar acontecimientos diarios que el investigador observa en el espacio. Su formato puede variar de acuerdo a la naturaleza del estudio, pero fundamentalmente se incluye fecha, registros de las observaciones y comentarios del observador Tutorial: Crear formularios virtuales de Google https://www.youtube.com/watch?v=PrnH8qLuf1Y Trabajo de aplicación grupal Reunirse en grupo y elaborar su instrumento de recolección de datos para su investigación propuesta y exponerla en clase. Tener en cuenta los objetivos de investigación propuestos y los instrumentos elaborados en sus antecedentes revisados en la sesión de aprendizaje anterior. Respondemos en el chat o activando su audio las siguientes interrogantes: ¿Crees que es importante saber elegir una técnicade recolección específica para recolectar la información? SÍ ( ) NO( ) ¿Es importante la confidencialidad de la información? SÍ ( ) NO( ) ¿Qué técnicas de recolección de datos aprendiste? ………………………………………………………… ¿Qué instrumentos de recolección de datos aprendiste? ………………………………………………………… ¿Qué características debe tener todo instrumento de recolección de datos? …………………………… y ..…………………………… Autoevaluación: Analizo mi aprendizaje Validez del instrumento. Validez de juicio de expertos, validez de contenidos. Imagina que deseas evaluar la temperatura y el TERMÓMETRO que vas a usar esta descalibrado No Importa: Si el proyecto de investigación es perfecto Si la muestra y muestreo es adecuado Si usas las pruebas estadística mas potentes y complejas. Simplemente tus resultados no sirven. Por lo tanto los resultados y las conclusiones obtenidas en la investigación no sirven. Longitud Peso Tiempo Psicoeducativas Es necesario probar empíricamente que el instrumento es VÁLIDO en todos los casos ¿Qué características deseamos que prediga? CRITERIO La exactitud con que pueden hacerse mediciones significativas y adecuadas con un instrumento, en el sentido que mide realmente el rasgo que pretende medir (Ruiz; 2003) Ausencia se sesgos. Representa la relación entre lo que se mide y aquello que realmente se quiere medir (Palella y Martins; 2006) Grado en que un instrumento realmente mide la variable que pretende medir (Hernández, Fernandez y Baptista; 1998) VALIDEZ Medir es “asignar números símbolos o valores a las propiedades de objetos de acuerdo a ciertas reglas” Stevens (1951) El instrumento debe demostrar ser confiable y válido a la vez (Hernández Sampieri) ¿ QUÉ ES MEDIR ? Medir es parte de nuestro vivir, Bostwick (2005). Actualmente se concibe a la medición como al “proceso de vincular conceptos abstractos con indicadores empíricos” Carmines (1991). ¿Y qué es un instrumento de medición? Es el documento que se utiliza para registrar la información que se quiere obtener. 27 Grado en que un instrumento produce resultados consistentes y coherentes. Es decir en que su aplicación repetida al mismo sujeto u objeto produce resultados iguales. Kerlinger (2002). Grado en que un instrumento produce resultados consistentes y coherentes Hernández Sampieri CONFIABILIDAD Ejm: Si se midiera en este momento la temperatura ambiental usando un termómetro y este indicara que hay 22 ° C, un minuto mas tarde 5 ° C, tres minutos después 40 ° C; dicho termómetro no sería confiable. RANGOS MAGNITUD 0,81 A 1,00 Muy Alta 0,61 A 0,80 Alta 0,41 A 0,60 Moderada 0,21 A 0,40 Baja 0,01 A 0,20 Muy Baja Importante: se sugiere repetir la validación del instrumento puesto que es recomendable que el resultado sea mayor o igual a 0,81 FUENTE: RUIZ (2002). 28 CONFIABILIDAD Se refiere al grado en que su aplicación de un instrumento repetida al mismo sujeto produce iguales resultados” Hernández, Fernández y Bastita (1998) “(p.21) Se refiere a la consistencia de los resultados. En el análisis de la confiabilidad se busca que los resultados de un cuestionario concuerden con los resultados del cuestionario en otra ocasión. Menéndez (2009) Se refiere al grado en que su aplicación repetida al mismo sujeto u objeto produce iguales resultados. Silva (2009) Reproducibilidad Estabilidad y Predictibilidad Seguridad Precisión Consistencia Interna u Homogeneidad 29 Métodos Método: TEST – RETEST Características: El investigador debe aplicar el mismo instrumento dos veces al mismo grupo después de cierto período. aplicación definitiva del mismo. Coeficiente de Correlación de Pearson altamente positivo = Instrumento confiable. Debilidades: El periodo de tiempo (corto – largo) entre las mediciones puede confundir el coeficiente de confiabilidad. 30 Métodos Método: FORMAS EQUIVALENTES Características: 31 Métodos Técnica: Alfa de Cronbach Características: Requiere sólo una aplicación del instrumento de medición. Produce valores que oscilan entre cero (0) y uno (1). No es necesario dividir en mitades los ítems del instrumento. Se aplica la medición y se calcula el coeficiente. Técnica: Kuder – Richardson KR - 20 Permite calcular la confiabilidad con una sola aplicación del instrumento. No requiere el diseño de pruebas paralelas. Es aplicable sólo en instrumentos con ítems dicotómicos, que puedan ser codificados con 1–0 (correcto–incorrecto, presente – ausente, a favor – en contra, etc.) . 32 Métodos Pasos: Dividir los itemes de la prueba en dos partes iguales. Correlacionar las puntuaciones totales de las dos mitades. Multiplicar el coeficiente obtenido por 2 y dividir el término 1 más la correlación de las dos mitades, como se expresa en la fórmula que aparece en la siguiente lamina: CONFIABILIDAD DIVISIÓN DE DOS MITADES Spearman- Brown 33 Métodos CONFIABILIDAD DIVISIÓN DE DOS MITADES Spearman- Brown FÓRMULA: rtt= coeficiente de confiabilidad de las mitades. rhh= correlación de Spearman entre las dos mitades o los puntajes pares e impares. 34 Métodos CONFIABILIDAD DIVISIÓN DE DOS MITADES Guttman y Flanagan (1939) FÓRMULA: rtt= coeficiente de confiabilidad Sd2= varianza de la diferencia de puntajes pares e impares. St2= Varianza total de la prueba o escala. 35 Métodos CONFIABILIDAD DIVISIÓN DE DOS MITADES Guttman y Flanagan (1939) Alumnos I1 I2 I3 I4 I5 I6 I7 I8 I9 I10 IMPAR PAR TOTAL 1 2 1,75 1 0 1 0,75 1,75 1 0 0 5,75 3,5 9,25 2 0 2 1 1 1 1 0,75 0 1 0 3 1 0,75 1 0,75 1 1 2 1 0 2 4 1 1 1 1 1 0,75 1 1 1 1 5 1 1 1 0 0,75 0 0 1 1 0 6 1 1 0 1 0,75 0 1 0 0 0 7 0 0 0 0 0,75 0 1,75 0 1 1 8 1 1 1 1 1 1 1 1,75 1 1 9 0 1 0 1 0 1 1 0 1 0 10 1 1 1 1 1 0 1 0 1 0 IMPARES: 1+3+5+7+9 Media PARES:2+4+6+8+10 Varianza 36 PROCEDIMIENTO: Correlación a través de proporciones de aciertos y desaciertos y varianza del total de aciertos. APLICABLE EN: Lista de Cotejo y preguntas cerradas con respuestas dicotómicas (SÍ- NO) CONFIABILIDAD KUDER – RICHARDSON (KR-20) 37 K= Número de Ítems. ∑p.q= sumatoria de proporciones de aciertos por desaciertos. S2 T= Varianza del total de aciertos. CONFIABILIDAD KUDER – RICHARDSON (KR-20) 38 Sujetos Total 1 2 3 4 5 1 2 3 4 5 6 1 0 1 1 1 1 0 0 1 1 0 0 1 1 1 0 1 1 1 1 0 1 1 0 1 1 0 0 0 1 5 2 5 4 3 p q p.q CONFIABILIDAD KUDER – RICHARDSON (KR-20) 39 CONFIABILIDAD ALFA DE CRONBACH PROCEDIMIENTO: Correlación a través de la varianza de cada ítem asociado por variables y la varianza de las puntuaciones totales. APLICABLE EN : Escalas de estimación, cuestionario s de preguntas cerradas con opciones Escala de Lickert, policotómicas, test de aptitud verbal, test de aptitud no verbal , test psicológico. 40 CONFIABILIDAD ALFA DE CRONBACH K= Número de Ítems. S2= Varianza de los puntajes de cada ítems. S2T= Varianza de los puntajes totales. α = 0.81 41 CONFIABILIDAD ALFA DE CRONBACH 42 CONFIABILIDAD ALFA DE CRONBACH 43 CONFIABILIDAD ALFA DE CRONBACH 44 CONFIABILIDAD ALFA DE CRONBACH Se alcanzó un Nivel de Confiabilidad Bueno con un Alpha = 0.81, siendo este test consistente y adecuado para el estudio. Estadísticos de fiabilidad Alfa de Cronbach N de elementos 0.810 10 La correlación debe ser superior a 0.35 (Cottien-Manium ,1990) para ser considerado en el cuestionario. El ítem 10 no cumple 45 CONFIABILIDAD ALFA DE CRONBACH Para la motivación extrínseca : Estadísticos de fiabilidad Alfa de Cronbach N de elementos 0.523 5 Estadísticos de fiabilidad Alfa de Cronbach N de elementos 0.839 5 Se alcanzó un Nivel de Confiabilidad Bueno con un Alpha = 0.839 Se alcanzó un Nivel de Confiabilidad Moderado con un Alpha = 0.523 46 Prueba Piloto Se refiere a versiones en miniatura de un estudio a gran escala es crucial de un buen diseño del estudio.Proporciona información valiosa para la investigación. Permite la prueba de adecuación (validez cultural) de los instrumentos de investigación. Sin embargo, un estudio piloto también puede ser la prueba previa de un instrumento de investigación en particular (Baker 1994). Grado en que un instrumento mide la variable que pretende medir. La validez implica congruencia en la manera de plantear las preguntas. validez Validez Total Contenido Grado en que un instrumento refleja un dominio específico de contenido de lo que se mide. Es el grado en que la medición representa al concepto medido. Criterio Se establece la validez comparándolo con algún criterio externo. Es un criterio estándar con el que se juzga la validez de un instrumento. Constructo Se refiere al grado en que una medición se relaciona consistentemente con otras mediciones de acuerdo con hipótesis derivadas teóricamente y que conciernen a los conceptos (o constructos) que están siendo medidos. TIPOS DE VALIDEZ MÉTODO Contenido Juicio de expertos (Coeficiente de Proporción de Rangos, coeficiente de Lawshe, V de Aitken) Criterio Análisis de Correlación con la prueba criterio Constructo Análisis estadístico multivariado ( Factorial, convergente y discriminante) 49 Lawshe (1975) propuso un índice de validez basado en la valoración de un grupo de expertos de cada uno de los ítems del test como que el elemento sea esencial para evaluar el constructo, que resulte útil, pero prescindible o que se considere innecesario. El índice se calcula a través de la siguiente fórmula: Donde: n: es el número de expertos que han valorado el ítem como esencial N es el número total de expertos que han evaluado el ítem. Índice de Validez de Contenido (IVC) : Promedio de la validez de contenido de todos los ítems seleccionados en el paso previo. ÍNDICE DE VALIDEZ DE CONTENIDO (IVC): VALIDACIÓN DEL CUESTIONARIO (MÉTODO LAWSHE) Para cada uno de los ítems se desarrolla la fórmula dada: : (5- 5/2) 5/2 Se realiza el conteo de los expertos según su evaluación ( Por ejemplo: 5 expertos calificaron como esencial al ítem 1, sin embargo el ítem 16 fue calificado como esencial sólo por 2 expertos) 52 Y luego sumando todos los totales, para este ejemplo se obtuvo como resultado una validez de contenido de IVC: 0.94. Para interpretar podemos tomar el criterio de Davis (1992), quien nos dice que el índice obtenido tiene que ser superior a 0,80 para definir el conjunto de ítems como adecuado. En este caso nos indica que la Validez de Contenido se encuentra en un nivel adecuado , sin embargo analizando la validez ítem por ítem, se sugiere la eliminación del ítem 16, ya que este ha sido considerado como esencial sólo por 2 expertos. 53 Validez de criterio Dentro del concepto de validez de criterio cabe distinguir a su vez entre: Validez externa y validez interna Validez concurrente y validez predictiva Los procedimientos estadísticos utilizados en la validación referida a un criterio varían según el número de predictores utilizados (uno o más tests) y el número de criterios empleados (criterio único y criterio compuesto o múltiple). Validez de criterio Cálculo del coeficiente de validez , Martínez Arias (1995) distingue los siguientes casos: 1. Un único test y un solo criterio: se emplearían los procedimientos de correlación y regresión lineal simple. 2. Varios predictores (tests) y un solo criterio: se emplea la correlación y regresión lineal múltiple o el análisis discriminante. 3. Varios predictores y varios criterios: regresión lineal multivariante y la correlación canónica Establece y especifica la relación teórica entre los conceptos. Correlaciona ambos conceptos y se analiza cuidadosamente la correlación. Interpreta la evidencia empírica de acuerdo a que tanto clarifica la validez de constructo una medición particular. Validez de constructo Las técnicas correlaciónales o de consistencia interna relativa, se emplea en la validez de constructo con procedimientos de correlación entre: Item – Test Item – Escala (Subtests) Escala – Test o Test – Subtests Técnicas correlaciónales Validez de constructo ESCALA DE VALORACIÓN PARA INTERPRETAR LA CORRELACIÓN EN LA VALIDACIÓN ri.t Nivel de discrimación 0.40 a más Muy Bueno 0.30 – 0.39 Bueno 0.20 - 0.29 Deficiente 0 - 0.19 Insuficiente Fuente: Elosua Oliden y Bully Garay (2012). Pág. 58. Escala de valoración del coeficiente de correlación de Pearson Grado de correlación -1.00 Correlación negativa Perfecta -0.90 Correlación negativa Muy fuerte -0,75 Correlación Negativa Considerable -0.50 Correlación Negativa Media -0,25 Correlación Negativa débil 0.00 No existe correlación alguna entre las variables +0.10 Correlación Positiva Muy Débil +0.25 Correlación Positiva Débil +0.5 Correlación Positiva Media +0.75 Correlación Positiva Considerable +0.90 Correlación positiva Muy fuerte +1.00 Correlación positiva Perfecta Hernández, Fernández y Baptista ( 2010) 2.- Fiabilidad de la escala: Consistencia: El cálculo del coeficiente de alfa de Crombach fue 0,771; por cada pregunta se obtuvo un puntaje mayor de 0,7 (Tabla Nº 02). La Correlación corregida elemento-total” es el denominado en la TCT (Índice de discriminación del ítem), que es un criterio importante para la selección de ítems, recomendándose que en general su valor sea ≥0,30. En este constructo no se eliminaron preguntas posteriores al consenso final. http://www.scielo.org.pe/scielo.php?script=sci_arttext&pid=S1022-51292011000400008 Gracias a tu esfuerzo por aprender está cambiando el mundo..!! REFERENCIAS MG. JESSICA VICUÑA VILLACORTA Mason, R., Lind, L. y Marshall, W. (2004). Estadística para Administración y Economía. México: Alfaomega. Montero, J. (2008). Problemas resueltos de Estadística Descriptiva para Ciencias Sociales. Madrid: Thomson Editores. Montgomery, E. y Runger, G. (2006), Probabilidad y estadística aplicada a la ingeniería. México: Limusa Wiley. Pagano, R. (2011). Estadística para ciencias del comportamiento. Novena Edición. México: Cengage Learning Editores Corporativo Santa Fe. Esnaola, I. (2005). Elaboración y validación del cuestionario Autokontzeptu Fisikoaren Itaunketa (AFI) de autoconcepto físico. Apuntes Educación Física y Deportes, (82), .[fecha de Consulta 3 de Agosto de 2021]. ISSN: 1577-4015. Disponible en: https://www.redalyc.org/articulo.oa?id=551656963013 Ventura, J., Jara, S., García, C. y Ortiz, C. (2018). Validación de una escala de perfeccionismo en niños peruanos. Actualidades en Psicología, 32(124),16-33.[fecha de Consulta 3 de Agosto de 2021]. ISSN: 0258-6444. Disponible en: https://www.redalyc.org/articulo.oa?id=133257151003
Compartir