¿Alguna vez te has preguntado cómo los científicos toman decisiones con datos contradictorios? Imagina que tienes 10 estudios sobre el efecto de las becas en el rendimiento escolar en Guayaquil: unos muestran un aumento del 5%, otros una disminución del 2%, y otros no encuentran cambios. ¿Cómo decides si las becas funcionan? El meta-análisis es la herramienta que combina estos resultados dispersos en una respuesta clara. En este examen tipo Ser Bachiller, no solo aprenderás la teoría, sino que aplicarás meta-análisis a casos ecuatorianos reales: desde programas de salud en Cuenca hasta investigaciones sobre turismo en Galápagos. ¡Prepárate para convertirte en un experto en evidencia científica!
Ejercicio 1: Conceptos fundamentales del meta-análisis (10 puntos)
En el Ecuador, instituciones como el Ministerio de Educación y universidades realizan estudios sobre el impacto de programas sociales. Sin embargo, los resultados suelen ser contradictorios. Un meta-análisis podría resolver esta situación. Responde las siguientes preguntas basándote en la fuente [1].
- Define con tus propias palabras qué es un meta-análisis y menciona su objetivo principal.
- Explica por qué el meta-análisis mejora la potencia estadística en comparación con un solo estudio.
- Proporciona dos ejemplos de situaciones ecuatorianas donde el meta-análisis sería útil (ej: turismo en Galápagos, salud en Cuenca).
Solución completa
Pregunta 1 (3 pts) — Define con tus propias palabras qué es un meta-análisis y menciona su objetivo principal.
- Definición — Un meta-análisis es un método estadístico que combina los resultados cuantitativos de múltiples estudios independientes que abordan una misma pregunta de investigación.
- Objetivo — Su objetivo principal es obtener una estimación más precisa del efecto global, resolviendo incertidumbres o contradicciones entre estudios individuales.
→ Un meta-análisis es un método que sintetiza datos cuantitativos de varios estudios sobre un mismo tema para obtener una conclusión más robusta. Su objetivo es mejorar la precisión de las estimaciones y resolver discrepancias entre estudios.
Pregunta 2 (4 pts) — Explica por qué el meta-análisis mejora la potencia estadística en comparación con un solo estudio.
- Potencia estadística — La potencia estadística es la probabilidad de detectar un efecto real si este existe. Al combinar estudios, el meta-análisis aumenta el tamaño de la muestra efectiva, reduciendo la variabilidad y haciendo más probable detectar efectos pequeños pero reales.
→ El meta-análisis mejora la potencia estadística porque al combinar múltiples estudios aumenta el número total de observaciones, reduciendo el error estándar y haciendo más probable detectar efectos significativos.
Pregunta 3 (3 pts) — Proporciona dos ejemplos de situaciones ecuatorianas donde el meta-análisis sería útil (ej: turismo en Galápagos, salud en Cuenca).
- Ejemplos locales — Ejemplos válidos incluyen: meta-análisis sobre el impacto de las becas 'Quito sin Hambre' en el rendimiento escolar, estudios combinados sobre la efectividad de vacunas en zonas rurales de Cuenca, o análisis de la satisfacción turística en Galápagos.
→ Ejemplo 1: Meta-análisis sobre el efecto de las becas municipales en el rendimiento académico en Guayaquil. Ejemplo 2: Combinación de estudios sobre la prevalencia de desnutrición infantil en comunidades indígenas de la Amazonía ecuatoriana.
Rúbrica de evaluación
| Definición correcta y clara del meta-análisis | 3 pts |
| Explicación precisa de la mejora en potencia estadística | 4 pts |
| Dos ejemplos ecuatorianos relevantes y bien explicados | 3 pts |
Ejercicio 2: Cálculo del efecto combinado con modelo de efectos fijos (20 puntos)
Un equipo de investigadores en Quito estudia el impacto de un programa de alfabetización en adultos. Se recolectaron datos de 5 estudios independientes en diferentes ciudades del Ecuador. Los resultados se presentan en la siguiente tabla:
- Estudio 1: Efecto = 0.45, Error estándar (SE) = 0.12
- Estudio 2: Efecto = 0.38, SE = 0.09
- Estudio 3: Efecto = 0.52, SE = 0.15
- Estudio 4: Efecto = 0.40, SE = 0.10
- Estudio 5: Efecto = 0.48, SE = 0.11
- Calcula el tamaño del efecto combinado usando el modelo de efectos fijos.
- Interpreta el resultado obtenido en el contexto del programa de alfabetización.
- ¿Qué asumciones se hacen al usar el modelo de efectos fijos?
Solución completa
Pregunta 1 (12 pts) — Calcula el tamaño del efecto combinado usando el modelo de efectos fijos.
- Datos — Se tienen 5 estudios con sus efectos y errores estándar.
- Pesos — En el modelo de efectos fijos, el peso de cada estudio es inversamente proporcional a su varianza: .
- Cálculo de pesos — Calculamos los pesos para cada estudio.
- Suma de pesos — Sumamos todos los pesos.
- Efecto combinado — El efecto combinado se calcula como el promedio ponderado: .
- Cálculo final — Sustituyendo los valores:
→ El tamaño del efecto combinado es aproximadamente 0.40.
Pregunta 2 (5 pts) — Interpreta el resultado obtenido en el contexto del programa de alfabetización.
- Interpretación — Un efecto combinado de 0.40 indica un efecto moderado del programa de alfabetización. Esto sugiere que, en promedio, el programa tiene un impacto positivo en la reducción del analfabetismo en adultos.
→ El efecto combinado de 0.40 indica que el programa de alfabetización tiene un impacto moderado y positivo en la población adulta ecuatoriana.
Pregunta 3 (3 pts) — ¿Qué asumciones se hacen al usar el modelo de efectos fijos?
- Asunciones — El modelo de efectos fijos asume que todos los estudios estiman el mismo efecto subyacente y que las diferencias observadas se deben solo al error de muestreo.
→ Asume que todos los estudios miden el mismo efecto verdadero y que las diferencias en los resultados se deben únicamente al azar (error de muestreo).
Rúbrica de evaluación
| Cálculo correcto del efecto combinado (fórmula y aritmética) | 10 pts |
| Interpretación adecuada del resultado en contexto ecuatoriano | 5 pts |
| Mención correcta de las asunciones del modelo | 5 pts |
Ejercicio 3: Interpretación de un forest plot en salud pública (15 puntos)
En Cuenca, el Ministerio de Salud Pública realizó un meta-análisis sobre la efectividad de una campaña de vacunación contra la influenza en adultos mayores. El forest plot resultante se muestra a continuación (datos simulados para el ejercicio).
- Estudio A: Efecto = 0.75, IC 95% = [0.60, 0.90]
- Estudio B: Efecto = 0.85, IC 95% = [0.70, 1.00]
- Estudio C: Efecto = 0.65, IC 95% = [0.50, 0.80]
- Estudio D: Efecto = 0.90, IC 95% = [0.75, 1.05]
- Efecto combinado: 0.80, IC 95% = [0.70, 0.90]
- Dibuja el forest plot basado en los datos proporcionados (puedes usar una escala aproximada).
- ¿Qué estudios muestran un efecto estadísticamente significativo? Justifica tu respuesta.
- Calcula el estadístico I^2 para evaluar la heterogeneidad entre estudios. Interpreta el resultado.
- ¿Qué conclusión puedes sacar sobre la efectividad de la campaña de vacunación en el contexto de Cuenca?
Solución completa
Pregunta 1 (4 pts) — Dibuja el forest plot basado en los datos proporcionados (puedes usar una escala aproximada).
- Estructura del plot — Un forest plot muestra cada estudio como un cuadrado (tamaño proporcional al peso) con una línea horizontal que representa el intervalo de confianza (IC) 95%. El efecto combinado se muestra como un diamante.
- Dibujo — En una hoja cuadriculada, se dibujarían 5 líneas horizontales con cuadrados en los puntos de efecto. El cuadrado del estudio D sería el más grande (por tener el IC más estrecho). El diamante del efecto combinado estaría centrado en 0.80 con IC [0.70, 0.90].
→ Ver descripción del dibujo. El forest plot debe mostrar 5 estudios con sus IC y un diamante para el efecto combinado.
Pregunta 2 (4 pts) — ¿Qué estudios muestran un efecto estadísticamente significativo? Justifica tu respuesta.
- Significancia — Un estudio tiene efecto estadísticamente significativo si su IC 95% no incluye el valor nulo (generalmente 0 o 1 dependiendo de la métrica).
- Análisis — Estudio A: IC [0.60, 0.90] no incluye 1 → significativo. Estudio B: IC [0.70, 1.00] incluye 1 → no significativo (borde). Estudio C: IC [0.50, 0.80] no incluye 1 → significativo. Estudio D: IC [0.75, 1.05] incluye 1 → no significativo.
→ Los estudios A y C muestran efectos estadísticamente significativos porque sus intervalos de confianza no incluyen el valor nulo (1).
Pregunta 3 (4 pts) — Calcula el estadístico I^2 para evaluar la heterogeneidad entre estudios. Interpreta el resultado.
- Fórmula — El estadístico I^2 mide la proporción de variabilidad en los efectos debido a la heterogeneidad en lugar de al azar. Se calcula como , donde Q es el estadístico de Cochran y df = número de estudios - 1.
- Cálculo de Q — Q se calcula como la suma de los pesos por las diferencias al cuadrado entre cada efecto y el efecto combinado. Para simplificar, asumamos que Q = 12.5 (valor simulado).
- Cálculo — df = 5 - 1 = 4. Entonces .
- Interpretación — Un de 68% indica heterogeneidad moderada-alta. Esto sugiere que los estudios no son homogéneos y que hay factores adicionales que afectan los resultados.
→ = 68%. Esto indica una heterogeneidad moderada-alta entre los estudios, sugiriendo que hay factores adicionales que influyen en la efectividad de la vacuna más allá del azar.
Pregunta 4 (3 pts) — ¿Qué conclusión puedes sacar sobre la efectividad de la campaña de vacunación en el contexto de Cuenca?
- Conclusión — Aunque hay heterogeneidad, el efecto combinado de 0.80 con IC [0.70, 0.90] sugiere que la campaña de vacunación es efectiva en general. Sin embargo, la heterogeneidad indica que los resultados varían según el contexto local (ej: diferencias en la población objetivo entre estudios).
→ La campaña de vacunación es efectiva en promedio (efecto combinado 0.80), pero existe heterogeneidad significativa que requiere investigar las causas de las diferencias entre estudios.
Rúbrica de evaluación
| Dibujo correcto del forest plot (estructura y escala) | 4 pts |
| Identificación correcta de estudios significativos con justificación | 4 pts |
| Cálculo e interpretación correctos de | 4 pts |
| Conclusión coherente con los datos y contexto ecuatoriano | 3 pts |
Ejercicio 4: Identificación y mitigación de sesgos (15 puntos)
En un meta-análisis sobre la efectividad de programas de emprendimiento juvenil en Guayaquil, los investigadores sospechan que algunos estudios pueden tener sesgos. Analiza las siguientes situaciones:
- Estudio 1: Solo incluye participantes de un barrio específico de Guayaquil.
- Estudio 2: No reporta los resultados de 3 participantes que abandonaron el programa.
- Estudio 3: Usa una definición diferente de 'éxito del emprendimiento' que los otros estudios.
- Estudio 4: Fue financiado por la misma organización que implementó el programa.
- Identifica el tipo de sesgo presente en cada estudio y explica por qué afecta la validez del meta-análisis.
- Propón una estrategia concreta para mitigar cada sesgo en futuros meta-análisis.
- ¿Por qué es importante registrar todos los estudios, incluso aquellos con resultados negativos?
Solución completa
Pregunta 1 (8 pts) — Identifica el tipo de sesgo presente en cada estudio y explica por qué afecta la validez del meta-análisis.
- Sesgo de selección — Estudio 1: Solo incluye un barrio específico, lo que limita la generalización a toda Guayaquil. Afecta la validez externa.
- Sesgo de informe selectivo — Estudio 2: No reporta datos de participantes que abandonaron, lo que puede sesgar los resultados hacia efectos positivos. Afecta la validez interna.
- Sesgo de definición — Estudio 3: Usa una definición diferente de 'éxito', lo que hace que los resultados no sean comparables con otros estudios. Afecta la consistencia metodológica.
- Sesgo de financiamiento — Estudio 4: El financiamiento por parte de la organización que implementó el programa puede llevar a resultados inflados. Afecta la credibilidad.
→ Estudio 1: Sesgo de selección (muestra no representativa). Estudio 2: Sesgo de informe selectivo (datos incompletos). Estudio 3: Sesgo de definición (operacionalización inconsistente). Estudio 4: Sesgo de financiamiento (conflicto de intereses).
Pregunta 2 (4 pts) — Propón una estrategia concreta para mitigar cada sesgo en futuros meta-análisis.
- Mitigación selección — Incluir estudios con muestras diversas geográficamente en Guayaquil (ej: barrios norte, sur, centro).
- Mitigación informe — Exigir a los autores que reporten todos los datos, incluyendo abandonos, en los protocolos de meta-análisis.
- Mitigación definición — Establecer criterios homogéneos para definir 'éxito' antes de combinar estudios (ej: ingresos mensuales > 500 USD).
- Mitigación financiamiento — Evaluar la calidad metodológica de los estudios independientemente de su fuente de financiamiento (usar herramientas como la escala de Cochrane).
→ Selección: Incluir estudios con muestras diversas. Informe: Exigir protocolos de reporte completo. Definición: Homogeneizar criterios antes del meta-análisis. Financiamiento: Evaluar calidad metodológica independientemente del origen del estudio.
Pregunta 3 (3 pts) — ¿Por qué es importante registrar todos los estudios, incluso aquellos con resultados negativos?
- Publicación selectiva — Si solo se publican estudios con resultados positivos, el meta-análisis sobreestimará el efecto real. Esto se conoce como sesgo de publicación.
→ Es crucial registrar todos los estudios, incluso con resultados negativos, para evitar el sesgo de publicación que distorsiona la evidencia disponible.
Rúbrica de evaluación
| Identificación correcta de los 4 tipos de sesgo con explicación | 8 pts |
| Estrategias de mitigación concretas y realistas para cada sesgo | 4 pts |
| Explicación clara de la importancia de registrar estudios negativos | 3 pts |
Ejercicio 5: Meta-análisis sobre turismo sostenible en Galápagos (20 puntos)
Un equipo de investigadores de la Universidad San Francisco de Quito (USFQ) realiza un meta-análisis sobre el impacto de las certificaciones de turismo sostenible en la satisfacción de los visitantes a Galápagos. Se recopilaron datos de 4 estudios realizados entre 2018 y 2023:
- Estudio 2018: Efecto = 0.65, SE = 0.14
- Estudio 2019: Efecto = 0.72, SE = 0.11
- Estudio 2020: Efecto = 0.68, SE = 0.13
- Estudio 2023: Efecto = 0.75, SE = 0.10
- Calcula el tamaño del efecto combinado usando el modelo de efectos fijos.
- Interpreta el resultado en el contexto del turismo sostenible en Galápagos.
- Si el efecto combinado fuera 0.50 con IC [0.40, 0.60], ¿qué implicaciones tendría para las políticas de certificación?
- Propón una recomendación basada en los resultados para el Ministerio de Turismo del Ecuador.
Solución completa
Pregunta 1 (10 pts) — Calcula el tamaño del efecto combinado usando el modelo de efectos fijos.
- Pesos — Calculamos los pesos: .
- Cálculo de pesos — = 51.02, = 82.64, = 59.17, = 100.
- Suma de pesos — W = 51.02 + 82.64 + 59.17 + 100 = 292.83.
- Efecto combinado — Efect = .
- Cálculo final — Efect = = = 0.714
→ El tamaño del efecto combinado es aproximadamente 0.71.
Pregunta 2 (5 pts) — Interpreta el resultado en el contexto del turismo sostenible en Galápagos.
- Interpretación — Un efecto de 0.71 indica que las certificaciones de turismo sostenible tienen un impacto positivo y moderado-alto en la satisfacción de los visitantes a Galápagos. Esto sugiere que los turistas valoran estas certificaciones.
→ Las certificaciones de turismo sostenible aumentan significativamente la satisfacción de los visitantes en Galápagos, con un efecto combinado de 0.71.
Pregunta 3 (3 pts) — Si el efecto combinado fuera 0.50 con IC [0.40, 0.60], ¿qué implicaciones tendría para las políticas de certificación?
- Implicaciones — Un efecto combinado de 0.50 con IC [0.40, 0.60] indicaría un impacto moderado pero menos claro. El IC estrecho sugiere precisión, pero el valor 0.50 (efecto pequeño) podría no justificar inversiones masivas en certificaciones sin evidencia adicional.
→ Implicaría que el impacto de las certificaciones en la satisfacción turística es pequeño pero consistente. Las políticas deberían enfocarse en mejorar la calidad de las certificaciones o en otros factores que influyan más en la satisfacción.
Pregunta 4 (2 pts) — Propón una recomendación basada en los resultados para el Ministerio de Turismo del Ecuador.
- Recomendación — Basado en el efecto de 0.71, se recomienda al Ministerio de Turismo del Ecuador: 1) Promover activamente las certificaciones de turismo sostenible en Galápagos, 2) Invertir en campañas de comunicación para que los turistas conozcan estas certificaciones, 3) Evaluar el impacto económico de estas certificaciones en la economía local.
→ Recomiendo al Ministerio de Turismo del Ecuador promover las certificaciones de turismo sostenible en Galápagos, ya que tienen un impacto positivo demostrado en la satisfacción de los visitantes.
Rúbrica de evaluación
| Cálculo correcto del efecto combinado con fórmula y aritmética | 8 pts |
| Interpretación contextualizada en turismo de Galápagos | 5 pts |
| Análisis de implicaciones para políticas con justificación | 4 pts |
| Recomendación concreta y realista para el Ministerio de Turismo | 3 pts |
Ejercicio 6: Crítica a un meta-análisis sobre agricultura en Ambato (15 puntos)
Un meta-análisis publicado en 2023 evaluó el impacto de técnicas agroecológicas en el rendimiento de cultivos de papa en la provincia de Tungurahua (Ambato). Los autores concluyeron que las técnicas agroecológicas aumentan el rendimiento en un 25%. Sin embargo, un revisor externo identificó varias limitaciones. Analiza el siguiente resumen del meta-análisis:
- Número de estudios incluidos: 8
- Años cubiertos: 2010-2020
- Población: Solo pequeños agricultores de la zona de Ambato
- Métrica principal: Rendimiento en toneladas por hectárea
- Conclusión: Aumento del 25% en rendimiento con técnicas agroecológicas
- Identifica al menos tres limitaciones metodológicas de este meta-análisis.
- ¿Qué tipo de sesgo podría estar presente si solo se incluyeron estudios con resultados positivos?
- Propón dos mejoras concretas para futuros meta-análisis sobre este tema en el Ecuador.
Solución completa
Pregunta 1 (9 pts) — Identifica al menos tres limitaciones metodológicas de este meta-análisis.
- Limitaciones — 1) Muestra limitada geográficamente (solo Ambato), lo que reduce la generalización a otras regiones como Loja o Manabí. 2) Período temporal largo (10 años) que puede incluir cambios en prácticas agrícolas no controlados. 3) Solo 8 estudios, lo que limita la potencia estadística. 4) Población homogénea (pequeños agricultores), no representativa de todos los tipos de agricultura en el Ecuador.
→ Limitaciones: 1) Muestra geográficamente limitada (solo Ambato), 2) Período temporal largo (2010-2020) con posibles cambios no controlados, 3) Número reducido de estudios (8), 4) Población no representativa (solo pequeños agricultores).
Pregunta 2 (3 pts) — ¿Qué tipo de sesgo podría estar presente si solo se incluyeron estudios con resultados positivos?
- Sesgo de publicación — Si solo se incluyeron estudios con resultados positivos, el meta-análisis sobreestima el efecto real. Esto se conoce como sesgo de publicación o 'file drawer problem'.
→ El sesgo de publicación: estudios con resultados negativos o nulos no fueron incluidos, lo que infla artificialmente el efecto del 25%.
Pregunta 3 (3 pts) — Propón dos mejoras concretas para futuros meta-análisis sobre este tema en el Ecuador.
- Mejoras — 1) Incluir estudios de otras provincias del Ecuador (ej: Loja, Manabí) para aumentar la representatividad. 2) Usar bases de datos de literatura gris (tesis, informes técnicos) para reducir el sesgo de publicación. 3) Establecer criterios estrictos de inclusión para controlar variables confusoras como tipo de suelo o clima. 4) Realizar análisis de subgrupos por región o tamaño de explotación.
→ Mejoras: 1) Incluir estudios de otras provincias, 2) Buscar literatura gris para reducir sesgo de publicación, 3) Establecer criterios de inclusión estrictos, 4) Analizar subgrupos por región o tamaño de explotación.
Rúbrica de evaluación
| Identificación de al menos 3 limitaciones metodológicas válidas | 9 pts |
| Explicación correcta del sesgo de publicación | 3 pts |
| Propuestas de mejora concretas y realistas para el contexto ecuatoriano | 3 pts |