Entender la ciencia

Si una afirmación sobre alimentación es cierta, rara vez puede responderse con un solo estudio. Esta página explica los términos y las formas de razonar que utilizamos en todas las verificaciones.

  1. Cómo funcionan los estudios
  2. Por qué la correlación no demuestra causalidad
  3. Qué pueden y qué no pueden hacer los metaanálisis
  4. Qué significan los intervalos de confianza
  5. Por qué los estudios aislados pueden inducir a error
  6. Riesgos absolutos y relativos
  7. Detectar no es lo mismo que peligro
  8. Estudios en animales y en células
  9. Cómo se elaboran nuestras evaluaciones
  10. Estado de la evidencia y expedientes de evidencia

Cómo funcionan los estudios

La investigación en nutrición utiliza tipos de estudios muy diferentes. Responden a preguntas distintas y son propensos a errores distintos.

Por qué la correlación no demuestra causalidad

Que dos cosas ocurran juntas no significa que una cause la otra. Un ejemplo conocido: los días en que se vende mucho helado se ahogan más personas. El helado no provoca ahogamientos. Ambas cosas dependen del calor.

En los estudios de nutrición, estos factores de fondo se llaman factores de confusión. Las personas que beben muchos refrescos, por ejemplo, también pueden fumar más a menudo o hacer menos ejercicio. Los buenos estudios ajustan por estos factores, pero nunca por completo. Lo que queda se llama confusión residual.

Un segundo problema es la causalidad inversa: las personas que ya están enfermas a menudo cambian su alimentación. Puede parecer entonces que la nueva alimentación causó la enfermedad.

Una asociación se vuelve más creíble si es fuerte, aparece en muchos estudios independientes, aumenta con la cantidad consumida (relación dosis-respuesta), encaja en el tiempo, es biológicamente plausible y se confirma en experimentos. Ninguno de estos puntos por sí solo es una prueba.

Qué pueden y qué no pueden hacer los metaanálisis

Un metaanálisis combina estadísticamente los resultados de muchos estudios. Esto hace que el resultado sea más preciso y muestra si los estudios apuntan en la misma dirección.

Sin embargo, un metaanálisis solo es tan bueno como los estudios que contiene. Si agrupa muchos estudios observacionales sesgados, el resultado global también estará sesgado, solo que con menos incertidumbre. También importa la heterogeneidad: si los estudios individuales difieren mucho, un único valor medio significa poco.

Varios metaanálisis sobre el mismo tema contienen a menudo los mismos estudios. Por ello, tres metaanálisis no son automáticamente tres confirmaciones independientes. Comprobamos este solapamiento y no lo contamos más de una vez.

Qué significan los intervalos de confianza

Los estudios suelen presentar resultados así: “hazard ratio 1,06 (intervalo de confianza del 95 %: 1,03–1,10)”. El primer valor es la mejor estimación: un riesgo relativo un 6 % mayor. El intervalo entre paréntesis muestra el rango en el que muy probablemente se encuentra el valor verdadero, siempre que el estudio no tenga errores sistemáticos.

Por qué los estudios aislados pueden inducir a error

Cualquier estudio aislado puede llegar a un resultado que después no se confirme, por azar, por muestras pequeñas, por muchas preguntas analizadas a la vez o por una población particular. A esto se suma el sesgo de publicación: los resultados llamativos tienen más probabilidades de publicarse que los poco destacables.

Por ello no evaluamos si algún estudio respalda una afirmación. Con una selección sesgada, casi cualquier afirmación puede “demostrarse” con estudios. Lo que cuenta es la totalidad de la buena evidencia.

Riesgos absolutos y relativos

Un riesgo relativo indica en qué porcentaje aumenta o disminuye un riesgo en comparación con otro grupo. Un riesgo absoluto indica cuántas personas se ven realmente afectadas.

Ejemplo práctico (cifras inventadas a modo de ilustración): de 1000 personas, 2 desarrollan una determinada enfermedad en diez años. En otro grupo son 3 de cada 1000. El riesgo relativo es un 50 % mayor. Pero el riesgo absoluto solo aumenta en 1 de cada 1000 personas, es decir, en 0,1 puntos porcentuales.

Ambas afirmaciones son correctas, pero se perciben de forma muy diferente. Por ello, cuando están disponibles, indicamos ambas. Si un estudio no presenta cifras absolutas, lo decimos.

Detectar no es lo mismo que peligro

Los laboratorios modernos pueden detectar cantidades mínimas de sustancias, a menudo del orden de milmillonésimas de gramo. Que se encuentre una sustancia no dice todavía nada sobre si es perjudicial en esa cantidad. Lo que importa es:

Lo contrario también es cierto: para algunas sustancias, como determinadas sustancias perfluoroalquiladas y polifluoroalquiladas (PFAS), la EFSA ha fijado valores de referencia muy bajos (2020: 4,4 nanogramos por kilogramo de peso corporal por semana para la suma de cuatro PFAS). En este caso, una alimentación normal puede llevar a algunas personas al rango del valor de referencia. Por eso examinamos cada caso individualmente.

Estudios en animales y en células

Los experimentos en células o animales muestran si un mecanismo es posible. Sin embargo, las dosis suelen ser allí mucho más altas que en la alimentación, y los animales procesan las sustancias de forma diferente a los humanos. Siempre señalamos expresamente estos estudios. La plausibilidad biológica no es una prueba clínica.

Cómo se elaboran nuestras evaluaciones

Cada afirmación recibe dos valoraciones separadas:

  1. Veredicto en una escala de siete niveles, de “Verdadero” a “Falso”, incluido “Incierto / evidencia insuficiente”. La falta de evidencia no significa que una afirmación sea falsa.
  2. Certeza de la evidencia (alta, moderada, baja, muy baja), basada en el sistema GRADE, utilizado internacionalmente. Indica qué confianza podemos tener en el conjunto de la evidencia. Los estudios observacionales parten de un nivel más bajo que los ensayos aleatorizados y se rebajan aún más por sus deficiencias.

Desglosamos las afirmaciones amplias en subafirmaciones. “Los huevos perjudican a todo el mundo” puede refutarse, mientras que “determinadas personas deberían limitar su consumo de huevos” puede ser correcto. También valoramos los estudios individuales en varias dimensiones, como la calidad metodológica, el riesgo de sesgo, la precisión y la transferibilidad regional, y comprobamos si se citaron correctamente.

Utilizamos herramientas como RoB 2, ROBINS-E, AMSTAR 2 y GRADE de forma orientativa. Una evaluación formal completa con estas herramientas requiere textos completos, protocolos de estudio y, normalmente, varios revisores independientes. Eso no fue posible aquí. Por ello, nuestros juicios se señalan expresamente como evaluaciones metodológicas simplificadas.

Estado de la evidencia, expedientes de evidencia y profundidad de la revisión

Desde la revisión sistemática de la evidencia (fase 4), cada afirmación tiene también un estado de la evidencia. Expresa con palabras qué tipo de respuesta da la ciencia:

Cuando evidencia de alta calidad refuta claramente una afirmación médica general, lo decimos con claridad: “Esta afirmación es falsa.” Cuando los datos son contradictorios o insuficientes, no afirmamos más certeza de la que permite la evidencia. Una afirmación correcta se califica como correcta, aunque otras afirmaciones del mismo sistema sean erróneas.

Para cada afirmación existe un expediente de evidencia: una pregunta de investigación concreta (estructurada como PICO para intervenciones o PECO para exposiciones: población, intervención o exposición, comparación, desenlaces), búsquedas documentadas en PubMed, Europe PMC, la Cochrane Library y otras fuentes –por separado para la evidencia a favor y en contra–, los estudios más sólidos de ambos lados, una explicación de las contradicciones aparentes, una declaración sobre si las diferencias regionales importan, y los motivos para mantener o cambiar el veredicto. Cuando los estudios publican datos suficientes, recalculamos resultados clave (por ejemplo, riesgos absolutos a partir del número de eventos); en caso contrario, decimos que no fue posible recalcular. Los datos que faltan nunca se completan.

No contamos publicaciones. Varios metaanálisis que contienen los mismos estudios primarios no son confirmaciones independientes. PRISMA 2020 es un estándar para la comunicación transparente de revisiones sistemáticas, no una herramienta para valorar la calidad de los estudios. GRADE valora la certeza del conjunto de la evidencia para un desenlace y no sustituye la evaluación de los estudios individuales (RoB 2 para ensayos aleatorizados, ROBINS-I y ROBINS-E para estudios no aleatorizados, AMSTAR 2 y ROBIS para revisiones sistemáticas).

Para cada estudio indicamos con qué profundidad se revisó: verificado bibliográficamente (el estudio existe; título, autores, año e identificador coinciden), resumen revisado, texto completo revisado o texto completo con una evaluación estructurada del riesgo de sesgo. Ningún estudio ha sido evaluado todavía formalmente por dos revisores independientes, y no se ha realizado ninguna revisión independiente por expertos humanos. Nunca describimos una revisión como formal o humana si no tuvo lugar.