A veces sucede que hay un problema con la infraestructura, un glitch temporal, y la prueba falla, por eso las volvemos a ejecutar. ¿Cómo manejas esto?

El problema de fallos temporales en la infraestructura, que provocan caídas en las pruebas, es una situación común. Para trabajar eficazmente con esto, se aplican varios enfoques:

1. Reintento (re-ejecución de la prueba) — repetir automáticamente la prueba en caso de fallo, para excluir caídas falsas debido a fallos temporales.
2. Identificación de pruebas inestables — analizamos qué pruebas fallan con frecuencia debido a la infraestructura y las marcamos para atención especial.
3. Registro y monitoreo — recopilamos logs y métricas para entender las causas de los fallos.
4. Aislamiento del entorno de prueba — minimizamos la influencia de factores externos, por ejemplo, usando contenedores o máquinas virtuales.
5. Mejora de la infraestructura — tras el análisis, eliminamos las causas raíz de los fallos.

Ejemplo de reintento en Python usando pytest y el plugin flaky:

import pytest

@pytest.mark.flaky(reruns=3, reruns_delay=2)
def test_example():
    assert some_unstable_operation()

Este enfoque ayuda a aumentar la estabilidad de las predicciones de las pruebas y reducir el ruido de los problemas temporales en la infraestructura.