O que são experimentos de switchback?

Experimentos de troca (Switchback experiments) são um método de conduzir experimentos em que o mesmo grupo de utilizadores ou objetos alterna entre versões de controlo e experimentais do produto ou algoritmo. Esta abordagem ajuda a reduzir a influência de fatores temporais e flutuações sazonais nos resultados, pois cada utilizador atua tanto como controlo quanto como experimento em períodos diferentes.

Por exemplo, numa aplicação móvel, pode-se mostrar aos utilizadores a interface antiga durante uma semana, e na semana seguinte a nova, depois voltar à antiga, e assim por diante. Isto permite avaliar com maior precisão o efeito das mudanças, tendo em conta as variações nas condições externas.