Если некоторый фактор по-разному отражается на двух сравниваемых версиях системы и это происходит стабильно, как сейчас, это называют ошибкой конфаундинга (confounder bias)7. Ошибка конфаундинга может привести к неверным решениям о принятии или отклонении изменений в системе
Тюнинг систем: экспериментирование для инженеров от A/B-тестирования до байесовской оптимизации
·
Дэвид Свит