Существуют и другие способы оценки влияния изменений в системе на бизнес-метрики. Например:
• знание предметной области;
• точность офлайн-модели;
• имитационное моделирование.
Тюнинг систем: экспериментирование для инженеров от A/B-тестирования до байесовской оптимизации
·
Дэвид Свит
