Февраль 2017 — Заметка №5

К вопросу о метриках. История от чувака из Гугла:

When I was at Google, someone told me a story about a time that “they” completed a big optimization push only to find that measured page load times increased. When they dug into the data, they found that the reason load times had increased was that they got a lot more traffic from Africa after doing the optimizations. The team’s product went from being unusable for people with slow connections to usable, which caused so many users with slow connections to start using the product that load times actually increased.

Ускорили скорость загрузки страницы, а по метрикам скорость загрузки увеличилась, потому что ускорение привлекло (сделало страницу доступной) чуваков из Африки с медленным интернетом.

Метрики это правильно и отлично, убирают предвзятость. Но метрики надо правильно интерпретировать и стараться ВСЕГДА понимать причины, стоящими за их изменениями. Иначе можно сделать очень неправильные выводы.