Патчи и отзывы How to Fish: виден ли эффект обновлений

Содержание
  1. Таблица
  2. Что видно невооружённым глазом
  3. Почему из этого НЕЛЬЗЯ сделать вывод «патчи вредят»
  4. Единственное совпадение, достойное внимания
  5. Что из этого полезного

За первые восемь дней после релиза вышло шесть патчнотов. Логично спросить: видно ли их в ежедневной оценке? Мы свели две таблицы Steam — гистограмму отзывов по дням и хронику патчей — в одну.

Сразу предупреждение, которое важнее самой таблицы: это совпадение во времени, а не доказанное влияние. Ниже объясняем, почему.

Таблица

день положительных отзывов за день патч в тот день
20.08 96,3 % 767 релиз
21.08 94,6 % 1 854 1.0.4
22.08 93,7 % 3 593 1.0.5
23.08 93,6 % 4 535 1.0.6
24.08 94,4 % 4 455 1.0.8 и 1.0.9
25.08 93,8 % 4 007
26.08 93,8 % 3 999
27.08 95,2 % 4 351 1.0.10
28.08 95,4 % 3 436
29.08 95,1 % 3 340
30.08 95,5 % 3 237

31 августа в таблице нет намеренно: день ещё не закончился, и его цифра неполная.

Что видно невооружённым глазом

Минимум — 23 августа, 93,6 %. Это день патча 1.0.6. Максимум после релиза — 30 августа, 95,5 %. Это третий день подряд без единого патча. Вся амплитуда за 11 дней — 1,9 процентного пункта.

Если посчитать среднее по группам:

  • дни, когда вышел патч (21, 22, 23, 24 и 27 августа) — 94,30 %;
  • дни без патча (25, 26, 28, 29 и 30 августа) — 94,72 %.

То есть в дни патчей оценка была в среднем на 0,42 пункта ниже.

Почему из этого НЕЛЬЗЯ сделать вывод «патчи вредят»

Две группы дней разделены не патчами, а временем. Все дни с патчами — ранние, все дни без патчей (кроме 25-26 августа) — поздние. А оценка и так растёт со временем сама собой: первая волна покупателей всегда импульсивнее следующих.

Это видно в третьем столбце: пик по количеству отзывов — 23 августа (4 535), и именно этот день дал худшую долю. Дальше поток слабеет — 3 237 отзывов 30 августа — а доля позитива растёт.

То есть время и патчи менялись одновременно, и разделить их на этих данных нельзя. Чтобы доказать влияние патча, нужна была бы группа сравнения — игроки, которые этот патч не получили. Такой группы не существует.

Единственное совпадение, достойное внимания

25 и 26 августа — два дня подряд без патчей и с одинаковой долей 93,8 %. 27 августа выходит 1.0.10, и в тот же день доля прыгает до 95,2 % — это наибольший дневной прирост в выборке, +1,4 пункта.

Но даже здесь мы не утверждаем причину: отзывы в тот день писали и те, кто патч ещё не видел, а распределения «до / после установки обновления» Steam не показывает.

Что из этого полезного

Одно наблюдение всё же устойчиво и не зависит от причин: ежедневная доля позитива за 11 дней ни разу не упала ниже 93,6 %. То есть ни релизные проблемы, ни патчи не создали дня, который можно было бы назвать провальным. А общая оценка игры за всё время — 94,9 %, подпись «Очень положительные».

Частые вопросы

Улучшили ли патчи оценку How to Fish?

Измерено лишь совпадение во времени. В дни патчей средняя доля позитива была 94,30 %, в дни без патчей — 94,72 %. Причину эти данные не доказывают.

Какой день был худшим по оценке?

23 августа — 93,6 % позитива при 4 535 отзывах. Это и день патча 1.0.6, и пик потока отзывов.

Падала ли оценка ниже 93,6 %?

Нет. За 11 дней ни одни сутки не дали худшего результата.

Почему нельзя сказать, что патчи подняли оценку?

Потому что время и патчи менялись одновременно. Чтобы доказать влияние, нужна группа игроков без патча, а такой не существует.

Источники