Ми назвали шістьох бійців, чиїм цифрам вірити не можна. За десять днів вони зсунулися у вісім разів сильніше за решту
Першого листопада ми написали, що половині руху в нашому тір-листі ціна гріш, і назвали бійців, чиї цифри ненадійні. Це було перевірне твердження — і ми його перевірили.
Першого листопада ми розібрали власний тір-лист і сказали неприємну про себе річ: приблизно половину руху в ньому створює не гра, а арифметика. Там же ми назвали на імена шістьох, чиї цифри стрибають, і шістьох, чиїм можна вірити.
Це була обіцянка, яку легко проламати. Минуло десять днів, виборка зросла вдвічі — саме час звіритися.
Що ми обіцяли
Ось ті дванадцять імен і те, що з ними сталося.
| Боєць | Ми казали | Було | Стало | Зсув |
|---|---|---|---|---|
| Мег | стрибає | 41,9% | 48,6% | +6,7 |
| Wendy | стрибає | 52,4% | 55,9% | +3,5 |
| Беррі | стрибає | 50,1% | 53,1% | +3,0 |
| Роза | стрибає | 48,0% | 46,2% | −1,8 |
| Бонні | стрибає | 50,6% | 49,9% | −0,7 |
| Чарлі | стрибає | 52,6% | 52,7% | +0,1 |
| Фенг | рівний | 50,2% | 49,5% | −0,7 |
| Колетт | рівна | 51,0% | 50,5% | −0,5 |
| Спайк | рівний | 48,9% | 49,2% | +0,3 |
| Динамайк | рівний | 47,2% | 47,4% | +0,2 |
| Тік | рівний | 48,4% | 48,6% | +0,2 |
| Джессі | рівна | 48,8% | 48,9% | +0,1 |
Різниця вийшла восьмиразова
Середній зсув за модулем: у названих стрибучими — 2,63 пункта, у названих рівними — 0,33 пункта. Це різниця у 7,9 раза.
Якщо вишикувати всіх 108 бійців за тим, наскільки сильно кожен зрушив за десять днів, картина ще чіткіша. Мег посіла перше місце, Wendy третє, Беррі четверте — це рівно ті три імені, що стояли в нас першими у списку ненадійних.
Названі рівними розташувалися на місцях 44, 58, 76, 89, 97 і 105. Джессі — 105-та зі 108, тобто майже найнерухоміший боєць у грі.
Де ми промахнулися
Чесно: із шести «стрибучих» двоє не зрушили зовсім. Чарлі додав одну десяту — це 102-ге місце у списку руху, поряд із тими, кого ми оголосили взірцево рівними. Бонні втратила сім десятих, що в межах її власної похибки.
Тобто влучання не шість із шести, а чотири. Передбачення спрацювало як напрямок, а не як вирок кожному імені.
З іншого боку теж не ідеально: Фенг і Колетт формально зсунулися більше за свою похибку. Але зсунулися на сім і п’ять десятих пункта — тобто рівно настільки, наскільки ми самі радили не зважати.
Заодно перевірився головний висновок тієї статті
Ми твердили, що місця з четвертого по десяте — це не різні рівні сили, а один рівень, випадково розкладений по рядках. Тоді медіанний розрив між сусідами в цій частині десятки був 0,2 пункта.
Тепер, на вдвічі більшій виборці, він 0,1 пункта. Ось нинішні розриви, згори вниз: 2,5 · 2,9 · 0,3 · 0,1 · 0,8 · 0,1 · 0,1 · 0,0 · 0,2.
Перші троє, як і раніше, в окремій лізі, а далі — щільна купа, де між сьомим і восьмим місцем нуль цілих нуль десятих. Подвоєння даних не розвело їх по рівнях, а стиснуло ще тісніше. Отже, річ не в браку боїв: вони справді рівні.
Хто справді впав — і це не новачок
Найбільше падіння у грі — у Драко: мінус 4,3 пункта, з 59,6% до 55,3%. Десять днів тому він був третім у списку; тепер чотирнадцятий.
Ми чекали іншого. Здавалося логічним, що просядуть свіжі бійці: їх щойно розібрали, перші тижні вони виграють за рахунок незнайомості, а потім ринок до них звикає. Cosmo і Vince справді втратили по два пункти — і саме це підштовхувало до такого пояснення.
Але варто було подивитися на решту тих, хто впав, і версія розсипалася.
| Боєць | Номер у грі | Зсув |
|---|---|---|
| Драко | 80 | −4,3 |
| Джекі | 34 | −2,5 |
| Сем | 60 | −2,0 |
| Cosmo | 109 | −2,0 |
| Френк | 20 | −1,9 |
| Vince | 110 | −1,9 |
| Сенді | 28 | −1,9 |
| Ель Прімо | 10 | −1,8 |
Падати — не привілей новачків. В одній компанії з Cosmo і Vince сидять бійці під номерами 10, 20, 28 і 34, тобто з найстарішої частини ростера. Сильніше за Cosmo просіли лише двоє, сильніше за Vince — четверо, але це свідчить радше про те, що падіння на два пункти взагалі рідкість, а не про те, що новизна видихається.
А ось чого ми точно не очікували
Ми порахували зв’язок між порядком виходу бійця і величиною його зсуву. Якби новачки видихалися, зв’язок був би негативний і помітний.
Він дорівнює −0,07. Це нуль.
Ще більше: найновіша четверть списку виявилася найстійкішою його частиною.
| Четверть списку | Не зрушили | Зсув (медіана) |
|---|---|---|
| Найстаріша | 17 із 27 | −0,30 |
| Друга | 13 із 27 | −0,20 |
| Третя | 20 із 27 | −0,50 |
| Найновіша | 21 із 27 | −0,20 |
А зв’язок між віком бійця і його силою, про який ми писали окремо, не ослаб, а трохи зміцнів: було 0,70, стало 0,74. Найстаріша четверть ростера як не постачала у двадцятку найсильніших нікого, так і не постачає. Найновіша дала тринадцять із двадцяти тоді і п’ятнадцять тепер.
Скільки всього рухалося
Окрема цифра, яка ставить усе на місце. Ми порівняли кожного бійця з ним самим, роблячи поправку на розмір його виборки: зсув вважається справжнім лише тоді, коли він більший, ніж міг би дати випадок.
71 боєць зі 108 не зрушив узагалі. Справжніх зсувів 37, з них угору 13 і вниз 24. Типова похибка такого порівняння — 0,92 пункта, тобто все, що менше за пункт, читати немає сенсу.
Так виглядає гра, в якій за десять днів майже нічого не відбулося, — і це її нормальний стан, а не затишшя.
Що з цього випливає
Перевіряти свої прогнози варто вголос. Ми могли написати ту статтю і не повертатися до неї. Повернулися — і з’ясували, що метод працює, але слабше, ніж звучав: чотири імені з шести, а не шість.
Якщо освоюєте бійця, беріть із рівних. У Джессі цифра за десять днів змінилася на одну десяту. У Мег — на шість цілих сім десятих. Обіцянка першої чогось варта, обіцянка другої — ні.
Не шукайте в падінні сенсу, поки воно менше за два пункти. Майже весь список стоїть на місці, і будь-яка історія про «його послабили» вимагає спершу показати, що зсув узагалі більший за похибку.
Чого ці цифри не кажуть
Ми не слідкуємо за правками балансу. Тому не можемо відрізнити «новачки не видихаються» від «за ці десять днів нікого не торкалися». Твердження в нас одне: у спостережуваному вікні зв’язку між віком бійця і його зсувом немає.
Ми не порівнюємо між цими двома зрізами популярність. У першому на бій припадало в середньому 3,8 врахованих бійця, у другому 3,0 — склад режимів у вікні зсунувся, і частки участі виявилися б незіставними. Вінрейти від цього не страждають: вони рахуються в кожному зрізі окремо.
Десять днів — короткий відрізок. Він годиться, щоб перевірити розкид, і не годиться, щоб говорити про тенденцію.
Як ми це рахуємо
Зріз від 11 листопада: 1 853 327 боїв за три доби, зібраних з історії матчів живих гравців. Зріз від 1 листопада, з яким порівнюємо, — 855 971 бій. Виборка зросла вдвічі, бо ми підняли частоту опитування: раніше за прохід обходили дві тисячі гравців, тепер п’ять.
Похибку кожного вінрейту рахували за розміром його власної виборки, дев’яносто п’ять відсотків. Зсув визнавали справжнім, якщо він більший за сумарну похибку двох замірів. Медіанна виборка на бійця зараз — 35 тисяч боїв, найменша — 6,1 тисячі.
Виживання в загальний вінрейт не входить: там перемога зараховується за потрапляння в четвірку, шкала інша.
Свіжа таблиця — на сторінці мети.