Вероятность победы простыми словами: что на самом деле означает это число

Покажите вероятность победы на живом табло — и сразу произойдут две вещи. Вырастет вовлечённость, а кто-нибудь в комментариях укажет, что модель дала 92% игроку, который потом проиграл.

Вторая реакция интереснее, потому что она выдаёт реальное непонимание того, что означает это число, — и отрасль в целом не удосужилась его исправить.

Это частота, а не прогноз

Когда ZetAI Predict говорит 92%, это конкретное, проверяемое утверждение: во всех исторических ситуациях, похожих на текущую, игрок в такой позиции в итоге выигрывал 92 раза из 100.

А значит, в восьми случаях из ста он проигрывал. Модель, которая говорит 92% и права, ошибётся примерно один раз из двенадцати. Если бы при 92% она никогда не ошибалась, число было бы неверным — ей следовало бы назвать 99%.

Поэтому мы оцениваем модель по калибровке, а не по точности. Возьмите все моменты, когда модель говорила 70%: игрок должен был выиграть почти ровно 70% из них. Модель, которая уверенно и систематически ошибается в одну сторону, гораздо опаснее неуверенной, потому что выглядит авторитетно.

На что на самом деле смотрит модель

Наивно кажется, что вероятность победы — функция счёта. На практике один счёт — на удивление слабый сигнал: 11:8 во второй партии означает совершенно разное в зависимости от того, как прошла первая партия и кто подаёт.

• Состояние счёта — очки, геймы и, что принципиально, сколько ещё осталось играть, чтобы отыграть отставание.
• Подача — в одних видах спорта она значит больше, чем в других, и важнее всего при определённом счёте.
• Моментум — последние серии очков, которые в ракеточных видах спорта несут реальный прогностический сигнал сверх того, что содержится в самом счёте.
• Априорные данные об игроках — прошлая форма, личные встречи и рейтинг; их вес снижается по мере хода матча и накопления данных в реальном времени.
• Контекст матча — раунд, турнир, стадия соревнований и закономерности длительности розыгрышей к этому моменту.

У каждого вида спорта своя модель. Отставание в одно очко в настольном теннисе при 9:10 в решающей партии — совсем не то же самое, что отставание в одно очко в бадминтоне при 19:20, и это снова другое дело, чем проигрывать одно очко в борьбе за двадцать секунд до конца.

Зачем она нужна на экране

Зрителю она делает то, что делает хороший комментатор: подсказывает, когда стоит обратить внимание. Вероятность, которая меняется на двадцать пунктов за три розыгрыша, — сигнал, что только что что-то произошло, а на странице с несколькими кортами это самый быстрый способ найти матч, который стоит смотреть.

В трансляции переломный момент становится триггером для хайлайта: самые резкие скачки вероятности в матче, по сути, и есть его ключевые моменты — именно по ним автоматическое создание хайлайтов решает, что нарезать.

Тренеру ретроспективная кривая полезнее текущего числа. Где матч переломился? Был ли это единичный провал или медленный дрейф? Падала ли вероятность победы спортсмена при одном и том же счёте на протяжении пяти матчей? Такой вывод для тренера по одному табло не получить никогда.

Где мы её не покажем

По умолчанию мы не показываем вероятность победы в юношеских возрастных категориях. Четырнадцатилетнему игроку не нужен экран, сообщающий всему залу, что у него 6% шансов, пока он ещё играет, а польза для тренера не перевешивает того, как это действует на юного спортсмена. Тренерам она доступна после матча, в ретроспективном режиме, — там она и приносит больше всего пользы.