Почему точная модель прогнозов UFC может быть убыточной

Короткий ответ

Точная модель прогнозов UFC всё равно может терять деньги. Выбрать вероятного победителя и найти выгодный коэффициент — разные задачи. При проходимости 70% стратегия убыточна, если для выхода в ноль нужно 72%. Маржа букмекера повышает этот порог. Плохо откалиброванные вероятности могут создавать преимущество, которого нет. Несколько дорогих апсетов тоже могут стереть прибыль от многих небольших выигрышей. Прибыль зависит от коэффициента, качества вероятностей, отбора ставок и размера выборки. Точность одинаково считает каждый верный прогноз. Баланс счёта — нет.

Кратко о данных: в основе статьи лежат два исследования рынка MMA. Первое охватывает 2,122 поединка номерных турниров UFC с июля 2009 года по сентябрь 2023 года. Второе включает 6,190 боёв UFC с июня 2007 года по декабрь 2022 года.

Почему точность прогнозов не равна прибыли от ставок?

Точность отвечает только на один узкий вопрос: верно ли модель выбрала победителя?

У ставок вопрос сложнее: достаточно ли высокой была оценка шанса для предложенной выплаты?

Допустим, модель даёт Исраэлю Адесанье 70% на победу. Верный прогноз считается одинаково при -150 и -400. Но для выхода в ноль по этим коэффициентам нужно выигрывать 60% и 80% ставок соответственно.

Модель может верно определить фаворита и ошибиться в цене.

Обычная точность классификации не учитывает ни уверенность, ни коэффициент. Выбор при 50.1% считается так же, как выбор при 90%. Модель может постоянно брать явных фаворитов и показывать красивую точность. При этом она не добавит ничего к оценке рынка.

Как более низкая проходимость может дать лучшую доходность?

Порог безубыточности следует прямо из коэффициента. Для отрицательного американского коэффициента разделите его абсолютное значение на это же значение плюс 100. Для положительного разделите 100 на коэффициент плюс 100.

Ниже приведено гипотетическое сравнение 20 ставок. Размер каждой ставки равен $100, а коэффициент не меняется. Это не исторический бэктест UFC.

Первая серия убыточна, потому что каждая выигравшая ставка на $100 приносит лишь $40 прибыли. Вторая приносит плюс, поскольку успешная ставка на $100 даёт $150 прибыли.

Это не делает андердогов более выгодными. Пример показывает, почему процент побед ничего не значит без среднего коэффициента.

Как маржа букмекера повышает порог?

Если сложить сырые вероятности обеих сторон линии на победителя, сумма обычно превышает 100%. Это превышение и есть маржа букмекера. Её также называют vig или overround.

Возьмём гипотетического фаворита с коэффициентом -200 и андердога с +170:

• -200 соответствует вероятности 66.7%.
• +170 соответствует вероятности 37.0%.
• Вместе получается 103.7%.

После простой нормализации рыночная оценка без маржи составляет около 64.3% для фаворита и 35.7% для андердога. Но для безубыточной ставки по -200 всё равно нужно 66.7%.

Если модель даёт фавориту 65%, её оценка немного выше рынка без маржи. Но для предложенной ставки этого всё равно мало.

Обойти базовую оценку рынка недостаточно. Преимущество модели должно перекрывать встроенную в линию маржу. Реальное преимущество при +120 может исчезнуть, если доступен только -105.

Почему калибровка важнее уверенности модели?

Откалиброванная модель отвечает за свои цифры. Среди множества бойцов с оценкой 70% победить должны около 70%.

Для проверки нужны группы прогнозов, сделанных до боя. Затем сравните заявленные вероятности с реальными результатами.

Руководство scikit-learn рекомендует использовать для этого калибровочные кривые. Оценка Брайера и логарифмические потери тоже измеряют качество вероятностей, а не только выбор победителя.

Уолш и Джоши проверили этот подход в рецензируемой статье 2024 года. Они обучили модели на нескольких сезонах NBA, а затем протестировали ставки на одном сезоне. В этом эксперименте отбор по калибровке превзошёл отбор по точности.

Это не данные по UFC, а одного тестового сезона мало для твёрдых выводов. Здесь уместен только узкий вывод: если решение зависит от размера преимущества, качество вероятностных оценок важнее выбора победителя.

Избыточная уверенность обходится особенно дорого. Если модель оценивает бои с реальной вероятностью 60% как 75%, она одобрит ставки, которые выглядят выгодными на бумаге. Преимущество появилось из-за неверной шкалы, а не лучшего разбора боя.

Что показывают исследования ставок на MMA?

Реальные коэффициенты UFC задают высокую планку. Они уже учитывают общедоступные данные, мнения экспертов и поздние новости.

Диссертация Кайаны Миллер в Университете Невады изучила номерные турниры от UFC 100 до UFC 293. После исключений в выборке осталось 2,122 боя с июля 2009 года по сентябрь 2023 года.

Обе простейшие стратегии оказались убыточными:

В семи отдельных годах одно из этих правил приносило прибыль. Ни одна из этих годовых прибылей не была статистически значимой.

Это ясное предупреждение о случайной удаче в тесте на истории. Правило может выглядеть полезным один сезон, а затем провалиться на всём периоде.

Статья 2023 года охватила 6,190 боёв UFC с июня 2007 года по декабрь 2022 года. Небольшие андердоги принесли прибыль, но она не была статистически значимой. Ни одна стратегия только на основе коэффициентов не дала статистически значимой долгосрочной прибыли во всех проверенных видах спорта.

В 2026 году Миллер и Николс опубликовали новое рецензируемое исследование MMA. При вневыборочной проверке они нашли лишь несколько случаев статистически значимой положительной доходности. Авторы назвали рынок MMA в основном эффективным.

Чтобы поверить в заявленное преимущество, нужен настоящий тест на отложенной выборке. Также нужны большая серия ставок и диапазон неопределённости вокруг доходности.

Чему известные апсеты UFC учат модель?

На UFC 293 Шон Стрикленд закрылся андердогом с коэффициентом +500 против Исраэля Адесаньи. Он победил единогласным решением, а каждый судья выставил 49-46.

Коэффициент +500 даёт вероятность 16.7% до поправки на маржу. Это не значит, что рынок обещал поражение Стрикленда. Он оценивал такой исход примерно как один из шести похожих случаев.

Этот бой показывает цену ставок на крупных фаворитов. Много небольших выплат могут исчезнуть после одного поражения фаворита уровня Адесаньи. При этом апсет вполне укладывается в откалиброванный прогноз.

Оценивайте вероятность, а не драму.

Почему хорошее преимущество может месяцами давать минус?

В исходах боёв много случайности. Рассечения, судейство, травмы и один размен могут изменить результат. Исходная вероятность при этом не обязательно была ошибочной.

Представьте 100 независимых ставок. У каждой истинная вероятность победы 55%, а выплата составляет один к одному. Ожидаемый баланс равен 55-45, а стандартное отклонение числа побед близко к пяти.

Скромное преимущество может долго скрываться за обычными колебаниями результатов.

Восемь прибыльных недель могут создать впечатление, что перед вами выдающаяся модель. Позднее отозванный препринт FightTracker сообщал о 80% точности live-прогнозов на ограниченной выборке UFC. Он также указывал доходность 90.17% за восемь недель. В 2026 году автор отозвал работу после того, как более долгий анализ показал намного более слабый результат.

Этот пересмотр показательнее исходного заголовка. Короткие тесты создают простор для смещения отбора, удачного момента и нескольких крупных выигрышей.

Что должна фиксировать серьёзная проверка модели?

Сохраняйте прогноз в том виде, в котором он существовал до закрытия рынка. Журнал должен хранить не только победы и поражения:

• турнир, боец, соперник и время прогноза;
• вероятность модели для каждой стороны;
• доступный коэффициент, букмекер и время фиксации;
• рыночная вероятность без маржи в тот момент;
• размер ставки, выплата, результат и итоговый коэффициент;
• версия модели и любая ручная правка;
• отменённые ставки, возвраты и исключённые случаи;
• точность, оценка Брайера, логарифмические потери, ROI и максимальная просадка.

Разбивайте результаты по диапазонам вероятности. Если группа модели от 60% до 69.9% выигрывает половину боёв, модель завышает оценки в этом диапазоне.

Тестируйте по хронологии. Если обучить модель на более поздних боях, информация из будущего попадёт в прошлое.

Учитывайте каждую ставку, которая подошла под правила. Исключение проигрышей из-за позднего слуха о травме создаёт ошибку выжившего, если такого правила не было заранее.

Отделяйте прогноз от выбора размера ставки. Формула может менять риск. Она не превратит прогноз с отрицательным математическим ожиданием в положительный.

Насколько надёжны эти данные?

Две крупнейшие выборки UFC здесь решают разные задачи. Роббинс охватывает 6,190 боёв и проверяет рыночные закономерности на основе коэффициентов. Миллер охватывает 2,122 поединка номерных турниров и включает итоговые коэффициенты и параметры бойцов. Ни одна работа не оценивает вашу модель.

Миллер исключает менее крупные турниры, линии pick'em без явного фаворита и бои без данных о размахе рук или возрасте. Стратегия с фиксированной ставкой также отличается от выборочных ставок по модели.

Исследование калибровки использует матчи NBA и один тестовый сезон. FightTracker был отозван и нужен здесь только как предупреждение о коротких проверках.

Исторические коэффициенты также зависят от букмекера и времени фиксации. Лимиты, доступность линии и её движение могут затруднить повторение доходности из научной работы.

Самый надёжный вывод прост. Одна точность не доказывает ценность для ставок. Нужны откалиброванные вероятности, сохранённые коэффициенты, вневыборочная проверка и достаточное число наблюдений. Только так можно отличить преимущество от удачи.

Частые вопросы

Какая точность нужна модели ставок UFC для прибыли?

Единого требования нет. Порог безубыточности зависит от взятого коэффициента. Модели со ставками только на фаворитов по -250 нужно больше 71.4% побед без учёта других издержек. Для ставок по +150 тоже нужно больше 40%.

Может ли модель прогнозов UFC с точностью 70% терять деньги?

Да. При среднем коэффициенте -250 точность 70% приносит убыток, потому что порог безубыточности равен 71.4%. Модель может часто выбирать победителя, но переплачивать за него.

Что такое калибровка модели прогнозов UFC?

Калибровка показывает, совпадают ли заявленные вероятности с последующей частотой событий. В откалиброванной модели бойцы с шансом 70% должны выигрывать около 70% таких поединков на большой выборке.

ROI лучше точности для проверки прогнозов UFC?

ROI отвечает на финансовый вопрос, но на малой выборке он остаётся шумным. Смотрите его вместе с калибровкой, оценкой Брайера, логарифмическими потерями, итоговыми коэффициентами, просадкой и числом всех подходящих ставок.

Гарантирует ли положительное математическое ожидание прибыль?

Нет. Положительное математическое ожидание описывает средний результат серии сопоставимых ставок. Отдельный бой может проиграть, а обычная дисперсия способна удерживать обоснованную стратегию в минусе на ограниченной выборке.