Проверка: чего стоят эти методы на прошлых выборах?
Экспериментально
Экспериментально. Эта страница экспериментальная. Она прогоняет три метода прогноза на пяти прошлых президентских выборах (с 2002 по 2022 год), давая им только опросы, опубликованные до даты отсечки, и сравнивает прогнозы первого тура с официальным результатом. Цифр текущей кампании здесь нет.
Три метода рядом
Все прогнозы первого тура по всем горизонтам (от 180 до 7 дней до голосования): 275 пар «кандидат — прогноз» в 25 сочетаниях «выборы — горизонт». Ошибки в процентных пунктах; чем меньше, тем ближе прогноз к результату.
Экспериментально
| Метод | MAE (п.п.) | RMSE (п.п.) | Охват 80 % | Ширина 80 % (п.п.) | CRPS | Brier (первое место) | Brier (топ-2) |
|---|---|---|---|---|---|---|---|
| Простое среднее опросов | 2,08 | 3,19 | 83 % | 6,64 | 1,53 | 0,029 | 0,047 |
| Модель v2 | 2,20 | 3,31 | 85 % | 10,24 | 1,76 | 0,037 | 0,056 |
| Слой «Мнение» | 2,35 | 3,69 | 35 % | 2,59 | 1,92 | 0,023 | 0,046 |
Как читать эту таблицу. Одна строка на метод. Ошибка (MAE, RMSE) — расстояние между прогнозной и реальной долей; охват показывает, какая доля результатов попала в 80 %-интервал; CRPS и оценки Брайера оценивают весь вероятностный прогноз.
Подробнее
Для охвата нужна не «самая высокая» цифра, а близкая к 80 %: очень широкий интервал покрывает всегда и почти ничего не говорит. Во всех остальных столбцах меньшее значение означает более близкий к результату прогноз. Небольшие различия при пяти выборах не значимы.
Средняя ошибка по горизонту
MAE в процентных пунктах: от 180 дней (слева) до 7 дней (справа) до первого тура.
Экспериментально
- Простое среднее опросов
- Модель v2
- Слой «Мнение»
Как читать этот график. Каждая линия — метод; чем она ниже, тем меньше средняя ошибка. Точки — проверенные горизонты: от 180 дней до голосования слева до 7 дней справа.
Подробнее
Вдали от голосования мало опросов, а список кандидатов неопределён, поэтому ошибка там естественно больше. Пересекающиеся линии означают, что эта выборка не позволяет различить методы.
Держат ли слово 80 %-интервалы?
Доля реальных результатов, попавших в заявленный 80 %-интервал, по горизонтам. Тонкая горизонтальная линия — ожидаемое значение: 80 %.
Экспериментально
- Простое среднее опросов
- Модель v2
- Слой «Мнение»
Как читать этот график. Если 80 %-интервалы метода настроены верно, линия должна лежать на тонкой черте 80 %. Ниже: интервалы слишком узкие, метод слишком уверен в себе. Выше: интервалы шире, чем нужно.
Подробнее
Каждая точка опирается на немного выборов, поэтому она заметно скачет от горизонта к горизонту, и это мало что значит. Информативно только устойчивое отклонение от линии 80 %.
Что из этого следует
Главный вывод простой: обычное среднее свежих опросов не хуже более сложных моделей. На этих пяти выборах его средняя ошибка не больше, чем у модели v2 и у слоя «Мнение». Сложный расчёт пока не доказал, что даёт что-то сверх этого.
Интервалы слоя «Мнение» слишком узкие: заявленный 80 %-интервал содержал результат лишь в меньшинстве случаев. Метод уверен в себе больше, чем следует. Два других метода покрывают примерно столько, сколько обещают, но с заметно более широкими интервалами.
Пять выборов — это мало: у каждых только один результат, а кандидаты одних выборов не независимы друг от друга. Разница между двумя методами может быть случайной. Эти цифры не говорят, как методы поведут себя в 2027 году; они показывают, как они вели себя раньше.
Допущения и ограничения
- Дат публикации опросов в данных нет: предполагается задержка в 2 дня между концом полевой работы и публикацией, и опрос используется, только если он опубликован до даты отсечки.
- Опросы и результаты 2002–2012 годов взяты со страниц Википедии и не сверены с данными Конституционного совета.
- Вдали от голосования список кандидатов отчасти гипотетический: оцениваются только кандидаты, которых спрогнозировали все три метода и которые действительно участвовали.
Прогон от 2 нояб. 2026 · отпечаток данных (SHA-256): dcc768516ed0d9b6ff3bbb4b865afcf0bb27e7fe8912600a5c5ac27dc0147f8c