Як розраховується оцінка драфту
Оцінка та показаний шанс на перемогу після драфту походять із невеликої статистичної моделі. Ця сторінка перелічує її складові, як її перевіряли на реальних рейтингових матчах і де вона має обмеження.
Що означає оцінка
Після завершення драфту DotaPicks оцінює ймовірність перемоги кожної сторони і показує це як шанс на перемогу, наприклад 54.2%. Літера показує, як цей результат співвідноситься з реальними рейтинговими драфтами.
Число, наприклад +4.2%, поруч із пропозицією героя — це зміна шансів на перемогу при додаванні цього героя. Для бана це зміна шансів суперника на перемогу, якби він не міг мати цього героя.
Це статистична оцінка, не прогноз. Вона описує, як зазвичай себе показували схожі драфти, і не знає, наскільки добре грають конкретні гравці.
Що входить у число
Шанс на перемогу поєднує три входи, кожен виміряний у процентних пунктах з точки зору цієї сторони та зважений як нижче. Зважена сума перетворюється в ймовірність логістичною кривою й масштабується вниз, якщо обрано менше десяти героїв.
| Вхід | Вага |
|---|---|
| Контрперевага Середня перевага матчапу ваших героїв проти їхніх | 0,060 |
| Різниця синергії Синергія команди мінус синергія супротивника | 0,050 |
| Різниця у вінрейті героя Середній вінрейт ваших героїв мінус їхній | 0,080 |
Як відбувалося калібрування
Модель перевіряли на 341 947 рейтингових матчах All Draft, зіграних після знімка даних героїв 2 жовт. 2026 р.. Точність вимірюється на 102 585 найновіших матчах, на яких модель ніколи не навчалася.
| Показник | Значення |
|---|---|
| Матчі (навчання і відкладена вибірка) | 239 362 + 102 585 |
| Вікно матчів | 2 жовт. 2026 р. – 3 жовт. 2026 р. |
| Знімок даних героїв | 2 жовт. 2026 р. |
| AUC | 0,589 |
| Log-loss | 0,6809 (якщо завжди припускати 50%: 0,6931) |
| Помилка калібрування (ECE) | 0,031 |
Матчі розділені за часом, а всі показники вище виміряні на 102 585 новіших. Використовувалися лише матчі, що почалися щонайменше через 12 годин після знімка, щоб знімок уже не містив їхніх результатів. Ваги, що використовуються, задані вручну, а не підібрані на цих матчах. Перенавчання на 239 362 старіших матчах порівняли з ними і не прийняли.
Перенавчання ваг на старіших матчах дає AUC 0,595 проти 0,589 для поточних ваг і log-loss 0,6793 проти 0,6809. Бутстреп оцінює приріст AUC в інтервалі від 0,0051 до 0,0065.
У перенавчанні вся вага припадає на контрперевагу, а два інші входи ваги не отримують.
Перенавчання приймається, лише якщо його log-loss не гірший, AUC не нижчий більш ніж на 0.001, а помилка калібрування не гірша. Перенавчання не пройшло всі три перевірки, тому залишаються ваги, наведені вище.
Калібрувальна крива
Кожна точка групує матчі з відкладеної вибірки за прогнозованим шансом Radiant на перемогу. Її висота — як часто Radiant справді вигравав. Ідеально калібрована модель лежить на діагоналі. Групи з дуже малою кількістю матчів дають шум.
Показати числа
| Передбачений діапазон | Середнє передбачене | Спостережуване | Матчі |
|---|---|---|---|
| 10–20% | 19,8% | 0,0% | 1 |
| 20–30% | 28,0% | 34,3% | 423 |
| 30–40% | 36,8% | 39,8% | 10 419 |
| 40–50% | 45,6% | 48,6% | 40 768 |
| 50–60% | 54,4% | 57,4% | 40 414 |
| 60–70% | 63,2% | 66,2% | 10 087 |
| 70–80% | 72,0% | 80,9% | 471 |
| 80–90% | 80,1% | 100,0% | 2 |
Літерна шкала
Оцінка порівнює прогнозовану перевагу — шанс на перемогу мінус 50 пунктів — із перевагами реальних рейтингових драфтів із відкладеної вибірки.
| Оцінка | Перевершує таку частку реальних рейтингових драфтів | Мінімальна перевага в пунктах |
|---|---|---|
| A+ | 97% | +14,7 |
| A | 92% | +11,1 |
| A− | 85% | +8,2 |
| B+ | 75% | +5,4 |
| B | 62% | +2,4 |
| B− | 50% | −0,0 |
| C+ | 38% | −2,5 |
| C | 25% | −5,4 |
| C− | 15% | −8,3 |
| D | 5% | −13,0 |
| F | Решта | |
Оцінка A означає більшу прогнозовану перевагу, ніж у 92% реальних рейтингованих драфтів.
Як вимірюються помилки
Вартість ходу — це наскільки зріс би шанс на перемогу у фінальному 5v5, якби на цьому ході було зроблено кращий вибір, а все інше лишилося незмінним.
Кращий варіант — це перший герой із пропозицій на цьому ході, який міг би зайняти відкриту позицію і який є або обраним героєм, або відсутній в обох фінальних складах. Тому слідування першій пропозиції ніколи нічого не коштує.
- Вартість піку: шанс на перемогу фінального складу із заміною обраного героя на кращий варіант мінус шанс на перемогу за фактичного драфту, не менше нуля.
- Вартість бана: для забаненого героя та кращого варіанту визначається найбільший приріст шансів на перемогу, який фінальний склад суперника міг би отримати, замінивши одного зі своїх героїв на цього героя. Вартість — це наскільки приріст кращого варіанту більший, не менше нуля. Вимірюється те, що суперник міг би отримати, а не те, що він би обрав.
Як помилки наведено лише ходи, що коштують щонайменше 0.5 процентного пункту. Вартість вимірюється на фінальних складах, щоб кожне порівняння було повним 5v5 у діапазоні, на якому калібрувалася модель; герої, що вже є в будь-якому з фінальних складів, ніколи не вважаються кращим варіантом.
Обмеження
- Модель калібрувалася на рейтингових матчах All Draft, а не на Captains Mode, тож оцінка для драфту в стилі Captains Mode — це екстраполяція.
- AUC 0,589 — це невелика перевага над 0.500 підкидання монети. Драфт — лише частина матчу, і модель нічого не каже про те, як цей матч буде зіграно.
- Шанси на перемогу показуються в діапазоні від 32,1% до 67,8%, на якому калібрувалася модель. Значення поза ним обмежується й позначається.
- Вікно калібрування коротке, тому ваги слід підлаштовувати в міру змін гри та патчів.
- Посилання на спільний драфт зберігає піки в самому посиланні і не є захищеним від редагування. Будь-хто може змінити його, тож оцінка не є доказом того, як був зіграний драфт.
- Перемога над Easy-ботом, який випадково вибирає з 15 своїх найкращих пропозицій, завищує оцінку. Оцінка не враховує рівень бота.