Рейтинг Ело штучного інтелекту

Рейтинг

Що вищий рейтинг, то сильніший ШІ проти інших. Середнє восьми ШІ — 1500.

1. 1 V2 Майстер Авале 2 221 ± 88
2. 2 Дух Предків 1 865 ± 58
3. 3 Непохитний Мудрець ZAK 1 676 ± 50
4. 4 Непохитний Мудрець SIR 1 650 ± 48
5. 5 Мандрівник Борозен 1 422 ± 42
6. 6 Ймовірнісний стратег 1 334 ± 58
7. 7 Охоронець зерен 1 119 ± 60
8. 8 Початківець-сіяч 714 ± 95

Світла смуга показує похибку кожного рейтингу, риска — його значення. Коли смуги двох ШІ перекриваються, турнір не дає змоги сказати, який сильніший.

Що означає рейтинг

Щоб легше орієнтуватися, ось рівні гри в авале — і місце кожного з наших ШІ.

Рейтинг Ело	Рівень	Опис	Наші ШІ
< 1 200	Початківець	Знає правила й сіє, ще не розраховуючи взяття.
1 200 – 1 600	Гравець середнього рівня	Бачить прості взяття й не залишає лунок з однією-двома насінинами.
1 600 – 1 800	Добрий гравець	Готує взяття на хід наперед і стежить за голодом.
1 800 – 2 000	Сильний гравець	Рахує кілька ходів наперед, тримає комори й добре грає ендшпілі.
2 000 – 2 200	Експерт	Рідко помиляється: ставить пастки й точно рахує ендшпілі.
2 200 – 2 400	Майстер	Майже без помилок, використовує кожну хибу суперника.
2 400 +	Гросмейстер	Найвищий рівень гри, дуже близький до досконалої гри.

Ці рівні орієнтовні: офіційної шкали рівнів в авале не існує. Наші рейтинги обчислено між ШІ PlayAwale, із середнім значенням 1500.

Що означає різниця

Має значення лише різниця між двома рейтингами: вона показує, яку частку очок кожен ШІ має набрати проти іншого.

Наприклад, V2 Майстер Авале має на 356 очок більше, ніж Дух Предків: проти нього V2 Майстер Авале мав би набрати близько 89 % очок.

Як обчислюється рейтинг

1. 1

   Вісім ШІ грають між собою на комп’ютері видавця, ніколи на сервері, кожен точнісінько як на сайті, з тим самим часом на роздуми.

2. 2

   Партії починаються зі справжніх позицій початку партії, узятих із партій, зіграних тут; кожну грають двічі, помінявшись сторонами.

3. 3

   ШІ схожої сили зустрічаються частіше: саме між ними різницю виміряти найважче.

4. 4

   Наприкінці за один раз шукають рейтинги, що найкраще пояснюють усі результати. Перемога дає одне очко, нічия — половину.

Це метод Арпада Ело, що походить із шахів. Рейтинги не підправляють після кожної партії, щоб результат не залежав від порядку партій. Публікується лише результат турніру.

Усі поєдинки

Частка очок, які набрав ШІ кожного рядка проти ШІ кожного стовпця.

V2 Майстер Авале		94 %	100 %	100 %	100 %	99 %	100 %	100 %
Дух Предків	6 %		79 %	66 %	96 %	97 %	100 %	100 %
Непохитний Мудрець ZAK	0 %	21 %		61 %	85 %	85 %	94 %	100 %
Непохитний Мудрець SIR	0 %	34 %	39 %		86 %	90 %	88 %	100 %
Мандрівник Борозен	0 %	4 %	15 %	14 %		69 %	96 %	100 %
Ймовірнісний стратег	1 %	3 %	15 %	10 %	31 %		78 %	100 %
Охоронець зерен	0 %	0 %	6 %	13 %	4 %	22 %		96 %
Початківець-сіяч	0 %	0 %	0 %	0 %	0 %	0 %	4 %

Зелений: ШІ рядка переважає; червоний: поступається; бурштиновий: сили рівні.

Рейтинги впродовж турніру

Спочатку, коли партій мало, рейтинги сильно коливаються; вони усталюються, що більше накопичується результатів.

Проти ШІ, проти гравців

Рейтинг вимірює кожен ШІ проти інших ШІ. Частка партій, які в нього виграють гравці, вимірює інше: що він протиставляє людям.

ШІ	Рейтинг Ело	Перемоги гравців
V2 Майстер Авале	1 2 221	0,0 %
Дух Предків	2 1 865	4,0 %
Непохитний Мудрець ZAK	3 1 676	9,0 %
Непохитний Мудрець SIR	4 1 650	11,9 %
Мандрівник Борозен	5 1 422	24,4 %
Ймовірнісний стратег	6 1 334	25,0 %
Охоронець зерен	7 1 119	34,4 %
Початківець-сіяч	8 714	56,8 %

ШІ може завдавати гравцям більше клопоту, ніж іншим ШІ, або навпаки: ці два виміри доповнюють один одного. Частку гравців показано лише тоді, коли вона спирається на достатню кількість партій.

А гравці?

Кожен гравець з обліковим записом теж отримує рейтинг Ело — на тій самій шкалі, що й ШІ. Його обчислюють, як у шахах.

1. 1

   Партії, що зараховуються: проти ШІ в режимі соло, чий рейтинг узято з турніру, і онлайн проти гравця, який теж має обліковий запис і вже має рейтинг. Партія удвох на одному екрані не зараховується.

2. 2

   Перші п’ять партій — це оцінювання. Перший рейтинг — це результативність у цих партіях: середній рейтинг суперників, скоригований на результат, з двома уявними нічиїми проти суперника з рейтингом 1500, щоб він не злетів на такій малій кількості результатів.

3. 3

   Далі рейтинг змінюється після кожної партії: перемога над сильнішим дає багато, поразка від слабшого коштує багато. Він змінюється швидко протягом перших тридцяти партій, потім повільніше, а понад 2400 — ще менше.

4. 4

   Здача зараховується як поразка. Партію, покинуту до її другого ходу, скасовують: вона не зараховується.

5. 5

   Онлайн здача до п’ятого ходу кожного гравця не зараховується, а проти того самого суперника зараховується щонайбільше три партії на день.

6. 6

   Ваш рейтинг і його графік видно в розділі «Мої значки». Ваші друзі бачать рейтинг у вашому профілі, як і ваші значки.

Похибка, і чого рейтинг не каже

Кожен рейтинг має похибку «±»: обчислення повторюють на великій кількості уявних турнірів, випадково розіграних за спостереженими результатами, і похибка охоплює 95 % отриманих рейтингів. Щоб ШІ, який виграє все, не отримав нескінченного рейтингу, кожна пара суперників додатково має одну уявну нічию.

Рейтинг порівнює ШІ між собою; жодні дані гравців у це обчислення не входять. Його повторюють, коли якийсь ШІ змінюється.

Подивитися, як грають ШІ Правова інформація