A classificação Elo das IA

A classificação

Quanto mais alta a classificação, mais forte é a IA face às outras. A média das oito IA é 1500.

1. 1 V2 Mestre de Awalé 2 221 ± 88
2. 2 Espírito Ancestral 1 865 ± 58
3. 3 Sábio Imutável ZAK 1 676 ± 50
4. 4 Sábio Imutável SIR 1 650 ± 48
5. 5 Viajante dos Sulcos 1 422 ± 42
6. 6 Estrategista Probabilista 1 334 ± 58
7. 7 Guardião das Sementes 1 119 ± 60
8. 8 Semeador Novato 714 ± 95

A barra clara mostra a margem de cada classificação; o traço, o seu valor. Quando as barras de duas IA se sobrepõem, o torneio não permite dizer qual é a mais forte.

A que corresponde uma classificação

Para se orientar, eis alguns níveis de jogo no awalé, com o lugar de cada uma das nossas IA.

Classificação Elo	Nível	Descrição	As nossas IA
< 1 200	Principiante	Conhece as regras e semeia sem ainda calcular as capturas.
1 200 – 1 600	Jogador intermédio	Vê as capturas simples e evita deixar covas com uma ou duas sementes.
1 600 – 1 800	Bom jogador	Prepara as capturas com uma jogada de antecedência e vigia a fome.
1 800 – 2 000	Jogador forte	Calcula várias jogadas à frente, guarda celeiros e joga bem os finais.
2 000 – 2 200	Especialista	Raramente apanhado em falta: arma ciladas e conta os finais com precisão.
2 200 – 2 400	Mestre	Quase sem falhas, aproveita cada erro do adversário.
2 400 +	Grande mestre	O nível de jogo mais alto, muito perto do jogo perfeito.

Estes níveis são indicativos: não existe uma escala oficial de níveis no awalé. As nossas classificações são calculadas entre as IA do PlayAwale, com uma média fixada em 1500.

O que significa uma diferença

Só conta a diferença entre duas classificações: indica que parte dos pontos cada IA deveria obter contra a outra.

Por exemplo, V2 Mestre de Awalé tem mais 356 pontos do que Espírito Ancestral: contra ele, V2 Mestre de Awalé deveria obter cerca de 89% dos pontos.

Como a classificação é calculada

1. 1

   As oito IA defrontam-se entre si no computador do editor, nunca no servidor, cada uma exatamente como no site, com o mesmo tempo de reflexão.

2. 2

   As partidas partem de posições reais de início de partida, tiradas das partidas jogadas aqui; cada uma é jogada duas vezes, trocando de lado.

3. 3

   As IA de força semelhante encontram-se mais vezes: é entre elas que a diferença é mais difícil de medir.

4. 4

   No fim, procuram-se de uma só vez as classificações que melhor explicam todos os resultados. Uma vitória vale um ponto; um empate, meio.

É o método de Arpad Elo, nascido no xadrez. As classificações não são ajustadas partida a partida, para que o resultado não dependa da ordem das partidas. Só o resultado do torneio é publicado.

Todos os confrontos

A parte dos pontos obtidos pela IA de cada linha contra a de cada coluna.

V2 Mestre de Awalé		94%	100%	100%	100%	99%	100%	100%
Espírito Ancestral	6%		79%	66%	96%	97%	100%	100%
Sábio Imutável ZAK	0%	21%		61%	85%	85%	94%	100%
Sábio Imutável SIR	0%	34%	39%		86%	90%	88%	100%
Viajante dos Sulcos	0%	4%	15%	14%		69%	96%	100%
Estrategista Probabilista	1%	3%	15%	10%	31%		78%	100%
Guardião das Sementes	0%	0%	6%	13%	4%	22%		96%
Semeador Novato	0%	0%	0%	0%	0%	0%	4%

Verde: a IA da linha domina; vermelho: é dominada; âmbar: equivalem-se.

As classificações ao longo do torneio

No início, com poucas partidas, as classificações mexem muito; estabilizam à medida que os resultados se acumulam.

Contra as IA, contra os jogadores

A classificação mede cada IA face às outras IA. A parte das partidas que os jogadores lhe ganham mede outra coisa: o que opõe aos humanos.

IA	Classificação Elo	Vitórias dos jogadores
V2 Mestre de Awalé	1 2 221	0,0%
Espírito Ancestral	2 1 865	4,0%
Sábio Imutável ZAK	3 1 676	9,0%
Sábio Imutável SIR	4 1 650	11,9%
Viajante dos Sulcos	5 1 422	24,4%
Estrategista Probabilista	6 1 334	25,0%
Guardião das Sementes	7 1 119	34,4%
Semeador Novato	8 714	56,8%

Uma IA pode dar mais trabalho aos jogadores do que às outras IA, ou o contrário: as duas medidas completam-se. A parte dos jogadores só é mostrada se assentar em partidas suficientes.

E os jogadores?

Cada jogador com conta também recebe uma classificação Elo, na mesma escala das IA. Calcula-se como no xadrez.

1. 1

   As partidas que contam: contra as IA do modo solo, cuja classificação é a do torneio, e online contra um jogador que também tenha conta e já tenha classificação. Uma partida a dois no mesmo ecrã não conta.

2. 2

   As cinco primeiras partidas servem de avaliação. A primeira classificação é o desempenho nessas partidas: a classificação média dos adversários, corrigida pelo resultado, com dois empates imaginários contra um adversário de 1500 para que não dispare com tão poucos resultados.

3. 3

   Depois, a classificação muda após cada partida: ganhar a alguém mais forte rende muito, perder contra alguém mais fraco custa muito. Muda depressa nas primeiras trinta partidas, mais devagar depois, e ainda menos acima de 2400.

4. 4

   Um abandono conta como derrota. Uma partida abandonada antes da sua segunda jogada é anulada: não conta.

5. 5

   Online, um abandono antes da quinta jogada de cada um não conta, e contam no máximo três partidas por dia contra o mesmo adversário.

6. 6

   A sua classificação vê-se em «Os meus emblemas», com a sua curva. Os seus amigos veem-na no seu perfil, como os seus emblemas.

A margem, e o que a classificação não diz

Cada classificação tem uma margem «±»: o cálculo é refeito sobre um grande número de torneios imaginários, sorteados a partir dos resultados observados, e a margem cobre 95% das classificações obtidas. Para que uma IA que ganha tudo não tenha uma classificação infinita, cada confronto conta ainda um empate fictício.

A classificação compara as IA entre si; nenhum dado de jogadores entra neste cálculo. É refeito quando uma IA muda.

Ver como jogam as IA Menções legais