Comparação de execuções

Abra BoosterX → Бенчмарк → Сравнение e adicione os resultados guardados pretendidos. Para uma experiência antes/depois, escolha a mesma versão de carga, perfil e condições. A diferença dos números por si só não prova o efeito de uma definição.

Na interface é possível estudar as diferenças também entre execuções distintas: CPU, GPU, latências, valores absolutos e percentagens. A divergência de condições não torna os próprios números inúteis, mas limita a conclusão sobre a causa da diferença. Verifique os avisos de compatibilidade e não considere a comparação de versões diferentes uma experiência limpa.

As pontuações podem ser recalculadas segundo a fórmula de servidor em vigor, por isso compare avaliações da mesma metodologia e, separadamente, as métricas originais. O recálculo não altera a carga executada. A posição num ranking online único não é prova de condições de medição idênticas.

Plano da experiência

1. Registe o modelo do processador e da placa gráfica, as versões do Windows e do driver. Entre testes, não altere o modo de energia nem o arrefecimento. Utilize o mesmo conjunto de programas em segundo plano.
2. Comece por executar pelo menos três testes sem alterar definições. Assim verá a variação normal dos resultados. Para concluir sobre diferenças pequenas pode ser necessário mais repetições.
3. Altere uma definição e repita os testes. Se for necessário reiniciar, faça-o também antes da série com as definições originais. Antes de cada execução, aguarde o mesmo tempo.
4. Se possível, verifique as definições originais, depois as alteradas e depois novamente as originais: A → B → A. Esta sequência ajuda a separar o efeito da definição do aquecimento e da carga em segundo plano.
5. Guarde todos os resultados. Determine antecipadamente que falhas tornam o teste impróprio para comparação, por exemplo a interrupção da execução. Se excluir um teste, indique o motivo. Uma pontuação baixa por si só não é razão para o eliminar.

Mantenha iguais a resolução do ecrã e o modo de janela ou ecrã inteiro. Se estiver a verificar a influência da resolução, repita o teste várias vezes em cada resolução escolhida.

O que considerar

Δ score, % = 100 × (mean_after / mean_before − 1)
CV, % = 100 × sample_standard_deviation / mean

Compare os valores médios e a variação entre execuções. Verifique não só a pontuação final, mas também as avaliações individuais, as latências em milissegundos, o P99 / 1% Low CPU e a velocidade de execução de cada carga (throughput). Para as latências, uma diferença negativa significa normalmente uma melhoria; para as pontuações, uma diferença positiva significa um aumento da avaliação.

Para verificar a repetibilidade, conte execuções completas. Milhares de frames dentro de um único teste não substituem testes repetidos: todos eles foram obtidos na mesma sessão e dependem de condições comuns.

O que se pode concluir

Uma alteração pequena em relação à variação normal exige repetições adicionais. Não se pode estabelecer um limiar universal como «tudo acima de 1% é significativo» com base numa só série. Mesmo uma diferença estatisticamente distinta pode ser demasiado pequena para um efeito prático.

O diagnóstico por blocos já está incorporado nos resultados: para cada carga são guardadas a variação da velocidade de execução por blocos, o desvio «primeiro-último» e a tendência ao longo dos passos. Isto permite avaliar se a diferença entre duas execuções excede o ruído observado dentro delas, ainda antes de novas repetições. As fórmulas pelas quais os blocos são agregados em pontuações estão abertas no cálculo de pontuações.

Na série arquivada de oito execuções da versão 0.5.2 compararam-se repetições e resoluções num sistema otimizado. Esta não contém o estado não otimizado e, por isso, não prova o ganho do BoosterX.

O teste sintético ajuda a investigar alterações no funcionamento do sistema. Para verificar a utilidade para um jogo concreto, repita a comparação no seu cenário de jogo reproduzível.

Atualizado: 2026-10-02.