Porovnání běhů

Porovnávejte dokončené běhy se stejnou verzí zátěže, modelem hodnocení a profilem. Procentuální změna popisuje rozdíl čísel, ale sama o sobě neprokazuje účinek tweaku.

Před porovnáním čísel zkontrolujte kompatibilitu dvojice běhů podle souborů výsledků: v každém z nich je zaznamenána verze zátěže — trvalý identifikátor jejího složení — a model skórování, stejně jako verze statistiky. Porovnávejte tato pole po dvojicích: pokud se zátěž nebo model skórování neshodují, běhy patří k různým protokolům a jejich skóre jsou přímo nesrovnatelná. Jak jsou tyto identity uspořádány, je popsáno v metodice.

Plán experimentu

1. Zapište model procesoru a grafické karty, verze Windows a ovladače. Mezi testy neměňte režim napájení a chlazení. Používejte stejnou sadu programů na pozadí.
2. Nejprve proveďte alespoň tři testy bez změny nastavení. Tak uvidíte běžný rozptyl výsledků. Pro závěr o malých rozdílech může být zapotřebí více opakování.
3. Změňte jedno nastavení a testy zopakujte. Pokud je potřeba restart, proveďte jej i před sérií s původním nastavením. Před každým spuštěním vyčkejte stejnou dobu.
4. Podle možností ověřte původní nastavení, poté změněné a nakonec znovu původní: A → B → A. Taková posloupnost pomáhá oddělit účinek tweaku od zahřátí a zátěže na pozadí.
5. Uchovávejte všechny výsledky. Předem určete, které selhání činí test nevhodným pro srovnání, například přerušení běhu. Pokud test vyloučíte, uveďte důvod. Nízké hodnocení samo o sobě není důvodem k jeho odstranění.

Udržujte stejné rozlišení obrazovky a okenní nebo celoobrazovkový režim. Pokud zkoumáte vliv rozlišení, zopakujte test několikrát při každém zvoleném rozlišení.

Co počítat

Δ score, % = 100 × (mean_after / mean_before − 1)
CV, % = 100 × sample_standard_deviation / mean

Porovnávejte průměrné hodnoty a rozptyl mezi běhy. Kontrolujte nejen celkové skóre, ale i dílčí hodnocení, zpoždění v milisekundách a rychlost provádění zátěží (throughput). U zpoždění záporný rozdíl obvykle znamená zlepšení; u skóre kladný rozdíl znamená růst hodnocení.

Pro ověření opakovatelnosti počítejte úplné běhy. Tisíce snímků v rámci jednoho testu nenahrazují opakované testy: všechny jsou získány v jedné relaci a závisí na společných podmínkách.

Co lze uzavřít

Malá změna vzhledem k běžnému rozptylu vyžaduje další opakování. Univerzální práh jako „vše nad 1 % je významné“ nelze stanovit z jedné série. I statisticky rozlišitelný rozdíl může být příliš malý pro praktický efekt.

Diagnostika po blocích je již zabudována ve výsledcích: pro každou zátěž se ukládá rozptyl rychlosti provádění po blocích, posun „první-poslední“ a trend po krocích. To umožňuje posoudit, zda rozdíl dvou běhů přesahuje šum pozorovaný v jejich rámci, ještě před novými opakováními. Vzorce, podle nichž se bloky agregují do skóre, jsou otevřené v výpočtu skóre.

V sérii osmi běhů se porovnávala opakování a rozlišení na optimalizovaném systému. Neobsahuje neoptimalizovaný stav, a proto neprokazuje přínos od BoosterX.

Syntetický test pomáhá zkoumat změny v chování systému. Chcete-li ověřit přínos pro konkrétní hru, zopakujte srovnání v jejím reprodukovatelném herním scénáři.

Ověřeno: 2026-09-20.