Palaidienu salīdzināšana

Atveriet BoosterX → Benchmarks → Comparison un pievienojiet nepieciešamos saglabātos rezultātus. Pirms/pēc eksperimentam izvēlieties vienu un to pašu slodzes versiju, profilu un apstākļus. Skaitļu atšķirība pati par sevi nepierāda iestatījuma efektu.

Interfeisā var pētīt atšķirības arī starp dažādiem palaidieniem: CPU, GPU, aiztures, absolūtās vērtības un procentus. Apstākļu nesakritība nepadara pašus skaitļus bezjēdzīgus, bet ierobežo secinājumu par atšķirības cēloni. Pārbaudiet saderības brīdinājumus un neuzskatiet dažādu versiju salīdzinājumu par tīru eksperimentu.

Punkti var tikt pārrēķināti pēc spēkā esošās servera formulas, tāpēc salīdziniet vienas metodikas vērtējumus un atsevišķi sākotnējās metrikas. Pārrēķins nemaina veikto slodzi. Vieta vienotajā tiešsaistes reitingā nav pierādījums vienādiem mērījumu apstākļiem.

Eksperimenta plāns

1. Pierakstiet procesora un videokartes modeli, Windows un draivera versijas. Starp testiem nemainiet barošanas režīmu un dzesēšanu. Izmantojiet vienu un to pašu fona programmu kopumu.
2. Vispirms veiciet vismaz trīs testus bez iestatījumu maiņas. Tā redzēsiet parasto rezultātu izkliedi. Secinājumam par nelielām atšķirībām var būt nepieciešams vairāk atkārtojumu.
3. Mainiet vienu iestatījumu un atkārtojiet testus. Ja nepieciešama pārstartēšana, veiciet to arī pirms sērijas ar sākotnējiem iestatījumiem. Pirms katra palaišanas nogaidiet vienu un to pašu laiku.
4. Ja iespējams, pārbaudiet sākotnējos iestatījumus, pēc tam mainītos, un tad atkal sākotnējos: A → B → A. Šāda secība palīdz atdalīt iestatījuma efektu no iesilšanas un fona slodzes.
5. Saglabājiet visus rezultātus. Iepriekš nosakiet, kuri traucējumi padara testu nederīgu salīdzināšanai, piemēram, palaišanas pārtraukšana. Ja izslēdzat testu, norādiet iemeslu. Zems vērtējums pats par sevi nav iemesls to dzēst.

Saglabājiet vienādu ekrāna izšķirtspēju un loga vai pilnekrāna režīmu. Ja pārbaudāt izšķirtspējas ietekmi, atkārtojiet testu vairākas reizes pie katras izvēlētās izšķirtspējas.

Ko ņemt vērā

Δ score, % = 100 × (mean_after / mean_before − 1)
CV, % = 100 × sample_standard_deviation / mean

Salīdziniet vidējās vērtības un izkliedi starp palaidieniem. Pārbaudiet ne tikai galīgo punktu skaitu, bet arī atsevišķus vērtējumus, aiztures milisekundēs, P99 / 1% Low CPU un katras slodzes izpildes ātrumu (throughput). Aizturēm negatīva starpība parasti nozīmē uzlabojumu; punktiem pozitīva starpība nozīmē vērtējuma pieaugumu.

Lai pārbaudītu atkārtojamību, skaitiet pilnus palaidienus. Tūkstošiem kadru vienā testā neaizstāj atkārtotus testus: tie visi iegūti vienā sesijā un ir atkarīgi no kopīgiem apstākļiem.

Ko var secināt

Neliela izmaiņa attiecībā pret parasto izkliedi prasa papildu atkārtojumus. Universālu slieksni, piemēram, «viss virs 1% ir nozīmīgs», pēc vienas sērijas noteikt nevar. Pat statistiski atšķiramas atšķirības var būt pārāk mazas praktiskam efektam.

Pa blokiem sadalītā diagnostika jau ir iebūvēta rezultātos: katrai slodzei tiek saglabāta izpildes ātruma izkliede pa blokiem, nobīde «pirmais-pēdējais» un tendence pa soļiem. Tas ļauj spriest, vai divu palaidienu atšķirība pārsniedz tajos novērojamo troksni, vēl pirms jauniem atkārtojumiem. Formulas, pēc kurām bloki tiek apkopoti punktos, ir atklātas punktu aprēķinā.

Arhīva astoņu palaidienu sērijā versijai 0.5.2 tika salīdzināti atkārtojumi un izšķirtspējas optimizētā sistēmā. Tā nesatur neoptimizētu stāvokli un tāpēc nepierāda ieguvumu no BoosterX.

Sintētiskais tests palīdz pētīt izmaiņas sistēmas darbībā. Lai pārbaudītu ieguvumu konkrētai spēlei, atkārtojiet salīdzinājumu tās reproducējamā spēles scenārijā.

Atjaunināts: 2026-10-02.