Den populære Vellamo benchmarksuite fik en temmelig stor opdatering i dag, hvilket bragte nye funktioner og et rigtig flot UI til den populære software fra Qualcomm. Vi talte med Sy Choudhury, senior direktør for produktstyring i Qualcomm om det tidligere i ugen, og selvom de ikke har overbevist mig om, at benchmarks er den perfekte måde at måle ydelsen på vores Android-telefoner og tablets lige nu, svarede de dog et par spørgsmål har jeg haft og har fået mig til at se på problemet igen. Det er ingen lille bedrift - jeg er ret stædig.
Lad os først tale om selve appen. Et benchmarkværktøj behøver ikke at se grim ud, og Vellamo gør virkelig tingene pænt. Appens hovedskærm giver dig mulighed for at vælge mellem HTML 5-baseret browser-benchmarks, "Metal", som i hardware-måling, benchmarks eller et sæt ekstramateriale som værktøjer til at måle touch screen-respons, Octane-benchmark og "avanceret" video-benchmarking værktøjer.
Benchmarking er let, bare tryk på et af de cirkulære ikoner og lad det køre. Når du er færdig, kan du sammenligne dine score med andre eller se lidt dybere for at evaluere hver test individuelt. Du kan også længe trykke på hoved benchmark-ikonet og vælge individuelle test. Indstillingerne giver dig mulighed for at køre flere test for at få det bedste gennemsnit (anbefales), e-maile det omfattende sæt af resultater til dig, når du er færdig, og slå tutorial og slukke.
Det vigtigste er, at der findes et link til en fuld beskrivelse af hver test lige i afsnittet Om. Det nytter ikke at køre disse ting, hvis du ikke har nogen anelse om, hvad det hele betyder, og Qualcomm gør et godt stykke arbejde med at forklare hver test i både HTML 5 og Metal-kategorien såvel som ekstramateriale. Dette er, hvad der gør Vellamo til min anbefaling til folk, der fikler med software og vil teste resultatet på deres telefon. Sikker på, Qualcomm kan sende mig en velskrevet pdf-fil (de gjorde det, og jeg takker dem for det) om hver test, men det er ret forbandet smart at placere den derude for alle, der bruger appen til at læse. Fremragende træk, Qualcomm.
Som nævnt tog Mr. Choudhury fra Qualcomm et par minutter at tale med os om Vellamo. Han gik igennem hver af testene og værktøjerne, men endnu vigtigere delte de lidt om, hvorfor de lavede appen, og hvordan de bruger den. Vellamo startede som en intern testsuite for ingeniører og udviklere hos Qualcomm. Nogle af deres kunder (folk som Samsung og HTC) bad om værktøjerne for sig selv. Qualcomm forpligtede sig til, og besluttede derefter, da de alligevel skulle bygge en enkeltstående app, at de ville frigive den til offentligheden. Selvom det ikke er nøjagtigt den samme app, som stipendiaterne, der designer Qualcomm-chips bruger, giver den de samme nøjagtige værktøjer, de bruger til at teste ydeevne. At lære om, hvordan og hvorfor er altid cool, og at tale med Mr. Choudhury, lad mig vide, at de tager ydelsen af vores mobile enheder temmelig alvorligt hos Qualcomm - mindst lige så alvorligt som vi gør.
Selvfølgelig spurgte jeg om enhver vægtning eller bias over for Qualcomm-drevne enheder - en populær teori på Internettet. Testene, der bruges i Vellamo, er industristandarder og er umodificerede. Årsagen til, at Qualcomm-enheder ofte scorer bedre på Vellamo, er, som det er nævnt, det værktøj, de bruger internt for at forbedre deres chips. Ingeniørerne adresserer problemer, de måtte se i Vellamo, og det betyder, at slutproduktet scorer godt i Vellamo. Der er ingen lusede softwaredigeringer, der gør Snapdragons bedre end andre chips.
Jeg er stadig ikke overbevist om, at softwarebaseret benchmark-værktøj er en god måde at sammenligne den måde, en enhed kører på mod en anden. Der er for mange variabler, og ingen bekymrer sig om de givne rådata og bruger i stedet det store antal i slutningen som et internetværdighedsmålingsværktøj. Men hvis du vil se, hvordan blinkende forskellige ROM'er eller foretagelse af anden software-redigering påvirker telefonen eller tabletten i dine hænder, er Vellamo en temmelig god måde at gøre det på. Det er gratis i Google Play, tag det fra linket ovenfor annonce, tjek produktvideoen efter pausen.