De populaire Vellamo benchmark-suite heeft vandaag een behoorlijk grote update gekregen, met nieuwe functies en een echt mooie gebruikersinterface voor de populaire software van Qualcomm. We spraken eerder deze week met Sy Choudhury, senior directeur productbeheer bij Qualcomm, en hoewel ze me niet hebben overtuigd dat benchmarks de perfecte manier zijn om de prestaties van onze Android-telefoons en -tablets te meten, hebben ze toch geantwoord een paar vragen die ik heb gehad en die me opnieuw naar het probleem hebben laten kijken. Dat is geen sinecure - ik ben behoorlijk koppig.
Laten we eerst praten over de app zelf. Een benchmark-tool hoeft er niet lelijk uit te zien en Vellamo doet het echt goed. In het hoofdscherm van de app kunt u kiezen tussen op HTML 5 gebaseerde browserbenchmarks, "Metal", zoals in hardwaremetingen, benchmarks of een set extra's zoals tools om de aanraakschermrespons te meten, de Octane-benchmark en "geavanceerde" videobenchmarking hulpmiddelen.
Benchmarking is eenvoudig, tik op een van de ronde pictogrammen en laat het lopen. Wanneer u klaar bent, kunt u uw scores vergelijken met die van anderen, of een beetje dieper kijken om elke test afzonderlijk te evalueren. U kunt ook lang op het hoofdbenchmarkpictogram drukken en afzonderlijke tests selecteren. Met de instellingen kunt u meerdere tests uitvoeren om het beste gemiddelde (aanbevolen) te krijgen, de uitgebreide set resultaten naar u e-mailen wanneer u klaar bent en de tutorial in- en uitschakelen.
Het belangrijkste is dat er een link naar een volledige beschrijving van elke test wordt gegeven in de sectie Over. Het heeft geen zin om deze dingen uit te voeren als je geen idee hebt wat het allemaal betekent, en Qualcomm doet geweldig werk door elke test uit te leggen in zowel de HTML 5- als de Metal-categorie, evenals de extra's. Dit is wat Vellamo mijn aanbeveling maakt voor mensen die met software spelen en het resultaat op hun telefoon willen testen. Natuurlijk kan Qualcomm me een goed geschreven pdf-bestand sturen (dat deden ze, en ik bedank ze ervoor) over elke test, maar het is verdomd slim om het voor iedereen te gebruiken die de app gebruikt om te lezen. Uitstekende zet, Qualcomm.
Zoals gezegd nam de heer Choudhury van Qualcomm een paar minuten de tijd om met ons over Vellamo te praten. Hij heeft me door alle tests en tools geleid, maar nog belangrijker: ze deelden een beetje over waarom ze de app hebben gemaakt en hoe ze deze gebruiken. Vellamo begon als een intern testpakket voor ingenieurs en ontwikkelaars bij Qualcomm. Sommige van hun klanten (mensen zoals Samsung en HTC) vroegen om de tools voor zichzelf. Qualcomm verplichtte, en besloot toen, omdat ze toch een zelfstandige app moesten bouwen dat ze het voor het publiek zouden vrijgeven. Hoewel het niet precies dezelfde app is die de fellows die Qualcomm-chips ontwerpen, gebruikt, biedt het wel exact dezelfde tools die ze gebruiken om de prestaties te testen. Leren over het hoe en waarom is altijd cool, en praten met de heer Choudhury laat me weten dat ze de prestaties van onze mobiele apparaten bij Qualcomm behoorlijk serieus nemen - minstens zo serieus als wij.
Natuurlijk vroeg ik naar een weging of voorkeur voor Qualcomm-apparaten - een populaire theorie op internet. De tests die in Vellamo worden gebruikt, zijn industriële normen en zijn ongewijzigd. De reden dat Qualcomm-apparaten vaak beter scoren op Vellamo is omdat, zoals gezegd, het de tool is die ze intern gebruiken om hun chips te verbeteren. De ingenieurs pakken problemen aan die ze in Vellamo kunnen tegenkomen, en dat betekent dat het eindproduct goed zal scoren in Vellamo. Er zijn geen stiekeme software-aanpassingen om Snapdragons beter te laten presteren dan andere chips.
Ik ben er nog steeds niet van overtuigd dat op software gebaseerde benchmark-tools een goede manier zijn om de manier waarop het ene apparaat werkt te vergelijken met het andere. Er zijn te veel variabelen, en niemand maakt zich zorgen over de gegeven ruwe gegevens en gebruikt in plaats daarvan het grote getal aan het eind als een meetinstrument voor internet-mannelijkheid. Maar als je wilt zien hoe het flashen van verschillende ROM's of het aanbrengen van andere software-bewerkingen de telefoon of tablet in je handen beïnvloedt, is Vellamo een verdomd goede manier om het te doen. Het is gratis in Google Play, pak het van de link hierboven en bekijk de productvideo na de pauze.
