Mening: Prestatiebenchmarks zijn waardeloos, hier leest u hoe u ze kunt verbeteren

Prestatiebenchmarks-zijn-waardeloos-Hier leest u hoe u ze beter kunt maken

AMD maakt zich klaar om zijn volgende generatie architectuur te lanceren (met de codenaam Drievuldigheid) en nodigde een aantal van ons uit naar Austin om het te zien. Ik kan niet over de technologie praten voordat deze wordt gelanceerd, maar een van de gebeurtenissen op de beurs was een rechtstreekse vergelijking tussen deze AMD-technologie en de topproducten van Intel. In elke test (inclusief productiviteit, videoverbetering en bestandscompressie) was de AMD Trinity-technologie niet alleen sneller, maar aanzienlijk sneller.

Hoewel de demonstratie indrukwekkend was, herinnerde het me er ook aan waarom benchmarks eigenlijk niet meer zo nuttig zijn. Ze weerspiegelen niet alleen niet wat ieder van ons individueel doet, maar houden ook geen rekening met de kosten, de grootte van het apparaat of het ontwerp, die allemaal misschien wel belangrijker zijn dan welke directe prestatiemaatstaf dan ook.

Apple heeft bijvoorbeeld al jaren geen benchmarks meer geleid. Zij aan zij met concurrenten lijken de iPad en iPhone feitelijk relatief traag (ze gebruiken vaak oudere netwerk-, processor- of opslagtechnologie). Ze zijn ook relatief duur, maar toch geven veel mensen er nog steeds de voorkeur aan, wat erop wijst dat de huidige benchmarks waardeloos zijn voor deze kopers. Ze rangschikken andere dingen hoger.

Verwant

  • De ChatGPT-rivaal van Google is zojuist gelanceerd in de zoekresultaten. Hier leest u hoe u het kunt proberen
  • De twee-factor-authenticatie van Twitter ondervindt problemen. Hier leest u hoe u van methode kunt wisselen
  • De eerste Windows 11-update maakt een groot prestatieprobleem nog erger

Hoe zou een perfecte benchmark eruit zien?

Hoe werk jij?

De perfecte benchmark zou worden afgeleid van een voortdurende analyse van hoe u uw hardware gebruikt. We veranderen allemaal naarmate we ouder worden, en veranderen zelfs wat we doen van dag tot nacht, van weekdagen tot weekends en op vakantie, dus de opname zou over een bepaalde periode moeten plaatsvinden.

Het moet ook zoeken naar kritische punten, zoals wat ons irriteert en wat ons opwindt – niet alleen in termen van wat we doen, maar ook waar we het over hebben. Kortom, houd rekening met onze sociale netwerkactiviteiten in zaken als Facebook en Pinterest.

Ten slotte zou het alle aspecten van ons belang rangschikken en rekening houden met de kosten, niet alleen de kosten van het kopen van het product product, maar de tijdskosten van het in gebruik nemen van het product, het onderhoud ervan en onze gevoeligheid ervoor uitvaltijd.

Het apparaat analyseren

Omdat het onpraktisch is gebleken om naar een winkel te gaan en een benchmark op een pc op de plank uit te voeren, en onmogelijk om hetzelfde te doen Als we online willen kopen, zou de ideale benchmark ook de prestaties van systemen op het internet moeten vastleggen markt. Tegenover deze objectieve gegevens zou het ook subjectieve gegevens verzamelen over het ontwerp, de verwachte betrouwbaarheid en de tijd tot veroudering. Hoewel de laatste twee uit historische gegevens zouden kunnen komen (net zoals Consumer Reports dat doet met zijn gelederen), is het ontwerp De analyse zou gebaseerd zijn op wat iemand die op u lijkt qua persoonlijkheidstype en smaak, op de ranglijst zou staan Product.

Ten slotte zou, gezien het feit dat we in een online ‘cloud’-wereld leven, een groot deel van de vastgelegde gegevens nodig zijn te maken hebben met de services waarmee het apparaat is verbonden, de apps die het zou laden en de algehele end-to-end-gebruiker ervaring.

Uiteindelijk zou alles wiskundig worden weergegeven.

Het resultaat

Het resultaat zou toegankelijk zijn op een site waar u kunt inloggen en het type product kunt specificeren dat u zoekt, of een aantal producten kunt invoeren waarnaar u kijkt. Het systeem geeft u dan een reeks keuzes met daarin de belangrijkste analytische elementen. Dus als je iets zag dat niet actueel was, of waar je het niet mee eens was, kon je het element veranderen en zo de rangschikking veranderen.

U kunt een algemene ranglijst zien van ongeveer 10 producten, waarbij enkele specifieke producten zijn gemarkeerd: de laagst geprijsde, de die het beste bij u past, en het meest gebalanceerd (beste prijs-kwaliteitverhouding, zoals gedefinieerd door uw unieke behoeften en smaak). Dit lijkt ook enigszins op wat Consumer Reports probeert te doen, maar dan geavanceerder.

Je zou eindigen met een lijst met topkeuzes die je waarschijnlijk meer zullen opwinden. Het kan ook producten analyseren die u al bezit, om te markeren wanneer de prestaties zo verslechterd zijn dat u er geïrriteerd door raakt. of wanneer de extra prestaties van een nieuw systeem groot genoeg waren om het voor u de moeite waard te maken – specifiek op basis van uw behoeften.

Benchmarks hoeven niet slecht te zijn

Toen ik voor het eerst benchmarks tegenkwam, klaagde Intel dat het systemen bouwde die beter afgerond waren, terwijl AMD benchmarks gebruikte om mensen naar systemen te leiden die ze minder leuk zouden vinden. Intel probeerde de industrie ertoe te brengen de benchmarks te laten vallen, maar dat mislukte en optimaliseert nu grotendeels voor benchmarks.

Als u zich concentreert op wat mensen willen doen, biedt u een betere ervaring, maar wordt u waarschijnlijk nog steeds onder de loep genomen door benchmarks. Tijdens het AMD-evenement wees het bedrijf op de redenen waarom benchmarks slecht zijn.

Ik denk dat het antwoord hier is om benchmarks te creëren die niet waardeloos zijn. We hebben online tools die een hoop informatie over ons verzamelen om aan adverteerders te verkopen, maar dat is niet het geval Het lijkt zo ingewikkeld om een ​​deel van deze technologie te gebruiken om een ​​hulpmiddel te creëren dat ons gelukkiger maakt consumenten. Gezien het feit dat al deze informatie over ons wordt verzameld en van ons zou moeten zijn, zou het heel fijn zijn als deze zou worden gebruikt om ons gelukkiger te maken, in plaats van ons alleen maar uit te melken voor geld. Dit zou een manier zijn om dat te doen. Wat denk je?

[Afbeelding tegoed: kk-kunstwerken/Shutterstock]

Aanbevelingen van de redactie

  • Ransomware-aanvallen zijn enorm toegenomen. Hier leest u hoe u veilig kunt blijven
  • Hier leest u hoe u uw gratis prestatieverbetering van 40% van AMD kunt krijgen
  • Hier ziet u hoeveel sneller Nvidia’s RTX 4090 is bij het kraken van wachtwoorden
  • Uitgelekte Alder Lake-benchmark laat een prestatiewinst van 21% zien ten opzichte van AMD
  • De eerste gaming-benchmarks van Alder Lake lekken – dit is waarom je ze niet zou moeten geloven

Upgrade uw levensstijlMet Digital Trends kunnen lezers de snelle technische wereld in de gaten houden met het laatste nieuws, leuke productrecensies, inzichtelijke redactionele artikelen en unieke sneak peeks.