Åsikt: Prestandariktmärken är värdelösa, så här gör du dem bättre

Prestanda-benchmarks-är-värdelösa-Så här-gör man-dem-bättre

AMD gör sig redo att lansera sin nästa generations arkitektur (kod som heter Trinity) och bjöd in ett gäng av oss till Austin för att se den. Jag kan inte prata om tekniken förrän den har lanserats, men en av händelserna på mässan var en direkt jämförelse mellan denna AMD-teknik och Intels produkter från högsta hyllan. I varje test (inklusive produktivitet, videoförbättring och filkomprimering) var AMD Trinity-tekniken inte bara snabbare, den var avsevärt snabbare.

Även om demonstrationen var imponerande, påminde den mig också om varför riktmärken verkligen inte är så användbara längre. Inte nog med att de inte återspeglar vad var och en av oss gör, de tar inte hänsyn till kostnad, enhetsstorlek eller design, som var och en kan vara viktigare än någon direkt prestandamått.

Till exempel har Apple inte lett riktmärken på flera år. Sida vid sida med konkurrenter tenderar iPad och iPhone faktiskt att verka relativt långsamma (de använder ofta äldre nätverks-, processor- eller lagringsteknik). De är också relativt dyra, men många föredrar dem fortfarande, vilket tyder på att riktmärken som de för närvarande finns är värdelösa för dessa köpare. De rankar andra saker högre.

Relaterad

  • Googles ChatGPT-konkurrent har precis lanserats i sökningen. Så här provar du
  • Twitters tvåfaktorsautentisering för SMS har problem. Så här byter du metod
  • Den första Windows 11-uppdateringen gör ett stort prestandaproblem ännu värre

Så hur skulle ett perfekt riktmärke se ut?

Hur arbetar du?

Det perfekta riktmärket skulle härledas från en pågående analys av hur du använder din hårdvara. Vi förändras alla när vi åldras och ändrar till och med vad vi gör från dag till natt, från vardagar till helger och på semestern, så infångningen bör ske under en viss tidsperiod.

Den bör också leta efter kritiska punkter, som vad som irriterar oss och vad som gör oss spännande - inte bara vad gäller vad vi gör, utan vad vi pratar om. Kort sagt, ta hänsyn till vår sociala nätverksaktivitet i saker som Facebook och Pinterest.

Slutligen skulle det rangordna alla aspekter av vårt intresse och faktor i kostnad, inte bara kostnaden för att köpa produkt, men kostnaden i tid för att ta produkten i bruk, underhålla den och vår känslighet för stilleståndstid.

Analyserar enheten

Eftersom det har visat sig vara opraktiskt att gå in i en butik och köra ett benchmark på en hyllad PC, och omöjligt att göra detsamma Om vi ​​vill köpa online, skulle det idealiska riktmärket också behöva fånga systemets prestanda på marknadsföra. Mot dessa objektiva data skulle det också fånga subjektiva data om design, förväntad tillförlitlighet och tid till inkurans. Även om de två sistnämnda kan komma från historiska data (ungefär som Consumer Reports gör med sina led), designen analys skulle baseras på vad någon som liknar dig i form av personlighetstyp och smak skulle rangordna produkt.

Slutligen, med tanke på att vi lever i en "molnvärld" online, skulle en stor del av den insamlade data behöva vara på tjänsterna som enheten är ansluten till, apparna den skulle ladda och den övergripande slutanvändaren erfarenhet.

I slutändan skulle allt återges matematiskt.

Resultatet

Resultatet skulle vara tillgängligt på en webbplats där du kan gå, logga in och ange antingen vilken typ av produkt du letade efter, eller ange ett antal produkter du tittade på. Systemet skulle sedan ge dig en uppsättning val som listar de viktigaste analytiska delarna av varje. Så om du såg något som inte var aktuellt, eller du inte höll med, kan du ändra elementet och därmed ändra rankningen.

Du kan se en övergripande rankning av cirka 10 produkter med några specifika flaggade: de lägsta priserna, bästa matchen för dig och den mest balanserade (bästa valuta för pengarna enligt dina unika behov och smaker). Detta liknar också något som Consumer Reports försöker göra, men mer avancerat.

Du skulle sluta med en lista över bästa val som skulle vara mer sannolikt att hänföra dig. Det kan också analysera produkter du redan äger för att flagga när prestanda försämrats till en punkt som skulle börja irritera dig, eller när den extra prestandan hos ett nytt system var tillräckligt stor för att göra det värt det för dig – specifikt baserat på dina behov.

Benchmarks behöver inte suga

När jag först stötte på riktmärken klagade Intel över att de byggde system som var bättre, medan AMD använde riktmärken för att driva människor till system som de skulle tycka mindre om. Intel försökte få branschen att släppa riktmärkena, misslyckades och optimerar nu till stor del för riktmärken.

Om du fokuserar på vad folk vill göra, kommer du att ge en bättre upplevelse, men du kommer troligtvis ändå att bli överraskad av riktmärken. Vid AMD: s event pekade företaget på anledningarna till att riktmärken suger.

Jag tror att svaret här är att skapa riktmärken som inte suger. Vi har onlineverktyg som samlar massor av information om oss för att sälja till annonsörer, så det gör det inte Det verkar vara så svårt att använda en del av denna teknik för att skapa ett verktyg som gör oss lyckligare konsumenter. Med tanke på att all denna information är sammanställd om oss och borde tillhöra oss, skulle det vara riktigt trevligt om den användes för att göra oss lyckligare, snarare än att bara mjölka oss på pengar. Det här skulle vara ett sätt att göra det. Vad tror du?

[Bildkredit: kk-konstverk/Shutterstock]

Redaktörens rekommendationer

  • Ransomware-attacker har ökat kraftigt. Så här håller du dig säker
  • Så här får du din gratis 40% prestandaökning från AMD
  • Här är hur mycket snabbare Nvidias RTX 4090 är på att knäcka lösenord
  • Läckt Alder Lake benchmark visar 21 % prestandaökning jämfört med AMD
  • Första Alder Lake-spelriktmärken läcker - det är därför du inte ska tro dem

Uppgradera din livsstilDigitala trender hjälper läsare att hålla koll på den snabba teknikvärlden med alla de senaste nyheterna, roliga produktrecensioner, insiktsfulla redaktioner och unika smygtittar.