Hjem meninger Benchmarks er ikke nok, men heller ikke opplevelser

Benchmarks er ikke nok, men heller ikke opplevelser

Video: Apple M1 Mac Review: Time to Recalibrate! (Oktober 2024)

Video: Apple M1 Mac Review: Time to Recalibrate! (Oktober 2024)
Anonim

VIS ALLE BILDER I GALLERI

SAN FRANCISCO - For et år siden, etter å ha deltatt i Intel Developer Forum (IDF) i 2012, stilte jeg et spørsmål inspirert av ting jeg hadde hørt fra de forskjellige presentatører og PR-folk på showet: "Hvordan benchmarker du opplevelser?" Oppfatningen folk fløt da var at det som virkelig betyr noe om et system er hvor bra det fungerer, ikke hvor godt det scorer på syntetiske ytelsestester. I dag har tilsynelatende ikke mye endret seg.

Siden jeg fordypet meg igjen i Intel's verden denne uken, har jeg funnet meg overfor en kontinuerlig sperring av insistering på at benchmark-tester er passé i beste fall og villedende i verste fall, og at det å fokusere på bruken av sluttproduktet er det som er mest verdifullt til forbrukere - eller i det minste hva som skal være. Én forekomst var særlig vokal, til og med å gå så langt som å dissekere koden til noen viktige deler av benchmarking-programvaren (nei, vi ble aldri fortalt nøyaktig hvilken) for å analysere årsakene til at de ikke var klarert i utgangspunktet.

Merkelig nok, gang på gang i løpet av showet, har Intel-representantene spionert hvordan prosessoren er så og så prosent raskere enn prosessoren, hvordan vi burde se score, men mye bedre denne gangen. Og jeg ble invitert til et arrangement på Intel-campus i Santa Clara spesielt med det formål å kjøre tester på selskapets nye prosessplattform for Bay Trail-nettbrett. Tilsynelatende er benchmarking-resultater fortsatt viktige innimellom.

På ett plan er Intel helt korrekt i denne tankegangen. Nei, benchmark-score forteller ikke deg alt om et produkt, og de alene vil aldri være hvordan noen bestemmer seg for å kjøpe denne enheten i stedet for den. Ingen, fra teknologiselskaper til teknisk anmeldere til teknologikonsumenter, bør stole på dem eksklusivt, selv om de vet hvordan de skal tolke dem på riktig måte.

Men benchmark-score er nyttige, kanskje til og med viktige, for punktet der spørsmål om "opplevelser" slutter å være relevante. Ikke alle vet kanskje om resultatet de ser fra en slags aktivitet faktisk er bra eller bare er i orden, eller om et visst spill på det ser urimelig rykkete ut, eller om det bare er det beste de kan forvente for pengene de vil betale.

Scoringer fra en objektiv - eller, pokker, til og med en riktignok ikke-objektiv - tredjepart, gir den avgjørende endelige delen av innkjøpspuselen. Hvis to nettbrett ser ut til å spille av video på nøyaktig samme måte, og det er det du bryr deg om, hvilken bør du velge? Hvis du vet at du vil spille spill, men ikke personlig kjenner FRAPS fra en frappuccino, ser ikke en liste over sammenlignbare bildefrekvenser den beste måten å få det beste systemet til den beste prisen?

VIS ALLE BILDER I GALLERI

Til syvende og sist forteller ikke opplevelser deg alt. Fokus på disse, akkurat som å fokusere på benchmarks, gir et ufullstendig bilde som kan inspirere til mer forvirring enn klarhet. Å være oppmerksom på et sluttprodukt er fornuftig av mange grunner, særlig blant dem at det gjør selskapets ganske esoteriske produkter lettere for selskapet å selge og lettere for forbrukeren å forstå.

Mens jeg var i Santa Clara for referanseevalueringen av Bay Trail, fikk jeg også et spennende glimt bak kulissene på Intels "User Experience Lab", der en serie tester og målinger, som involverer alt fra datamaskiner til roboter til et hemi-anechoic kammer, er utplassert for å bedømme bruken av systemets komponenter. Kvaliteten på lyd, bredde på visningsvinkler og følsomhet for berøringsskjerm er viktige problemer som påvirker den daglige bruken, og etter å ha sett laboratoriet hadde jeg en mye tydeligere forståelse av logikken bak Intels skyvende opplevelser i disse dager.

Hva som skjer i et testlaboratorium og hva som skjer i stuen din er selvfølgelig ikke alltid (om noen gang) det samme; mye flere variabler kommer i spill når du har kommet hjem, og ingen selskaper kan teste for alt du måtte gjøre med datamaskinen din. Intels strenge vitenskapelige applikasjoner er et bra sted å starte, men som tilfellet er med testresultatene, er det mange mennesker på Intel som ofte prøver å gjøre, ikke et godt sted å stoppe.

I et databehandlingslandskap som endrer seg hver dag og, enda viktigere, blir mer og mer mainstream for hver forbipasserende generasjon, er det en god ide å gå fra målestokk til opplevelser. Men inntil det er en repeterbar måte å bokstavelig benchmark disse opplevelsene, slik at den interesserte forbrukeren ikke bare vet hva som betyr noe, men hvorfor det betyr noe, og hvordan det kan hjelpe, må erfaringer og benchmarks samarbeide for å hjelpe forbrukerne med å få informasjonen, svarene og systemer de trenger.

VIS ALLE BILDER I GALLERI

Benchmarks er ikke nok, men heller ikke opplevelser