Det handlar väl mest om hur man konstruerar testet. I det här fallet har redaktionen satt ihop ett test baserat på hur de vill att en bra resebyrå ska fungera för att fylla behovet för medvetna resenärer. Många andra tester utgår nog mer från att ranka vissa aspekter, som de vet att resebyråer har.
Man kan jämföra detta lite med de betygssystem vi har haft i skolan sista 30 åren. Förr så var det ofta så att medelbetyget i en klass var 3 (även om det inte var tänkt att vara så), dvs de bästa fick högsta betyg och de som presterat sämst fick lägsta betyg, helt utan relation till hur bra deras absoluta prestation varit. Numera finns det i förväg uppsatta krav för vilken prestation som krävs för ett visst betyg.
Personligen anser jag att det är mer intressant att titta på den absoluta prestationen om man vill göra ett test som har i förväg uppsatta kriterier och som inte bara försöker ranka resebyråer utan mäta hur de presterar relativt dessa kriterier.
Så långt tänkte jag överhuvudtaget inte. Jag tänkte bara på det faktum att den bästa resebyrån bara var 37 % bättre än den sämsta samtidigt som testets sämst-i-test inte nådde upp till mer än 30 % (men som ändå inte blev klassad som sämst). Medeltalet på avklarande av kriterier, på runt 50 % tycker jag inte var så värst konstigt, däremot är det märkligt att spannet mellan den bästa och den sämsta är så lite som 37 %. Det säger mig ingenting annat än att den absoluta majoriteten inte efterfrågar dessa funktioner som efterfrågas.
Men att alls ta upp det som är viktigt för rätt många andra, avgifter för om- och avbokning i den mån biljetten tillåter det, är ännu konstigare. Säkerligen är det så att kanske 80-90 % av biljetterna som resebyråer säljer inte alls går att om- eller avboka men det om något är väl något för en medveten resenär (som senare säkert utöver sitt American Express också har ett vanligt bankkort "Visa/Mastercard" som alla accepterar eller har möjlighet att via Internetbank betala resan om man verkligen inget har).
Man har också satsat på kvantitet mer än kvalitet. Jag skulle hellre gjort ett kanske fem-i-topp-test, under förutsättning att någon dög. Alla hade ju funktioner som saknades. Eller så accepterar man bara att man vackert får ringa/besöka istället för att boka via webben om ska ha alla funktioner och kundservice (internetbokning är ju självservice!) – gör man ett test av hårschampon och vill få fram det absolut bästa så går man inte till snabbköpet utan till en bra frisörsalong!