Tast et nummerplade- eller et mærke og model-navn ind på stort set hvilken som helst bilside i dag, og du får et tal tilbage på under et sekund. Det virker autoritativt, fordi det kommer med decimalpræcision — 84.250 AED, ikke "et sted i firserne." Folk tager den præcision som bevis. Det er den ikke. Det er et estimat bygget på, hvilke sammenlignelige annoncer der nu var aktive den dag, og de tre måder folk misbruger det på, er de samme tre måder, hvorpå ethvert vurderingsværktøj — vores eget inklusive — bliver misbrugt af den, der læser det.
Fejl nummer et: at behandle estimatet som et bindende bud
Konsekvenserne her er forudsigelige: en sælger sætter prisen til nøjagtig det tal, værktøjet gav dem, vægrer sig ved at rykke, og bilen står i seks uger, mens identiske biler til lidt lavere priser bliver solgt omkring den. Eller en køber går ind på en bilforhandler med en udskrift i hånden og forventer, at forhandleren matcher den til dirhammen, og bliver irriteret, når forhandleren forklarer, at tallet ikke ved, at bilen har eftermonterede fælge og et hul i servicehistorikken.
En vurdering er et statistisk centrum, ikke en kontrakt. I vores eget datasæt — 1,13 millioner aktive annoncer tværs over 73 regioner lige nu — er spredningen omkring en models "typiske" pris bred nok til, at et enkelt tal i virkeligheden er en forkortelse for et interval, normalt 8 til 15% bredt, når man tager hensyn til udstyrsvariant, kilometerstandsinterval og sælgertype. Betragt resultatet som "midten af, hvor denne bil bør lande," ikke som noget nogen skylder dig, eller noget du har ret til at betale.
Fejl nummer to: ikke at tjekke, hvor mange sammenlignelige annoncer der faktisk lå bag tallet
Det er den, folk aldrig tænker på at spørge om, og det er den, der forårsager de største fejlskud. En vurderingsmodel fungerer ved at sammenligne din bil med lignende, nylige annoncer — samme model, lignende årgang, lignende region. Når det sammenligningsgrundlag er dybt, er tallet solidt. Når det er tyndt, kan tallet svinge voldsomt, og værktøjet vil som regel ikke fortælle dig, hvilken af de to situationer du er i.
Dybden varierer enormt fra region til region, selv på landeniveau:
Men landetotaler undervurderer den egentlige risiko, fordi det tal, der faktisk fodrer din vurdering, ikke er landetallet — det er dét tal, efter du har skåret det ned på mærke, model, udstyrsvariant, årgang og nogle gange kilometerstandsinterval. En region med 79.881 annoncer kan stadig kun give dig fire sammenlignelige biler, når du snævrer ind til en bestemt udstyrsvariant i en bestemt modelårgang. Jeg har personligt set en usikret version af en prissammenligningsberegning svinge med over 1.000%, fordi den lænede sig op af en enkelt outlier-annonce uden noget minimumskrav til stikprøvestørrelsen. Vi løste det ved at nægte at offentliggøre en sammenligning, før der er et minimumsantal annoncer på hver side af den. Mange værktøjer derude gider ikke indføre den slags bundgrænse, og de vil give dig et sikkert udseende tal, der står på en stikprøve af to eller tre biler.
Hvis et vurderingsværktøj ikke vil fortælle dig, hvor mange sammenlignelige biler det brugte, gå ud fra, at det er færre end du kunne ønske dig.
Fejl nummer tre: at antage at modellen kan se, hvad sælgeren ikke skrev
Algoritmen kender kun det, der står i annoncedataene. Den ved ikke, at bilen har stået under vand, at gearkassen blev restaureret sidste år, eller at sælgeren har hastværk, fordi vedkommende forlader landet om tre uger. Den ved heller ikke, at billedet af kilometertælleren ikke helt stemmer med beskrivelsen. På vores egen platform ankommer omkring 81.000 annoncer helt uden kilometerstand, og vi udfylder det hul med et kohorteblandet estimat i stedet for at gætte et enkelt tal — hvilket er den redelige måde at håndtere det på, men det er stadig et estimat, der står i stedet for et faktum, og vi flager det i stedet for at skjule det. De fleste værktøjer, der ikke oplyser om dette, behandler bare stiltiende et manglende felt som gennemsnit og går videre.
Konsekvenserne af denne fejl viser sig som regel efter salget, ikke før. En køber betaler den vurderingsjusterede pris for en bil med en restaureret gearkasse, fordi intet i annoncedataene flagede det, og finder ud af det fra mekanikeren tre uger senere. Vurderingen var ikke forkert som sådan — den prissatte den bil, dataene beskrev, og dataene var ufuldstændige.
Sådan ser den rigtige måde ud
Intet af dette betyder, at vurderingsværktøjer er ubrugelige — af de 1,13 millioner annoncer, vi overvåger lige nu, bliver omkring 12.800 flaget som ægte underprissatte, og det signal fungerer kun, fordi den underliggende prismatematik er solid det meste af tiden. Den rigtige måde at bruge en vurdering på — vores eller nogen andens — er at læse den som et udgangsinterval, spørge hvor mange sammenlignelige annoncer der ligger bag den, og så gå ud og verificere de ting, intet datasæt kan se: få bilen i hånden, kør VIN-historikken, og få en mekaniker til at tjekke den, før tallet på skærmen bliver tallet på fakturaen. Værktøjet fortæller dig, hvor markedet ligger. Det kan ikke fortælle dig, hvad der er galt med den specifikke bil, der står foran dig — det er stadig dit job.


