Sidor

Thursday, August 28, 2014

Testforskning

Det görs ytterst lite forskning om test i vårt land. Det beror säkert inte på att det inte behövs. Skälet är nog snarast att aktörerna som säljer test nöjer sig med vad de har eller importerar produkter från, i första hand, USA. Den forskning som görs möts också med skepsis, enligt min erfarenhet. Det krävs publicering.

Publicering är mycket sällsynt i branschen i vårt land. Det kan finnas flera skäl som brist på resurser och kompetens, men även mycket stora aktörer arbetar inte med publicering i nämnvärd grad. Ännu ett skäl kan vara att det kan vara svårt att få ett säljande format för vetenskapliga tidskrifter om man bara redovisar utvecklingsarbete. Kanske har det också bedömts att kunderna är svalt intresserade av publiceringsaspekten.

Det är beklagligt att jakten på någon form av vetenskaplig legitimering numera hamnar i att man hävdar att man har ett "Big Five"-test, och man verkar betrakta  Big Five som det slutliga svaret på personlighetens struktur. Men sanningen är att det inte finns någon teori värd namnet bakom Big Five och att i praktiken ger Big Five-test mycket svaga resultat med låg validitet och låg prognostisk effektivitet.





Monday, August 25, 2014

Marknadsföring av testinstrument

Psykologer vet att mänskligt beteende inte går att förutsäga annat än till en viss, oftast ganska blygsam, del. Om förutsägelsen ska baseras på test blir den sämre än om man tar hänsyn också till annan information. Dessa enkla och väl dokumenterade principer bryter aktörer inom testbranschen mot när de påstår att de kan gör "absolut säkra" prognoser. Frågan är om de har någon trovärdighet. När de dessutom lägger till att de har "världens bästa test" - inte lätt att bevisa - torde de bryta mot regler och lagar för marknadsföring som säger att man inte får ge felaktig och vilseledande information.

Monday, March 31, 2014

Hurdan är en bra säljare?

Jag hade nyligen nöjet att träffa en mycket duktig säljare. Han var/hade

socialt säker
kunnig på ämnesområdet
lyhörd inför vad människor säger
villig att ta till sig kritik och alternativa uppfattningar utan att försvara sig med näbbar och klor
inriktad på vilka kundens behov är
snabb på att svara på frågor, e-post eller annat sätt
tillgänglig
trevlig men absolut inte inställsam
måttligt hög narcissism

Självklart? Inte alls. Tänk på alla misslyckade telefonförsäljare...

Tänk också på alla test som bygger på indirekta, "subtila" dimensioner, om Thomastestet, Service First och MBTI.  UPP-testet klarar det här.

Monday, February 10, 2014

Vi har de test vi vill ha...

Ibland har jag undrat över varför så många användare fortsätter att använda test med en validitet som är okänd, eller vars validitet är känd att ligga omkring noll. Det är en gåta. Ett skäl kan vara att användare helt enkelt inte känner till att man ska ställa krav på validitet, inte vet vad det är, och inte ens förstår vad en korrelationskoefficient är. Ett annat och lite intressantare skäl är att man vill ha test som ger diffusa resultat. Testet ger information som kan tolkas lite som man vill, så man är helt fri att dra de slutsatser man önskar. Ett exempel är MBTI, som bygger på Jungs luftiga spekulationer och mäter dimensioner vars betydelse för arbetslivet ingen har kunnat dokumentera. Men det verkar spännande! Alla har vi en liten amatörpsykolog i oss, och vi smickrar oss själva genom att tro att vi kan förstå människor, skåda in i själens djup, och gör träffsäkra prognoser. Ju mera information vi får, desto säkrare känner vi oss på vår sak - det får gärna vara 30-40 personlighetsskalor. Ingen kan dra vettiga slutsatser utifrån sådan information, särskilt som testkonstruktören säger: "Inget är bra eller dåligt, allt måste tolkas av testanvändaren". Populärt nonsens!

Sunday, February 2, 2014

Big Five, skönmålning mm

DN har den 2 februari en sida om personlighetstestning. Störst utrymme får Anders Knutsson, psykolog vid Assessio. Han anser att det "finns fem egenskaper som avgör vilka förutsättningar du har för att lyckas bra på arbetsmarknaden". Dessa är de gamla vanliga "Big Five"; för Agreeableness använder han den missvisande översättningen Vänlighet. (Det är följsamhet det handlar om, något helt annat). Det är helt fel och många gånger motbevisat i forskningen att "Big Five" skulle vara valida prediktorer av arbetsresultat. Omfattande meta-analyser har visat att validiteten för 4 av de 5 dimensionerna ligger på 0.2 eller lägre; mycket låga samband. För den femte, samvetsgrannhet, ligger den omkring 0.25, också det ett mycket lågt värde och ingen förbättring sedan personlighetstest började användas omkring 1920. Inom vilken annan verksamhet skulle man acceptera avsaknad av förbättring på nästan 100 år? I vår forskning har vi med andra dimensioner än "Big Five" nått validiteter omkring 0.5.

Och så till frågan om man kan "fuska", vilket alla som använder sitt sunda förnuft genast inser. (Forskningen har visat detsamma, i mycket omfattande studier). Enligt Knutsson: ... "vi kan se att det svar som känns naturligt tror man är naturligt för andra också". Följer därav att man inte skönmålar om det är en viktigt testsituation? För det gör man! Knutsson lägger till: "Människor är dessutom väldigt ärliga vid direkta frågor". Hur trovärdigt är det?


Free counter and web stats