Det görs ytterst lite forskning om test i vårt land. Det beror säkert inte på att det inte behövs. Skälet är nog snarast att aktörerna som säljer test nöjer sig med vad de har eller importerar produkter från, i första hand, USA. Den forskning som görs möts också med skepsis, enligt min erfarenhet. Det krävs publicering.
Publicering är mycket
sällsynt i branschen i vårt land. Det kan finnas flera skäl som brist på
resurser och kompetens, men även mycket stora aktörer arbetar inte med
publicering i nämnvärd grad. Ännu ett skäl kan vara att det kan vara
svårt att få ett säljande format för vetenskapliga tidskrifter om man
bara redovisar utvecklingsarbete. Kanske har det också bedömts att kunderna är svalt intresserade av publiceringsaspekten.
Det är beklagligt att jakten på någon form av vetenskaplig legitimering numera hamnar i att man hävdar att man har ett "Big Five"-test, och man verkar betrakta Big Five som det slutliga svaret på personlighetens struktur. Men sanningen är att det inte finns någon teori värd namnet bakom Big Five och att i praktiken ger Big Five-test mycket svaga resultat med låg validitet och låg prognostisk effektivitet.
Recent research and practice in testing and psychometrics, with an emphasis on scientific and critical discussions.
Thursday, August 28, 2014
Monday, August 25, 2014
Marknadsföring av testinstrument
Psykologer vet att mänskligt beteende inte går att förutsäga annat än till en viss, oftast ganska blygsam, del. Om förutsägelsen ska baseras på test blir den sämre än om man tar hänsyn också till annan information. Dessa enkla och väl dokumenterade principer bryter aktörer inom testbranschen mot när de påstår att de kan gör "absolut säkra" prognoser. Frågan är om de har någon trovärdighet. När de dessutom lägger till att de har "världens bästa test" - inte lätt att bevisa - torde de bryta mot regler och lagar för marknadsföring som säger att man inte får ge felaktig och vilseledande information.
Monday, March 31, 2014
Hurdan är en bra säljare?
Jag hade nyligen nöjet att träffa en mycket duktig säljare. Han var/hade
socialt säker
kunnig på ämnesområdet
lyhörd inför vad människor säger
villig att ta till sig kritik och alternativa uppfattningar utan att försvara sig med näbbar och klor
inriktad på vilka kundens behov är
snabb på att svara på frågor, e-post eller annat sätt
tillgänglig
trevlig men absolut inte inställsam
måttligt hög narcissism
Självklart? Inte alls. Tänk på alla misslyckade telefonförsäljare...
Tänk också på alla test som bygger på indirekta, "subtila" dimensioner, om Thomastestet, Service First och MBTI. UPP-testet klarar det här.
socialt säker
kunnig på ämnesområdet
lyhörd inför vad människor säger
villig att ta till sig kritik och alternativa uppfattningar utan att försvara sig med näbbar och klor
inriktad på vilka kundens behov är
snabb på att svara på frågor, e-post eller annat sätt
tillgänglig
trevlig men absolut inte inställsam
måttligt hög narcissism
Självklart? Inte alls. Tänk på alla misslyckade telefonförsäljare...
Tänk också på alla test som bygger på indirekta, "subtila" dimensioner, om Thomastestet, Service First och MBTI. UPP-testet klarar det här.
Monday, February 10, 2014
Vi har de test vi vill ha...
Ibland har jag undrat över varför så många användare fortsätter att använda test med en validitet som är okänd, eller vars validitet är känd att ligga omkring noll. Det är en gåta. Ett skäl kan vara att användare helt enkelt inte känner till att man ska ställa krav på validitet, inte vet vad det är, och inte ens förstår vad en korrelationskoefficient är. Ett annat och lite intressantare skäl är att man vill ha test som ger diffusa resultat. Testet ger information som kan tolkas lite som man vill, så man är helt fri att dra de slutsatser man önskar. Ett exempel är MBTI, som bygger på Jungs luftiga spekulationer och mäter dimensioner vars betydelse för arbetslivet ingen har kunnat dokumentera. Men det verkar spännande! Alla har vi en liten amatörpsykolog i oss, och vi smickrar oss själva genom att tro att vi kan förstå människor, skåda in i själens djup, och gör träffsäkra prognoser. Ju mera information vi får, desto säkrare känner vi oss på vår sak - det får gärna vara 30-40 personlighetsskalor. Ingen kan dra vettiga slutsatser utifrån sådan information, särskilt som testkonstruktören säger: "Inget är bra eller dåligt, allt måste tolkas av testanvändaren". Populärt nonsens!
Sunday, February 2, 2014
Big Five, skönmålning mm
DN har den 2 februari en sida om personlighetstestning. Störst utrymme får Anders Knutsson, psykolog vid Assessio. Han anser att det "finns fem egenskaper som avgör vilka förutsättningar du har för att lyckas bra på arbetsmarknaden". Dessa är de gamla vanliga "Big Five"; för Agreeableness använder han den missvisande översättningen Vänlighet. (Det är följsamhet det handlar om, något helt annat). Det är helt fel och många gånger motbevisat i forskningen att "Big Five" skulle vara valida prediktorer av arbetsresultat. Omfattande meta-analyser har visat att validiteten för 4 av de 5 dimensionerna ligger på 0.2 eller lägre; mycket låga samband. För den femte, samvetsgrannhet, ligger den omkring 0.25, också det ett mycket lågt värde och ingen förbättring sedan personlighetstest började användas omkring 1920. Inom vilken annan verksamhet skulle man acceptera avsaknad av förbättring på nästan 100 år? I vår forskning har vi med andra dimensioner än "Big Five" nått validiteter omkring 0.5.
Och så till frågan om man kan "fuska", vilket alla som använder sitt sunda förnuft genast inser. (Forskningen har visat detsamma, i mycket omfattande studier). Enligt Knutsson: ... "vi kan se att det svar som känns naturligt tror man är naturligt för andra också". Följer därav att man inte skönmålar om det är en viktigt testsituation? För det gör man! Knutsson lägger till: "Människor är dessutom väldigt ärliga vid direkta frågor". Hur trovärdigt är det?
Och så till frågan om man kan "fuska", vilket alla som använder sitt sunda förnuft genast inser. (Forskningen har visat detsamma, i mycket omfattande studier). Enligt Knutsson: ... "vi kan se att det svar som känns naturligt tror man är naturligt för andra också". Följer därav att man inte skönmålar om det är en viktigt testsituation? För det gör man! Knutsson lägger till: "Människor är dessutom väldigt ärliga vid direkta frågor". Hur trovärdigt är det?
Subscribe to:
Posts (Atom)