I en debattartikel i måndagens DN uppmärksammar Novus vd Torbjörn Sjöström och forskaren i statsvetenskap Jenny Madestam hur bristande kvalitet på urvalet i vissa webbundersökningar ger en missriktad debatt i samhällsdebatten.
Författarna kritiserar den ökande andelen webbundersökningar, som trots att de genomförs på självrekryterade, ej slumpmässiga urval, ger uppseendeväckande resultat i media och bidrar till en missriktad samhällsdebatt. Sverigedemokraternas opinionsläge ges som exempel på hur undersökningarnas bristande kvalitet ger olika resultat. I "somliga instituts mätningar" hamnar SD konsekvent högre, i andras lägre, skriver författarna.
Under hösten jämförde Novus ett antal undersökningsföretags paneler, både självrekryterade och slumpmässiga. Bland annat tittade vi på hur många liknande paneler en och samma deltagare är med i. En upptäckt var att de personer som uppger att de röstade på SD i valet 2010 anger att de ingår i flera olika självrekryterade paneler i en högre utsträckning än andra grupper. SD-väljare är således överrepresenterade i självrekryterade paneler, vilket också visat sig i dessa undersökningars resultat, skriver författarna.
Vilka är då dessa "somliga instituts mätningar" som i Novus jämförelse visar på högre SD siffor? På Novus hemsida finns samtliga svenska väljarbarometrar sedan år 2000 publicerade (länk). I de senaste sex månadernas mätningar visar sammanställningen att YouGov eller United Minds återkommande ger de högsta skattningarna av SDs väljarstöd bland alla instituten - något som per automatik inte behöver betyda att det är en överskattning jämfört med vad ett valresultat skulle ha visat.
En återblick på valet 2010 och dess kringliggande väljarbarometrar visar att Novus sammanställning under september 2010 innehåller 30 väljarbarometrar redovisade av Demoskop, Novus, Sifo, Skop, Synovate,och United Minds (tyvärr finns inga siffror från YouGov att tillgå). Det genomsnittliga stödet för SD enligt alla instituts uppskattningar, borträknat United Minds, indikerade då ett väljarstöd motsvarande 5.4%. Ett medelvärde av United Minds mätningar under september 2010 indikerade 5.6%, alltså ett par tiondels procent högre än de övriga instituten. Det faktiska valresultatet blev 5.7 procents röstandel till Sverige Demokraterna.
Det är lätt är lätt att komma till slutsatsen att United Minds mätningar faktiskt skulle ha bidragit till en bättre skattning av valresultatet, i alla fall av SDs väljare. United Minds opinionchef Carl Melin har tyvärr ej kunnats nås, men Lars Björkman från YouGov blev förvånad över att Novus står som avsändare till debattartikeln och förklarar även varför det är logiskt att webbpaneler generellt sett visar högre siffror för SD, i jämförelse med telefonbaserade mätningar. Läs Lars Björkmans kommentarer här.
En sak är i alla fall säker. Inför valet 2014 kommer vi säkerligen får se fler webbundersökningar, både med slumpmässiga och icke slumpmässiga urval.