Lägre förtroende för SVT och SR när SOM-mätningen viktas

Publicerad

Igår 04:00

Lästid

9 Min

Illustration: Lukas Hökegård/Kvartal

Idag kan vi publicera den mest omfattande analysen hittills av SOM-undersökningens förtroendesiffror för public service, där resultaten har viktats för att kompensera för flera grupper som i regel är underrepresenterade i mätningen, bland annat sverigedemokrater.

Förtroendet för SVT och SR sjunker med 5 respektive 6 procentenheter – mer än vad SOM-institutet och bolagen själva tidigare hävdat.

– Jag tror att det sanna förtroendet är ännu lägre än de viktade siffrorna, säger Jonas Wallin, docent i statistik vid Lunds universitet, som gjort analysen.

Vad tycker du?

113

Skribenter

I SOM-institutets undersökningar är flera grupper med lägre förtroende för public service underrepresenterade – däribland sverigedemokrater, unga, män, personer med lägre utbildning och utrikes födda, vilket vi tidigare rapporterat. SOM-resultaten publiceras oviktade, det vill säga utan att svaren från underrepresenterade grupper väger lika tungt som de gör i den verkliga befolkningen.1

SVT och SR – som finansierar undersökningen – har känt till att SOM-institutet publicerar oviktade resultat och att vissa grupper är underrepresenterade. Det har inte framgått i anslutning till de förtroendesiffror bolagen redovisat offentligt.2, 3

Efter vår granskningsserie i april svarade SOM-institutet att viktning bara skulle påverka resultaten marginellt. På sin hemsida publicerade institutet ett bemötande där förtroendet för public service sjunker med 1-3 procentenheter om resultaten viktas – en skillnad som ligger inom felmarginalen.4

SOM-institutets föreståndare Annika Bergström sa i Medierna i P1 efter vår publicering att viktning skulle ge liten effekt: ”mellan en och två procentenheter”.5

SOM-institutet har också hänvisat till en rapport där man undersökt effekterna av viktning, som gett ”väldigt små utslag”.6

Om viktning och Jonas Wallins metodrapport:

När opinions- och enkätundersökningar genomförs svarar inte alla som får enkäten. Vissa grupper i befolkningen tenderar att svara oftare än andra.

För att kompensera för sådana skevheter används ofta statistisk viktning. Det innebär att underrepresenterade grupper räknas upp så att materialet bättre motsvarar befolkningens sammansättning.

Om exempelvis unga män är underrepresenterade kan varje svar från gruppen ges större vikt i det slutliga resultatet.

Viktning används av bland annat SCB, opinionsinstitut och forskare. Metoden bygger samtidigt på statistiska antaganden och kan både minska vissa skevheter och öka osäkerheten i resultaten.

Jonas Wallin, docent i statistik vid Lunds universitet, har på arvoderat uppdrag av oss gjort en ny kalibrering av SOM-materialet. Modellen väger in ålder, kön, utbildning, partisympati och födelseland. Wallin har skrivit en separat metodrapport där beräkningarna redovisas.

Valet att inte vikta grundar sig i gedigna studier, skriver SOM-institutet på sin sajt. Vidare menar man att viktning inte är en ”universalkur för att öka träffsäkerheten för en undersökning”.7

Samtidigt går det att utläsa av SOM-undersökningens egna resultat att flera grupper som har lägre förtroende för public service i regel är underrepresenterade i mätningen – bland andra sverigedemokrater, unga, män, personer med lägre utbildning och utrikes födda.

Men de viktningsanalyser som SOM-institutet publicerat hittills har endast tagit hänsyn till en eller ett fåtal av de underrepresenterade grupperna.

Så mycket skiljer sig den viktade datan

Idag kan vi publicera den första viktningsanalysen av SOM-undersökningens förtroendesiffror som justerar resultaten för merparten av de underrepresenterade grupperna samtidigt: sverigedemokrater, unga, män, personer med lägre utbildning och utrikes födda.

Efter att ha fått tillgång till datan bakom SOM-undersökningen har vi anlitat Jonas Wallin, docent i statistik vid Lunds universitet, för att justera siffrorna med hjälp av GREG-kalibrering – samma metod som används av SCB för att ett statistiskt urval i så stor utsträckning som möjligt ska representera den verkliga befolkningen.

GREG-kalibrering 

GREG (Generalized Regression) är en statistisk metod som används inom surveymetodik för att justera vikterna i ett statistiskt urval så att dess egenskaper stämmer överens med kända egenskaper för hela populationen. Metoden används av organisationer som Statistiska centralbyrån (SCB) för att korrigera för slumpmässiga urvalsfel och hantera problem med bortfall i undersökningar.

Jonas Wallin redovisar analysen och metoden i detalj i en separat metodrapport, som vi publicerar i sin helhet här. Analysen utgår från 2024 års SOM-undersökning, vilket är den senaste upplagan där den bakomliggande datan tillgängliggjorts för forskare.

Tabellen visar det viktade resultatet (grönt) mot det oviktade (grått). Källa: Jonas Wallins rapport.

Resultatet visar att förtroendet för SVT sjunker med 5,2 procentenheter när resultaten viktas om för att kompensera för de underrepresenterade grupperna, från 73 till 68 procent. Förtroendet för SR sjunker med 6,3 procentenheter, från 71 till 65 procent, vilket motsvarar nästan en tiondel av förtroendet.

– De grupper som har lägre svarsfrekvens tenderar också konsekvent att ha lägre förtroende för public service. Hur man än delar upp materialet ser man samma mönster. Det gäller exempelvis unga, utrikes födda, unga män och sverigedemokrater. Det är grupper som både är svårare att nå och som i genomsnitt har lägre förtroende, säger Jonas Wallin.

Hur stor är en skillnad på mellan 5 och 6 procentenheter i det här sammanhanget?

– Om vi säger att förtroendet sjunker med fem procentenheter, det är runt 300 000 – 400 000 personer av dem som är över 16 år som undersökningen utgår ifrån. Om så många byter åsikt… Då får man själv välja om det är marginellt eller inte, säger Jonas Wallin.

Förtroendet för Expressen och Aftonbladet stiger

Jonas Wallin har även analyserat förtroendet för andra medier. För TV4 och DN sjunker förtroendet med 3 respektive 2 procentenheter när resultaten viktas. För Expressen och Aftonbladet stiger i stället förtroendet något.

– Det är helt enkelt så att i de underrepresenterade grupperna finns det fler personer som har högt förtroende för Expressen och Aftonbladet, säger Jonas Wallin.

I den nya omräkningen finns fortfarande grupper som är underrepresenterade. Men om modellen försöker kompensera för alltför många sådana grupper samtidigt blir resultaten mer osäkra, eftersom vissa grupper då består av få personer i undersökningen, enligt Wallin. Han har därför valt att inte lägga in varje sådan grupp separat i omräkningen, utan prioriterat en modell som han menar är mer stabil.

Wallin betonar samtidigt att ingen viktningsmodell fullt ut kan kompensera för bortfallet och att resultaten därför bör tolkas som statistiska skattningar, inte som exakta mått på opinionen. När man viktar utgår man från att de som svarat inom en viss grupp i genomsnitt liknar dem i samma grupp som inte svarat.

– De som inte har svarat är troligtvis mer lika sin egen subgrupp. En ung man som inte har svarat är troligtvis mer lik en ung man som har svarat än en slumpmässigt vald person av de andra som svarat. Jag tror att det sanna förtroendet är ännu lägre än de viktade siffrorna, säger Jonas Wallin.

Borde SOM-institutet enligt dig vikta sina resultat?

– Om jag tycker de bör vikta? Ja.

Om SOM-institutet:

SOM-institutet är en oberoende undersökningsorganisation vid Göteborgs universitet. Sedan 1986 genomför institutet den nationella SOM-undersökningen, som bland annat mäter svenskarnas förtroende för institutioner och medier.

SVT och SR finansierar den del av undersökningen som handlar om medieförtroende samt publikens medievanor.

I medierapporten ingår omkring 1 700 svarande per år. Svarsfrekvensen ligger runt 50 procent, vilket innebär ett betydande bortfall, enligt Jonas Wallin. Men i relation till andra slumpmässiga undersökningar är det en relativt hög siffra.

SOM-institutet publicerar normalt resultaten oviktade, alltså utan statistisk justering för underrepresentationen i olika grupper.

Vissa grupper är återkommande underrepresenterade i materialet och generellt svårare att nå i enkätundersökningar. Det gäller bland annat män, yngre, personer med lägre utbildning, sympatisörer till Sverigedemokraterna och utrikes födda.

SOM-institutet: ”Signifikanta men fortsatt ganska små”

Vi har låtit SOM-institutets föreståndare Annika Bergström ta del av den nya analysen. Hon svarar via mejl att man inte hunnit analysera hela rapporten ännu men att den är ambitiös och att analysen är relevant för SOM-institutets kommande utvärderingar:

”Med Wallins modell verkar skillnaderna bli signifikanta men fortsatt ganska små, i synnerhet när man tar hänsyn till de inneboende felmarginalerna i den här typen av mätningar.”

Vi publicerar Annika Bergströms svar i dess helhet i denna faktaruta:

SOM-institutets föreståndare svarar på granskningen


I Johan Wallins flervariabelanalys (ålder, kön, utbildning, partisympati och utrikesfödda) sjunker förtroendet för public service med upp till 6,3 procentenheter för SR och 5,3 procentenheter för SVT. Hur ser ni på det?

Från vad vi kan se i Wallins viktningsrapport får han genom olika modeller som du säger upp till 5 procentenheters skillnad mellan viktade och oviktade data i förtroendet för innehållet i SVT för år 2024. Vi väntade oss att man skulle kunna få skillnader med olika viktningsmetoder och när man imputerar vad en respondent skulle svarat på frågor den valt att inte svara på – med Wallins modell verkar skillnaderna bli signifikanta men fortsatt ganska små, i synnerhet när man tar hänsyn till de inneboende felmarginalerna i den här typen av mätningar.

Har SOM-institutet själva genomfört analyser där dessa variabler vägs in vid viktning av medieförtroendet?

Vilka resultat gav i så fall dessa analyser?

Om nej, varför inte?

Nej, vi har aldrig viktat med exakt de metoder som Wallin använder i sin rapport. Vi har däremot utvärderat påverkan på nivåskattningar när vikter för kön, ålder, utbildning och födelseland läggs på insamlade data. Resultaten av den senaste utvärderingen av vikters påverkan på nivåskattningarna finns publicerad i en viktningsrapport från 2025 tillgänglig på vår hemsida. I anslutning till er artikelserie testade vi också i april i år att vikta mot valresultatet i senaste riksdagsvalet (2022). Det är mot bakgrund av dessa olika tester som vi har uppskattat skillnaderna till att vara relativt små.

Ett problem när det gäller att vikta för just partisympati är att det inte finns ett jämförbart facit att vikta mot. Det närmaste som finns tillgängligt är vilka partier det svenska folket valde att rösta på i senaste Riksdagsvalet. Partisympatier förändras under en mandatperiod och ju längre från valår vi kommer, desto osäkrare blir liknelsen mellan partisympati och föregående valresultat. Vad vi kan utläsa från rapporten så har Wallin utgått från valresultatet 2022 i sin viktning av 2024 års data. Detta väcker frågor om hur exempelvis icke-röstberättigade respondenter (personer under 18 år och icke-svenska medborgare) och blankröster har hanterats i utvärdering av vikterna. Det här skulle vi behöva titta närmare på i hans rapport.

Vi jobbar med analyser av cirka 1 100 variabler för varje mätår över 40 år, där medieförtroende utgör en liten del allt det vi mäter. Det är svårt att hitta en viktningsmetod som är robust och applicerbar på alla olika frågor över alla undersökningsår.

Ni har tidigare uppgett att det handlar om ”mellan en och två procentenheter” (På frågan hur mycket en viktning kan innebära i Medierna i P1). Hur har ni kunnat dra den slutsatsen?

Den slutsatsen bygger på 2025 års data viktat på enbart partisympati baserat på valresultatet 2022 som vi publicerade på vår webb 24 april. Den visade skillnader på 1-2 procentenheter i allmänhet för de olika medieaktörerna. För SVT skiljde det efter avrundning 2 procentenheter när vi jämförde viktade och oviktade resultat.

Och vad tänker ni om det i relation till de skillnader som uppvisas i Johan Wallins modell?

Det är tydligt att olika modeller och viktningsmetoder kan ge skillnader i estimat. Som Wallin visar i vissa fall upp till 5-6 procentenheter. Att olika modeller ger olika estimat betyder inte att någon av modellerna är felaktig. Denna typ av mätning är ingen exakt vetenskap, det finns ingen garant för att något av resultaten är närmare ”sanningen” än det andra. Och återigen är skillnaderna, om man tar hänsyn till felmarginal och avrundningar, fortfarande förhållandevis små.

Varken SVT eller SR redovisar att siffrorna är oviktade

Både SVT och SR använder återkommande SOM-institutets förtroendesiffror i sina public service-redovisningar till regeringen, i remissyttranden och i sin offentliga kommunikation. Bland annat används de för att mäta olika mål. År 2024 hade SVT ett mål på att ha 75 procents förtroende.8

Public service-bolagen kan själva välja om de vill ha ett viktat material av SOM-institutet.

Vi har även sökt SVT:s vd Anne Lagercrantz, som inte vill ta del av resultaten och som avböjer intervju. Det gör även SR:s vd Cilla Benkö, som inte heller velat ta del av resultaten.

Vad tycker du?

113

ForskningPublic service

Relaterat innehåll

Har det nyhetsvärde om 400 000 svenskar plötsligt tappar förtroendet för public service? Sammanfattar här vår granskning, där vi idag publicerar en ny del: 1. PS använder varje år de ”skyhöga” förtroendesiffrorna från SOM-institutet för att motivera sin mångmiljardbudget. 2. SOM-mätningens resultat viktas inte för att justera för flera underrepresenterade grupper i befolkningen med lägre förtroende för PS, 3. SOM skriver inte i sina rapporter att resultaten är oviktade, och inte att SVT och SR betalar för undersökningen. 4. När vi publicerade granskningar med punkt 1-3 ovan svarade SOM att viktning inte behövs eftersom skillnaderna blir så små (1-2 eller 1-3 procentenheter) – trots att man inte gjort en viktningsanalys där alla underrepresenterade grupper vägs in. 5. Nu har vi fått ut datan och låtit Jonas Wallin, docent i statistik, vikta om för flera underrepresenterade grupper. Förtroendet för PS sjunker då med 5-6 procentenheter, medan förtroendet för vissa andra medier i stället stiger. Förändringen motsvarar att 400 000 personer i befolkningen tappar sitt förtroende för public service. 6. SOM-institutet svarar nu att skillnaderna verkar bli signifikanta men menar att de fortsatt är ”ganska små”. 7. SVT och SR, som konsekvent hänvisat till SOM:s uttalanden om att viktning skulle få marginell betydelse, har svarat oss att de inte vill ta del av den nya analysen. Anne Lagercrantz och Cilla Benkö vägrar fortsatt att ställa upp på intervju. Läs den senaste delen i Jesper Anderssons och min granskning, och berätta gärna vad du tycker!

18