På FiveThirtyEight strävar vi efter att samla in och analysera data från opinionsundersökningar på ett sätt som är ärligt, informerat, omfattande och korrekt. Även om vi ibland beställer opinionsundersökningar, kommer den största delen av vår förståelse av den amerikanska allmänna opinionen från aggregering av opinionsundersökningar som utförts av andra företag och organisationer. Dessa uppgifter utgör grunden för våra genomsnitt av opinionsundersökningar, valprognoser och en stor del av vår politiska bevakning.
När vi bygger upp vår databas med opinionsundersökningar strävar vi efter att vara så inkluderande som möjligt. Detta innebär att vi kommer att samla in alla opinionsundersökningar som har gjorts offentligt tillgängliga och som uppfyller några grundläggande standarder:
- Mätningen måste innehålla namn på undersökningsföretaget, undersökningsdatum, urvalsstorlekar och detaljer om den utvalda befolkningen. Om dessa uppgifter inte finns med i offentliggörandet av undersökningen måste vi kunna få tag på dem för att inkludera undersökningen.
- Mätningsföretagen måste också kunna besvara grundläggande frågor om sin metodik, inklusive, men inte begränsat till, det medium genom vilket undersökningen genomfördes (t.ex, fasta samtal, sms osv.), källan till deras väljarfiler och deras viktningskriterier.
Det finns dock vissa typer av opinionsundersökningar som vi inte tar med, till exempel:
- ”Icke-vetenskapliga” opinionsundersökningar som inte försöker undersöka ett representativt urval av befolkningen eller väljarkåren.
- Undersökningar som Civiqs eller Microsoft News tracking polls som produceras med hjälp av MRP (förkortning för ”multilevel regression with poststratification”), en modelleringsteknik som producerar uppskattningar baserade på enkätintervjuer som sedan används för att beräkna sannolikheter; dessa sannolikheter projiceras sedan på sammansättningen av befolkningen i fråga. Även om detta är en giltig teknik för att förstå uppgifter om den allmänna opinionen, utesluter vi dem eftersom vi betraktar dem mer som modeller än som enskilda opinionsundersökningar. (Som en analogi kan vi tänka oss detta som att använda någon annans grillsås som ingrediens i din egen grillsås.)
En ytterligare förteckning över kantfall där vi kan utesluta opinionsundersökningar finns i den här artikeln. Till exempel utesluter vi opinionsundersökningar som frågar väljarna vem de stöder först efter att ha avslöjat ledande information om kandidaterna.
Vi inkluderar interna opinionsundersökningar som är offentligt tillgängliga, utom i en ovanlig omständighet (en opinionsundersökning i allmänna val som sponsras av en kandidats rival i primärvalet.1) Interna och partipolitiska opinionsundersökningar har en asterisk bredvid opinionsundersökarens namn. Asterisken anger inte om opinionsundersökaren själv är partisk, utan om pengarna som betalade för undersökningen kom från en partisk källa. Opinionsundersökningar anses vara partipolitiska om de genomförs på uppdrag av ett politiskt parti, en kampanjkommitté, PAC, super PAC, 501(c)(4), 501(c)(5) eller 501(c)(6) som bedriver en stor majoritet av sin politiska verksamhet på uppdrag av ett politiskt parti. Dessutom, i fall där ett opinionsinstitut rutinmässigt genomför opinionsundersökningar för partipolitiska sponsorer, och vi får reda på att de inte är transparenta när det gäller sponsring, kommer vi att räkna alla deras opinionsundersökningar som partipolitiska.
Också om vi upptäcker att en sponsororganisation selektivt släpper opinionsundersökningar som är gynnsamma för en viss kandidat eller ett visst parti, kan vi också kategorisera den organisationen som partipolitisk. Vi gör i allmänhet allt för att inte karakterisera nyhetsorganisationer som partipolitiska, även om de har en liberal eller konservativ åsikt. Men att selektivt släppa uppgifter som gynnar ett parti är en partipolitisk handling, och sådana opinionsundersökningar kommer att behandlas som sådana. Dessa klassificeringar kan komma att omprövas om en sponsor upphör med detta beteende.
Mätningar som vi misstänker är falska kommer inte heller att inkluderas förrän vi genomför en grundlig undersökning och kan bekräfta deras sanningshalt. Vi kommer att permanent förbjuda alla opinionsundersökningsinstitut som befinns förfalska data eller utnyttja vadslagningsmarknader baserat på kunskap om hur deras undersökning kan påverka dessa marknader. Dessutom förbehåller vi oss rätten att förbjuda opinionsundersökningar som sponsras av en viss organisation som konsekvent ägnar sig åt oärligt eller icke-transparent beteende som går längre än redaktionellt och politiskt spinn.
Våra riktlinjer för inkludering är avsiktligt tillåtande. Vi strävar efter att fånga upp alla offentligt tillgängliga opinionsundersökningar som genomförs i god tro. Även om vissa opinionsundersökningar har ett mer etablerat resultat när det gäller noggrannhet än andra – och vi tar hänsyn till detta i våra modeller och politiska analyser – utesluter vi opinionsundersökningar från vårt dataset endast i undantagsfall.
Nedan följer några frågor som vi ofta har fått genom åren om vilka typer av opinionsundersökningar vi samlar in. Ta en titt och om du fortfarande har frågor eller hittar en opinionsundersökning som vi inte har, skicka ett e-postmeddelande till oss på [email protected].
Frekventa frågor
Q: Vilka lopp samlar ni in opinionsundersökningar för?
A: Vi samlar in opinionsundersökningar för president-, senats-, kammar- och guvernörsloppen utöver opinionsundersökningar om godkännande av presidenten och allmänna opinionsundersökningar för kongressens allmänna val på nationell nivå. För närvarande samlar vi inte in opinionsundersökningar för primärval utom för presidentvalet – utom i fall av ett ”djungelprimärval”, eftersom det är möjligt för en kandidat att vinna platsen direkt. Sidan med de senaste opinionsundersökningarna innehåller alla opinionsundersökningar som offentliggjorts inom två år efter ett val. Om vi inte har några opinionsundersökningar för ett lopp i en viss delstat betyder det att vi inte kände till några opinionsundersökningar där.
Q: Kan jag ladda ner dessa data?
A: Ja! Det finns länkar längst ner på sidan med de senaste opinionsundersökningarna, men du kan också ladda ner denna data och mer från vårt datalagret för alla våra opinionsundersökningar, prognoser och andra dataprojekt. Tyvärr kan vi dock inte dela med oss av historiska data för presidenters godkännandegrader. Du kan hitta ytterligare information om historiska godkännandegrader för presidenter och riktlinjer för att skaffa den datamängden på Roper Centers webbplats.
Q: Hur redovisar ni ett opinionsinstitut som publicerar flera resultat för en fråga?
A: När ett opinionsinstitut publicerar flera delurval (t.ex. alla vuxna, endast registrerade väljare och endast sannolika väljare), tar vi med dem alla i vår databas. På samma sätt, om ett opinionsinstitut ställer en hästkapplöpningsfråga med olika uppsättningar kandidater – till exempel med och utan en tredjepartskandidat – tar vi med alla versioner av denna fråga i vår databas. Om undersökningsföretaget inkluderar flera modeller för sannolika väljare, som i denna Monmouth-undersökning, kontrollerar vi först om undersökningsföretaget anger att en av versionerna är det alternativ som föredras. Om så är fallet använder vi den versionen, annars tar vi med alla i vår databas.
Q: Hur redovisar man en opinionsundersökningsbyrå som publicerar siffror med och utan ”leaners”?
A: När en opinionsundersökningsbyrå publicerar en version av en fråga med ”leaners” – respondenter som kan vara osäkra på sin röstning, men som uppger att de lutar åt en viss kandidat eller ett visst parti – och en utan, tar vi bara med versionen med ”leaners”. Om frågan med ”leaners” är en fråga med ”tvångsval”, där respondenterna inte ges möjlighet att säga att de är obeslutsamma när de tillfrågas om hur de lutar åt vilket håll de lutar, tar vi ändå bara med den versionen av frågan i stället för versionen utan ”leaners”.
Q: Varför lägger ni ibland till gamla opinionsundersökningar på sidan med de senaste opinionsundersökningarna?
A: Opinionsundersökningar läggs till på sidan med de senaste opinionsundersökningarna så snart de har lagts till i vår databas. Om äldre opinionsundersökningar dyker upp på sidan med opinionsundersökningar beror det på att de nyligen har lagts till i vår databas – antingen för att vi precis har fått kännedom om dem eller för att de tidigare inte har släppts.
Q: Vad betyder betygen för opinionsundersökningsinstitutet?
A: Vi beräknar ett betyg för varje opinionsundersökningsinstitut genom att analysera dess historiska noggrannhet och metodik. Du kan läsa våra fullständiga betyg och metoder för att bättre förstå hur vi beräknar betygen.
Q: Vad betyder det när en opinionsundersökare har ett betyg som ”A/B” eller en streckad cirkel runt betyget?
A: För opinionsundersökare med ett relativt litet urval av opinionsundersökningar inom tre veckor före ett val visar vi ett preliminärt betyg (”A/B”, ”B/C” eller ”C/D”) i stället för ett exakt bokstavsbetyg och använder en streckad cirkel för att betona att betyget är preliminärt.
Q: Varför har vissa opinionsundersökningsinstitut inget betyg?
A: För vissa opinionsundersökningsinstitut har vi inga opinionsundersökningar från de tre sista veckorna av en valcykel, vilket innebär att vi inte kan utvärdera deras historiska resultat. Vi tar med opinionsundersökningar från dessa opinionsinstitut i våra genomsnitt och modeller för opinionsundersökningar, men vi kan inte tilldela dem ett betyg baserat på deras historiska resultat; därför får de mindre vikt i våra genomsnitt och modeller.
Q: Väger eller justerar ni opinionsundersökningar?
A: Ja. När vi beräknar våra opinionsundersökningsgenomsnitt får vissa opinionsundersökningar mer vikt än andra. Till exempel får opinionsundersökningar som undersöker fler personer eller som historiskt sett har visat sig vara noggranna större hänsyn vid beräkningen av genomsnittet än opinionsundersökningar med små urvalsstorlekar eller opinionsundersökningar som historiskt sett har varit mindre noggranna. Dessutom används i våra genomsnitt för opinionsundersökningar justeringar för saker som en opinionsundersökares hus-effekt (ett mått på hur konsekvent en opinionsundersökare lutar åt ett parti eller en kandidat) eller trender i opinionsundersökningar från liknande delstater. För mer information om hur vi viktar och justerar opinionsundersökningar för opinionsgenomsnitt, läs den här detaljerade förklaringen av vår metodik för 2020.
Q: När visar ni tredjepartskandidater på sidan med de senaste opinionsundersökningarna eller i era opinionsgenomsnitt?
A: Vi inkluderar tredjepartskandidater i opinionsundersökningar som frågar om dem. Du hittar dessa undersökningar genom att skriva in kandidatens efternamn i sökrutan på sidan med de senaste opinionsundersökningarna. När det gäller våra genomsnitt, om tillräckligt många opinionsundersökningsinstitut ställer frågor som inkluderar en specifik tredjepartskandidat, kommer vi att inkludera den kandidaten.
Q: Varför saknas ibland urvalsstorlekar för opinionsundersökningar?
A: Om en opinionsundersökning inte har någon urvalsstorlek angiven, har opinionsundersökningsinstitutet eller sponsorn inte rapporterat den, och vi arbetar aktivt för att få fram den. Dessa opinionsundersökningar ingår fortfarande i våra genomsnitt och modeller med en imputerad urvalsstorlek tills vi får den faktiska urvalsstorleken.
Q: Varför summerar värdena i vissa opinionsundersökningar till mer än 100 procent?
A: Värdena i vissa opinionsundersökningar kan summera till mer än 100 procent på grund av avrundning. Om en opinionsundersökare till exempel publicerar en undersökning med ett godkännande på 46,5 procent och ett ogillande på 53,5 procent skulle båda alternativen automatiskt avrundas till 47 procent respektive 54 procent.
Q: Varför stämmer inte marginalerna i vissa undersökningar överens med vad opinionsundersökaren rapporterar?
A: Detta beror också på avrundning. Om en opinionsundersökare till exempel anger en kandidat till 45,2 procent och en annan till 45,6 procent, visar vi dessa två kandidater till 45 procent respektive 46 procent. Det innebär att vi visar deras marginal som en skillnad på 0 även om den faktiska marginalen är 0,4.
Har du fortfarande frågor? Skicka oss ett e-postmeddelande så gör vi vårt bästa för att reda ut det.
Anledningen till detta är att vi inte har några bra priors för i vilken riktning biasen i sådana opinionsundersökningar kan gå. Typiskt sett skulle t.ex. en intern demokratisk opinionsmätning visa att demokraterna klarar sig bra i ett allmänt val. Men i ett konkurrensutsatt primärval är det rimligt att en demokrat kan vilja uppmärksamma siffror som får en rivaliserande demokrats allmänna valchanser att se sämre ut.
Det bästa från FiveThirtyEight, levererat till dig.