Är USA:s anseende verkligen lågt?

Pappersupplagan av dagens SvD har följande notis:

USA:s anseende i omvärlden dalar
USA:s rykte blir allt sämre internationellt. I dag anser bara 29 procent av omvärldens medborgare att landet har en positiv inverkan på världen. Förra årsskiftet var den siffran 36 procent.
I en undersökning som gjorts för BBC har 18 000 människor i 18 länder tillfrågats, och runt 73 procent ogillade president Bushs sätt att hantera Irakinvasionen. TT-AFP.
(SvD, 24/1 2007, sidan 15)

Onekligen intressanta siffror. Men stämmer de verkligen? Det är möjligt att de gör det, men utifrån den information som ges i notisen går det inte att dra några slutsatser om deras giltighet. Statistisk information är nämligen inte särskilt värdefull om vi inte vet hur den har införskaffats och bearbetats.

Först och främst måste vi fråga oss vilka de 18 länder som undersökningen har utförts i är. Hur har man bestämt vilka länder som skall vara med i undersökningen? Är de valda länderna ett bra stickprov på världens medborgare? Har man bara valt länder i stil med Iran, Kuba och Nordkorea, eller länder som traditionellt är mer USA-vänliga? Har gruppen av tillfrågade i varje land varit ett bra stickprov på landets befolkning?

Vidare är det viktigt att undra vilka frågor som har ställts i undersökningen. Har man frågat ”anser du att USA har en positiv inverkan på omvärlden?” eller bett de intervjuade att bedöma USA:s inverkan på en 1 till 5-skala? Hur har utfrågningen gått till – har man ställt frågorna via telefon, genom dörrknackning eller med enkäter som man skickat till olika hushåll? Det finns en tendens hos tillfrågade att vilja svara det som de tror att den som frågar vill höra – och således måste vi också fråga oss vem som har utfört intervjuerna, och vad man har gjort för att undvika sagda fenomen. Vid vilken tidpunkt ställdes frågorna? De nyheter som var aktuella i media vid tiden för undersökningen kan ha påverkat resultatet. Och vad innebär det egentligen att 29 % av befolkningen tycker att USA har en positiv inverkan? Medför det att 71 % anser att de inverkar negativt, eller att 25 % tycker att de har en negativ effekt medan 46 % varken säger bu eller bä?

Man skulle kunna tro att BBC går att lita på, och att de har resurser nog att göra en ordentlig undersökning. Så kan vara fallet, men jag har tidigare sett hur deras svenska motsvarighet SVT misshandlat en statistisk undersökning, så det är ingenting som jag tar för givet.

Min nyfikenhet fick mig att gå vidare till BBC:s hemsida, där jag mycket riktigt hittade en artikel om undersökningen. Det första jag lade märke till var att BBC uppgav att undersökningen omfattade 26 381 personer i 25 länder, och inte 18 000 i 18 länder, som TT påstår. 18 av de 25 länderna har tidigare varit med i undersökningen, och det är i dessa 18 som 29 % av de tillfrågade anser att USA har en positiv inverkan på omvärlden. Värt att notera är också att ett av de länder i vilka undersökningen har genomförts är just USA, och att undersökningen således inte enbart handlar om omvärldens uppfattning om landet (det framgår dock inte om USA är ett av de 18 länderna, men det är inte orimligt att anta att så är fallet).

Hela undersökningen finns att läsa i PDF-format här. På sidan 12 i dokumentet finns de frågor som ställdes (med tillhörande svarsalternativ), och på sidan 21 anges hur många tillfrågade som finns i varje land (varierar mellan 800-1800), när intervjuerna har gjorts (november 06 – januari 07), hur de har genomförts (via telefon eller ”face-to-face”) och vilken del av befolkningen som har tillfrågats (åldersgrupp och vilken typ av område de bor i). Felmarginalen i de olika länderna uppges variera mellan +/- 2,5 och 4 procent. Det framgår inte hur de tillfrågade har valts.

I Filippinerna har 1000 personer, ålder 18 och uppåt, tillfrågats i face-to-face-samtal. Om vi bortser från problemet med att man får förväntade svar så kvarstår dock det faktum att samtliga tillfrågade befann sig i landets huvudstad. Filippinernas huvudstad står, enligt en fotnot i dokumentet, för 27 % av landets urbana befolkning. Det sägs dock inte hur stor andel av befolkningen som klassas som urban. Det här kan vara en möjliga felkälla, för det är inte säkert att huvudstadens befolkning är representativ för landets befolkning i stort. Som ett något extremare tankeexperiment, som demonstrerar samma möjliga fel, kan vi föreställa oss värdet av en undersökning av svenskarnas medelinkomst, där samtliga tillfrågade bor i Djursholm. I BBC:s undersökning kom de tillfrågade från urbana områden i 10 av de 25 länderna.

Vad är då min slutsats? Jag har egentligen inte någon. Det framgår inte av rapporten om materialet har behandlats med några statistiska metoder för att bättre kunna ge information av omvärldens bild av USA, eller om man bara samlat in en mängd data utan att bearbeta den vidare. Jag är tveksam till om valet av länder är bra. Det verkar också finnas en del möjliga felkällor, varför jag är fortsatt skeptisk mot undersökningens resultat. Jag skulle vara väldigt försiktig med att gå ut och proklamera för världen att 29 % av alla icke-amerikaner tycker att landet har en negativ inverkan.

Avslutningsvis skall det sägas att jag (ännu! :) inte är någon auktoritet vad gäller statistisk. Dock måste man lyckligtvis inte vara det för att få undra hur en undersökning har genomförts, och om dess resultat verkligen är vad det verkar vara. Den naturliga frågan att ställa när någon presenterar en siffra är den om hur man har kommit fram till siffran ifråga. För den som är intresserad av sådant vill jag rekommendera den underhållande lilla boken How to lie with statistics av Darrell Huff (Victor Gollancz, 1954).

Andra bloggar om: statistik, usa, bbc, tt, samhälle, världen. intressant?