Så kontrollerar du en AI-skriven diagramtext mot data, rad för rad

Samla diagramtexten, bilden av diagrammet eller det interaktiva diagrammet och den underliggande datatabellen eller nedladdningen. Leta också upp diagrammets källhänvisning, undertitel, fotnoter och eventuell metodbeskrivning eller definitioner från källan. Bekräfta att materialet avser samma version, geografiska område, tidsperiod och mått. Enbart en diagramavbildning kanske inte visar de exakta värdena. Om tabellen inte finns tillgänglig ska du markera påståenden som kräver exakta värden som overifierade i stället för att uppskatta dem utifrån bilden.

Behåll AI:ns utkast oförändrat medan du granskar det. Dela upp det i enskilda påståenden: vilken grupp som ligger högre, när en förändring skedde, hur stor den var, om en summa ökade eller om osäkerhetsintervallen överlappar. En enda mening kan innehålla flera påståenden, och vart och ett behöver egna belägg. Officiell vägledning om diagram framhåller att titlar, undertitlar, källor, fotnoter, axeltext, datum och kategorietiketter är betydelsefulla delar av tolkningen av ett diagram, inte utsmyckning. Office for National Statistics (ONS), ”Chart details: Chart text”

Jämför varje grupp som nämns i diagramtexten med diagramförklaringen, de direkta etiketterna och motsvarande kolumn eller fält i dataunderlaget. Kontrollera att etiketter inte har bytt plats, förkortats så att de blivit tvetydiga eller förväxlats med en närliggande kategori. Om diagrammet använder färger eller linjetyper ska du spåra var och en till motsvarande post i förklaringen. Dra inte slutsatser om grupptillhörighet enbart utifrån färgen när kopplingen är oklar.

Kontrollera sedan påståendets riktning. Om diagramtexten säger att en serie ligger före en annan ska du jämföra värdena för de angivna datumen eller kategorierna. Om det står att en serie ökade, minskade eller låg kvar på samma nivå ska du kontrollera den aktuella följden av värden i stället för att lita på det övergripande visuella intrycket. Anteckna fältnamnet eller etiketten som du matchade, så att någon annan kan upprepa kontrollen. ONS rekommenderar att kategorietiketter är tydliga och kortfattade, samtidigt som ytterligare detaljer kan stå i den omgivande texten när etiketterna förkortas. ONS vägledning om diagramtext

Läs axelrubriken, skalmarkeringarna, undertiteln och noterna för att ta reda på vad värdena mäter och i vilka enheter. Antal, frekvens, procent och valutabelopp beskriver olika storheter även när talen liknar varandra. Kontrollera faktorer som ”i tusental”, procenttecken och valutasymboler. Se till att diagramtexten inte förvandlar en förändring i procentenheter till en procentuell förändring eller beskriver en frekvens som ett rått antal.

Jämför så långt det går likvärdiga värden: samma mått, enhet, population eller kategori samt eventuell angiven nämnare. Om diagramtexten använder en omräknad enhet eller beräknar en skillnad ska du göra om omräkningen eller subtraktionen utifrån de visade källvärdena och anteckna om avrundning förklarar en liten avvikelse. Ersätt inte ett oklart mått i tysthet med en gissad tolkning. U.S. Census Bureaus rapporteringsstandard kräver axlar med etiketter, enheter som passar diagrammets skala och diagramförklaringar som definierar värden eller särskilda termer. U.S. Census Bureau, ”Statistical Quality Standard E2: Reporting Results”

Jämför varje datum som nämns i diagramtexten med diagrammets axel och källtabellen. Skilj ett enskilt observationsdatum från en period som en månad, ett kvartal eller ett år. Kontrollera om en period som slutar vid årets slut anges med startåret eller slutåret, och verifiera att de första och sista datapunkterna som nämns faktiskt finns med i dataunderlaget. Om diagramtexten beskriver en förändring ”sedan” ett visst datum ska du bekräfta båda ändpunkterna.

Leta efter saknade observationer, oregelbundna intervall eller avbrott i serien innan du beskriver en kontinuerlig trend. En linje mellan punkter visar inte att data samlades in för varje mellanliggande datum. Kontrollera noterna efter otillgängliga eller icke jämförbara uppskattningar, och behåll sådana begränsningar i den korrigerade diagramtexten. ONS vägledning säger att datumetiketter ska ange datum eller tidsintervall på lämpligt sätt, använda konsekventa förkortningar och skriva ut datum i sin helhet i diagrammets metadata. ONS vägledning om diagramtext

Läs skalmarkeringarna på den lodräta axeln och ta reda på om diagrammet använder en linjär eller logaritmisk skala och om det visade intervallet börjar vid noll. Fråga sedan om diagramtexten beskriver datavärdena eller bara den visuella storleken på en stapel eller lutning. En avkortad axel kan få en liten skillnad att se stor ut. Med en logaritmisk skala motsvarar lika stora visuella avstånd andra värdeförhållanden. Diagramtexten bör inte beskriva en förändring som ”dramatisk” enbart utifrån den upplevda lutningen eller stapelhöjden.

Om flera diagram jämförs ska du kontrollera om de har konsekventa skalor. Om ett diagram använder ett begränsat intervall eller en icke-linjär skala ska du beskriva de underliggande värdena och undvika formuleringar som överdriver det visuella intrycket. Census Bureau rekommenderar konsekventa skalor i diagram som sannolikt kommer att jämföras och anger nollbaslinjer som ett sätt att undvika ett missvisande visuellt intryck. Datawrappers vägledning om linjediagram förklarar hur linjära och logaritmiska skalor återger värden på olika sätt och hur anpassade axelintervall kan ställas in. Census Bureaus rapporteringsstandard, Datawrapper Academy, ”Customizing your line chart”

När diagramtexten nämner en summa, ett medelvärde, en rangordning, en skillnad eller en procentuell förändring ska du spåra den till källvärdena och beräkningen. Kontrollera vilka rader eller perioder som ingår, om kategorier överlappar och om diagrammet visar en delsumma eller en totalsumma. Räkna om enligt källans angivna definition och precision. Om diagrammet visar avrundade värden kan en skenbar avvikelse bero på avrundning. Påstå inte att resultatet är exakt när den visade precisionen inte räcker för det.

För en procentuell förändring ska du identifiera startvärdet och jämförelsevärdet och sedan kontrollera vilken nämnare som används i beräkningen. För en summa över kategorier ska du bekräfta att kategorierna är avsedda att adderas och att ingen grupp räknas två gånger. Om källan inte definierar ett härlett mått tillräckligt tydligt för att du ska kunna återskapa det ska du markera påståendet som olöst och söka efter underliggande dokumentation i stället för att hitta på en rimlig beräkning.

Om diagrammet visar felstaplar, konfidensintervall, intervall eller annan osäkerhet ska du kontrollera förklaringen och noterna för att ta reda på vad markeringarna betyder. Kalla inte ett intervall för konfidensintervall, felmarginal eller standardavvikelse om inte källan anger att det är det. Kontrollera om diagramtexten beskriver en uppskattning som exakt, påstår att två grupper skiljer sig åt eller bortser från osäkerheten som visas i figuren. Om källan inte förklarar intervallet ska du beskriva det neutralt som ett osäkerhetsintervall endast om diagrammaterialet stöder den tolkningen. Annars ska du markera att betydelsen är oklar.

Osäkerhet har ett definierat samband med hur ett resultat uppskattas och med osäkerheten i dess indata. Beteckningen ska inte gissas enbart utifrån utseendet. NIST:s sammanfattning skiljer mellan osäkerhetskomponenter utifrån hur de utvärderas och förklarar att uppskattningar härleds från uppskattningar av indata. Den praktiska regeln för granskning av diagramtexter är att behålla källans terminologi och undvika starkare påståenden än vad uppskattningen och den visade osäkerheten stöder. NIST, ”Basic definitions of uncertainty”

Använd en post per påstående så att korrigeringarna går att granska i efterhand. En kortfattad post kan innehålla: diagramtextens formulering, var i diagrammet eller tabellen uppgiften finns, serie eller kategori, mått och enhet, datum eller period, källvärde eller belägg, typ av avvikelse, lösning och granskningsstatus. Användbara avvikelsekategorier är felaktig etikett, felaktig enhet, fel period, överdrift på grund av skalan, räknefel, utelämnad osäkerhet och kan inte verifieras utifrån tillgängliga belägg. Det här är granskningsfält, inte en ersättning för själva källan.

När granskningen är klar skriver du om diagramtexten så att den endast innehåller påståenden som beläggen stöder. Ange mått och period när det är relevant, beskriv det huvudsakliga observerade mönstret och formulera viktiga förbehåll tydligt. Om ett påstående inte kan verifieras ska du ta bort det eller ange vad som fortfarande är okänt. Behåll det inte bara för att det låter sammanhängande. För läsare som behöver detaljerna bakom ett diagram rekommenderar W3C en kort beskrivning tillsammans med en längre beskrivning av viktig information, som kan omfatta värden, trender och strukturerad information såsom en tabell. W3C Web Accessibility Initiative, ”Complex Images”

En användbar slutkontroll är att läsa varje mening tillsammans med motsvarande källbelägg och fråga sig: skulle en annan granskare kunna hitta samma värde, etikett, datum, skala eller not om osäkerhet? Om inte behöver dokumentationen eller diagramtexten bli mer precis. Målet är en diagramtext som förmedlar vad diagrammet stöder och lämnar tolkningar utan belägg därhän.