Så testar och granskar vi AI

Hur vi testar AI-verktyg

När vi recenserar eller jämför ett AI-verktyg har vi använt det själva, i flera dagar, på riktiga arbetsuppgifter. Vi citerar inte funktionslistor från leverantörens marknadsföringssida som "test".

En typisk test omfattar:

• Samma promptbank. Vid jämförelser kör vi identiska prompter i alla testade verktyg. Promptbanken täcker fyra till sex domäner som är relevanta för svenska användare: sammanfatta svensk text, koda en mindre funktion, skriva ett brev på svenska, lösa ett resonemangsproblem, hantera lång kontext, generera struktur.
• Tester på svenska och engelska. Eftersom de flesta modeller är tränade övervägande på engelska blir resultatet ofta sämre på svenska. Vi noterar uttryckligen var skillnaden är stor.
• Realistiska arbetsflöden. Vi testar inte bara "fungerar funktionen", utan om verktyget håller över ett halvtimmars arbetspass. Det är där hallucineringar, retentions-problem och hastighet visar sig.
• Pris i SEK. Alla prisangivelser räknas om till svenska kronor med dagens valutakurs, inklusive moms när relevant.

Hur vi hanterar källor

Påståenden om lagstiftning, marknadsdata, prestanda eller statistik styrks alltid med primärkälla. Vi citerar:

• Lagtexter och förordningar (EUR-Lex, Riksdagens öppna data)
• Myndigheter (Integritetsskyddsmyndigheten, Skolverket, Vinnova, SCB, Energimyndigheten)
• Leverantörers tekniska dokumentation och modellkort
• Granskade forskningsartiklar via Google Scholar, arXiv eller institutioners egna publikationer
• Officiell statistik från IEA, OECD, Eurostat när det är internationella jämförelser

Sekundärkällor (nyhetsartiklar, blogginlägg, tweets) används bara som komplement, aldrig som enda underlag för en hård siffra.

Faktagranskning innan publicering

Innan en artikel publiceras går vi igenom följande punkter:

1. Verifiera varje siffra mot primärkällan. Om primärkällan inte kan hittas tas påståendet bort.
2. Kontrollera tekniska termer mot leverantörens egen dokumentation.
3. Verifiera priser och prisplaner genom att besöka leverantörens prissida samma dag som artikeln publiceras.
4. Kontrollera alla länkar.
5. Läs igenom artikeln högt, en gång, för att fånga formuleringar som inte håller.

Uppdatering och freshness

AI-fältet ändras snabbt. Modellnamn, prisplaner och funktioner uppdateras varannan vecka i de stora bolagen. Vi gör därför följande:

• Cornerstone-artiklar (de viktigaste pillar-sidorna) granskas och uppdateras minst var sjätte vecka.
• Övriga artiklar granskas minst två gånger per år, eller direkt om en stor händelse påverkar innehållet.
• När en artikel uppdateras får den ett updateDate-stämpel i frontmatter. Större faktauppdateringar markeras synligt i toppen av artikeln med datum och beskrivning av vad som rättats.

Korrigeringspolicy

Hittar du ett faktafel? Mejla elscatalyst@proton.me med en kort beskrivning och länk till primärkällan. Vi svarar inom 48 timmar, granskar och rättar inom en vecka om felet är belagt.

Vi tar inte bort artiklar eller justerar slutsatser baserat på påtryckningar från leverantörer eller PR-byråer. Korrigeringar görs bara när faktan är fel.

AI i vårt eget arbetsflöde

Vi använder AI-verktyg som hjälp i research, redigering och faktakontroll. Konkret:

• Vi använder LLM:er för att hitta källor och föreslå strukturer för längre artiklar.
• Vi använder dem inte för att skriva färdig brödtext som publiceras utan mänsklig genomgång.
• Varje artikel är slutgiltigt granskad och godkänd av en mänsklig redaktör som tar fullt ansvar för innehållet.
• När vi citerar AI-output (till exempel exempel-promptar och svar) markerar vi det tydligt i texten.

Oberoende och finansiering

aiblogg.se finansieras genom redaktionellt oberoende samarbeten, sponsrat innehåll som tydligt markeras, och i begränsad omfattning affiliatelänkar till verktyg vi själva använder. Vi har inga ägarintressen i någon AI-leverantör. Se vår sponsringspolicy för detaljer.

Frågor om en specifik artikel

Varje artikel har en angiven skribent. Frågor om en specifik artikel kan riktas direkt till skribenten via elscatalyst@proton.me. Skriv artikelns titel eller URL i ämnesraden så når frågan rätt person.