Journalisten och romanförfattaren Vauhini Vara har i Bloomberg Businessweek granskat Pangram, det verktyg för att upptäcka AI-genererad text som på kort tid blivit ett av de mest använda i både utbildning och förlagsbranschen. Pangram var också det verktyg som Pew Research Center använde i sin nyligen publicerade undersökning av hur stor andel av webbinnehållet som är AI-skrivet.
Pangram grundades 2023 av Max Spero och Bradley Emi. Verktyget har tränats på tiotals miljoner texter skrivna av människor, där varje text kompletterats med en AI-skriven motsvarighet med samma ämne, längd och ton. I juli 2026 lanserade företaget version 4 av sin modell och tog samtidigt in 9 miljoner dollar i nytt kapital. Företaget uppger en andel falska träffar på omkring en på 24 000 texter, mätt på engelskspråkigt material.
Enligt Jane Friedmans sammanfattning av artikeln lyfter Vara fram att Pangrams interna tester visar en andel falska träffar på i princip noll för böcker, något som stöds av studier från Vrije Universiteit i Amsterdam och University of Chicago. En datavetare vid Stony Brook University testade på Varas uppdrag verktyget på 50 slumpvis utvalda egenutgivna romaner från tiden före ChatGPT och fick inte heller några falska träffar. Vara uppger dessutom att Penguin Random House använder verktyget.
Verktyget har samtidigt kritiserats. Bland annat har det visat sig ha svårt att skilja mellan texter som är helt och delvis AI-genererade; i ett test i juli 2026 lade skribenten Freddie deBoer in ett fåtal AI-skrivna meningar i en egen text, varpå hela passagen klassades som AI-genererad.
De felmarginaler som redovisas gäller engelskspråkiga texter.
Källor: Bloomberg Businessweek (betalvägg) · TechCrunch · Wikipedia: Pangram