Offentlig sektor · SverigeResultattype: MåltKvalitet 3 af 3

55 % – målt

Klassificering af detaljegrad: ca. 55 % træfsikkerhed (tilfældigt gæt: 20 %)

Svensk selskabsmyndighed testede svensk sprogmodel: 55 % træfsikkerhed mod 88 % for ældre model

Kort fortalt: Bolagsverket (Sverige): Klassificering af detaljegrad: ca. 55 % træfsikkerhed (tilfældigt gæt: 20 %). NER: ca. 55 % for GPT-SW3 mod ca. 88 % for den finjusterede KB-BERT-model. Tallet er målt. Kilde: AI Sweden – GPT-SW3: en svensk basmodell för texthantering (projektrapport).

  • ✔ Kilde åbnet og tjekket
  • Tilføjet 21.10.2026
  • Relevans for Danmark 3/3

Fakta i tal

  • 55 %Klassificering af detaljegrad: ca. 55 % træfsikkerhed (tilfældigt gæt: 20 %)
  • 55 %NER: ca. 55 % for GPT-SW3 mod ca. 88 % for den finjusterede KB-BERT-model

Problemet

Myndigheden ville øge sin viden om store sprogmodeller og teste, om en svensk basismodel kunne hjælpe med at klassificere og generere virksomhedsbeskrivelser.

Løsningen

Som partner i AI Swedens projekt om GPT-SW3 testede Bolagsverket modellen til at vurdere detaljegraden i virksomheders formålsbeskrivelser, generere syntetiske beskrivelser og genkende navngivne enheder (NER).

Sådan er det målt

Myndighedens egne eksperimenter, beskrevet i AI Swedens projektrapport (2024). Klassificering sammenlignet med tilfældigt gæt; NER sammenlignet med en finjusteret KB-BERT-model på et datasæt fra Språkbanken.

Tallet er mærket målt. Se forskellen på målt, selvvurderet og forventet.

Resultatet

Klassificering af detaljegrad: ca. 55 % træfsikkerhed (tilfældigt gæt: 20 %). NER: ca. 55 % for GPT-SW3 mod ca. 88 % for den finjusterede KB-BERT-model.

Det virkede ikke

Fejlklassificering af komplekse beskrivelser, hallucinationer ved generering fra tabeller og svingende kvalitet i syntetiske tekster. Den ældre, finjusterede KB-BERT-model var 'avsevärt mycket bättre'.

Få én ærlig AI-case om ugen – også det, der ikke virkede.

Kan det bruges i Danmark?

Ja. Erhvervsstyrelsen og andre danske registre kan bruge resultatet som påmindelse om at sammenligne generative modeller med finjusterede, mindre modeller.

Kilder

Se en fejl? Send en rettelse · Sådan scorer vi

Samme slags opgave i Danmark: Region: AI til knoglebrud gav beskeden effekt – ventetid 69 til 57 min. i Aarhus, uændret i Horsens

Nyhedsbrev · hver anden tirsdag kl. 7.30

5 cases og nyt i de AI-værktøjer, du bruger – hver anden tirsdag.

Ingen spam. Afmeld med ét klik. Vi bruger kun din mail til nyhedsbrevet. Privatliv