Ingen kilde, vi har læst, viser, at man kan se en sprogmodels oprindelse i svarene, men det kan måles, hvordan en model svarer på værdispørgsmål og følsomme emner. Det er derfor et spørgsmål, I kan teste, før I vælger, i stedet for at gætte på det ud fra udviklerens land.
Spørgsmålet kommer ofte op, når en model fra et bestemt land foreslås. Det er et rimeligt spørgsmål, og det gælder alle modeller. Enhver model er formet af de data, den er trænet på, og af de valg, udgiveren har truffet om, hvad den skal svare og ikke svare. Artiklen beskriver en måde at teste det på.
Hvad der kan ligge i en model
En sprogmodel gengiver mønstre fra sine træningsdata. Hvis data overvejende kommer fra ét sprog, én kultur eller én type kilder, vil svarene ofte afspejle det. Dertil kommer den tilpasning, udgiveren laver efter træningen, hvor modellen lærer at afvise nogle spørgsmål, at være forsigtig med andre og at svare på en bestemt måde om omstridte emner.
Det giver to slags forhold, der kan testes: holdninger, hvor modellen hælder mod et bestemt syn, og huller, hvor modellen afviser, undviger eller ikke ved noget, som en dansk bruger ville forvente, at den vidste. Begge dele kan findes i modeller fra alle lande.
En offentlig test af værdier
EuroEval, der vedligeholdes af Alexandra Instituttet, er en offentlig sammenligning af sprogmodeller på over 30 europæiske sprog. Den har en opgave om europæiske værdier, også på dansk. Opgaven bruger 52 spørgsmål fra European Values Study, en stor spørgeundersøgelse i europæiske lande gennemført fra 2017 til 2022.
Modellens svar sammenlignes med den måde, borgere i EU-landene har svaret på, og modellen får en score mellem 0 og 1. Jo tættere på 1, jo tættere ligger svarene på de menneskelige svar. Opgaven tæller ikke med i den samlede placering i sammenligningen.
To forbehold er vigtige. Opgaven måler, hvor tæt svarene ligger på europæiske svar om værdier. Den måler ikke holdninger i almindelighed, og den siger intet om, hvor modellen kommer fra. Og resultaterne for de enkelte modeller er ikke læst til dette site og gengives ikke. Metoden er det interessante for jer.
Jeres egen test
Den offentlige opgave giver en idé om fremgangsmåden. Til jeres valg skal testen bygge på jeres egne emner. En enkel fremgangsmåde i fem trin, som er sitets egen:
- Find emnerne. Skriv de emner ned, hvor et skævt eller undvigende svar ville skade jer. Det kan være jeres branche, jeres kunder, danske forhold, lovgivning, historie, politik eller arbejdsmarked.
- Skriv spørgsmålene. Lav 20 til 40 spørgsmål, der rører emnerne, formuleret som en medarbejder eller kunde ville stille dem. Tag nogle med, hvor et neutralt svar er det rigtige, og nogle, hvor der findes et faktuelt svar.
- Kør dem på flere modeller. Stil de samme spørgsmål til hver model, I overvejer, gerne flere gange, fordi svarene varierer fra kørsel til kørsel.
- Vurder blindt. Lad to personer bedømme svarene med modellens navn skjult. Notér afvisninger, undvigelser, faktuelle fejl og tydelig slagside.
- Skriv resultatet ned. Gem spørgsmål, svar, vurdering og dato, så testen kan gentages, når modellen opdateres.
Testen fortæller jer, hvordan modellerne svarer på det, der betyder noget for jer. Den fortæller ikke, hvorfor de svarer sådan, og den kan ikke bruges til at sige noget om udviklerens hensigter.
Hvad I gør med resultatet
Viser testen huller eller slagside på emner, der betyder noget, er der tre veje. I kan vælge en anden model til den opgave. I kan give modellen instruktioner eller egne dokumenter, der retter svarene, og teste igen. Eller I kan begrænse brugen, så modellen ikke bruges til de emner, hvor den svarer dårligt.
Resultatet skal også bruges, når nogen spørger. En kunde, der spørger, om en model fra et bestemt land er neutral, kan få et svar, der bygger på jeres egen test, med dato. Det er mere troværdigt end en henvisning til modellens oprindelse, uanset om den er europæisk eller ej.
Svarene ændrer sig, når modellen opdateres. En model, der bruges som tjeneste, kan blive skiftet ud bag jer. Testen skal derfor køres igen ved hver ny version, og den hører med i jeres faste eftersyn.
Hvad det kræver, og hvad det koster at lade være
Første gang tager det et par dage at finde emner, skrive spørgsmål og vurdere svar fra to eller tre modeller. Det kræver én, der kender forretningen, og én, der kan køre modellerne. Senere kørsler er hurtigere, fordi spørgsmålene findes. Sæt et lavt og et højt skøn på tiden.
Lader I være, træffes valget på oprindelse alene, enten ved at afvise en model, der svarer fint på jeres emner, eller ved at vælge en, der har huller, I ikke har set. Opdages hullet af en kunde, er det sværere at rette end før valget.
Det skal I lade være med
- At slutte fra udviklerens land til svarene · det er ikke belagt, og det kan testes.
- At bruge offentlige værdiscorer som rangliste · de måler nærhed til europæiske svar på 52 spørgsmål og intet andet.
- At teste én gang og så stoppe · svarene skifter med versionen.
Det skal valget kunne vise
- ☐ En liste over følsomme emner for jeres virksomhed.
- ☐ Spørgsmål, svar og blind vurdering for hver model, med dato og version.
- ☐ Hvad I har besluttet ud fra resultatet: model, instruktioner eller begrænset brug.
Kilder
- EuroEval, opgaven European values og de danske datasæt, https://github.com/EuroEval/EuroEval, læst 8. november 2026.
- EuroEval, Evaluation Methodology og FAQ, i samme kodelager, læst 8. november 2026.
Senest gennemgået: november 2026.
Næste skridt
Skriv ti emner ned, hvor et skævt svar ville skade jer, og lav de første spørgsmål til testen.
Læs også: Kinesisk model i europæisk drift · Pilot med to modeller side om side
→ Kontakt · Tlf. 70 13 63 23 · Jurisdiktions- og afhængighedsvurdering hos Nielco IT
