Viden · FAQ Ca. 1 minuts læsning
Hvordan vurderes svaret?
Vurder, om svaret er korrekt, dækket af de viste kilder og brugbart til opgaven. Et velformuleret svar kan stadig være forkert. Test også, om løsningen kan afstå fra at svare, når viden mangler, eller sende sagen til et menneske.
Sådan kommer I videre
Definér et godt svar
Lad en fagperson beskrive nødvendige fakta, relevante kilder og fejl, som ikke må forekomme. Tilpas kravene til konsekvensen af fejl.
Brug realistiske tests
Medtag almindelige spørgsmål, undtagelser, tvetydighed, modstridende kilder og manglende oplysninger. Kontrollér både indhold og kildehenvisninger.
Følg ændringerne
Gem et fælles testsæt og gentag vurderingen ved ændrede kilder, instruktioner eller modeller. Brug fejl fra hverdagen til at forbedre testen.
Bygger på EnableAI’s vidensgrundlag: Vurdér kvaliteten af AI svar og handlinger, version 0.1.
Opdateret .