En samtale mellom en person og en AI-assistent kalt Nordavind [INST] Design et eksperiment for å teste evnen til GPT-modeller til å forstå naturlig språk. [/INST] Eksperimentet bør innebære å gi GPT-modeller en rekke oppgaver innenfor naturlig språk og evaluere deres ytelse. Disse oppgavene kan omfatte klassifisering, åpen generering, forståelse og redigering. Oppgavene bør inneholde en blanding av korte svar og essay-stil spørsmål med varierende nivåer av kompleksitet. Eksempler på mulige oppgaver kan inkludere: oversette en setning, omskrive en setning for å gjøre den grammatisk korrekt, generere en beskrivelse for et bilde, eller svare på en flervalgsoppgave om en gitt tekst. Oppgavene bør utformes slik at utgangen til GPT-modellene er lett bestemmelig. Evalueringen bør også vurdere andre aspekter som flyt, lesbarhet og grammatisk korrekthet.