NTNU-student lot KI skrive seks masteroppgaver, fem besto

En masteroppgave tar en student opptil et år. Rodems system brukte noen timer per oppgave, skriver Universitetsavisa, som siterer Romerikets Blad. Han startet eksperimentet mens han studerte industriell økonomi og teknologiledelse, og lot systemet skrive seks oppgaver innen ulike fagområder. Sensorer vurderte dem på samme måte som ordinære innleveringer. Fem fikk bestått, blant dem A i rettsvitenskap og optimering, B i filosofi og B/C i finans. Den sjette fikk F på grunn av mangel på kilder.

Det interessante er arkitekturen, ikke karakterene. Systemet genererte ikke tekst fra én instruks. Det søkte etter kilder, sammenlignet informasjon, formulerte hypoteser og testet dem. Deretter karaktersatte det sin egen oppgave, og bearbeidet den videre hvis karakteren ikke var god nok. Det er en agent-løkke med selvevaluering som stoppkriterium, kjørt på en oppgavetype akademia har antatt at maskiner ikke klarer.

«Muntlig eksamen er et minimum av hva som bør kreves fremover» — Anders Rodem, tidligere NTNU-student

Rodem brukte selve systemet som kjernen i sin egen masteroppgave, og mener grensen går ved om du kan forsvare arbeidet muntlig. Han understreker at eksperimentet ikke er et angrep på universitetene.

«Det er mer et rop om hjelp» — Anders Rodem, til Romerikets Blad

Universitetsavisa oppdaterte saken 19. august for å presisere at den ene oppgaven ville ha strøket. For deg som bygger agenter er poenget at selvevaluerende løkker nå leverer godt nok på oppgaver som måles i måneder, ikke minutter, og at kildehåndtering er den delen som fortsatt ryker først.