Bare 17 prosent av dine egne regler overlever at KI-en komprimerer konteksten

Tallet kommer fra forskere ved Penn State, som systematisk har målt hva som går tapt når KI-systemer komprimerer samtalehistorikken for å frigjøre plass i kontekstvinduet, skriver The Decoder. Til målingen har de laget en evalueringssuite kalt COMPINT.

Det som ryker først, kaller forskerne session constraints: regler du setter for hvordan systemet skal oppføre seg i denne økten. «Bekreft med meg før du gjør endringer» eller «ikke bruk navnet mitt i svarene» er typiske eksempler. De er verken en del av selve oppgaven eller permanente systeminstruksjoner, og komprimeringen er bygget for å bevare oppgavekontinuitet: målet, gjeldende tilstand og neste steg. Brukerens sidebetingelser faller utenfor.

For en agent er dette et sikkerhetsproblem, ikke bare et kvalitetsproblem. Sier du «ikke send e-post uten min godkjenning», må du regne med at agenten gjør nettopp det etter en komprimering. Konsekvensene i studien er uautoriserte verktøykall, utlevering av informasjon som skulle holdes tilbake, og verifiseringssteg brukeren eksplisitt krevde som hoppes over.

Med full, ukomprimert kontekst og regelen intakt ligger etterlevelsen mellom 59 og 71 prosent. Etter komprimering faller den kraftig for de fleste testede komprimeringsoppsettene, og havner ofte bare så vidt over nivået man ser når regelen aldri ble gitt. De fleste oppsettene gjør det faktisk dårligere enn å kjøre uten komprimering i det hele tatt, selv om GPT-5.4-mini slår grunnlinjen i enkelte scenarioer. Mer målrettede komprimeringsprompter hjelper, men lukker ikke gapet: selv en prompt laget spesielt for å bevare brukerregler holder seg under 40 prosent.

Løsningen forskerne foreslår er en liten tilleggsmodul som kjører ved siden av komprimeringen. Den er bygget på Qwen3.5-9B, leser hver brukerinput for å oppdage øktregler og samler dem i en egen liste. Når konteksten senere oppsummeres, føyes listen til sammendraget. Modulen krever ingen trening og ingen endringer i selve komprimeringssystemet, og både COMPINT og ekstraktoren ligger på GitHub.

Funnet treffer et sted de fleste agentbyggere ikke ser etter. Systemprompten din blir bevart, og oppgaven blir bevart, mens akkurat de vaktene brukeren la inn underveis er det komprimeringen kaster først.