Michael JohnsonHvis en KI-agent husker et feilaktig faktum, kan den trygt gjenta den samme feilen i neste økt. I en studie publisert av Anthropic 6. november 2026 beskrives en metode for å gå gjennom notater mellom oppgaver: Agenten sammenholder dem med logger fra tidligere arbeid, retter unøyaktigheter og samler nyttig informasjon. Selskapet kaller denne bakgrunnsprosessen «drømming».
Den praktiske lærdommen for dem som utvikler agenter som skal fungere over tid, er at minnet ikke bør vurderes ut fra antallet lagrede notater, men ut fra om systemet kan kontrollere hvor de kommer fra, oppdatere informasjon som har endret seg og finne det som trengs i et stort arkiv. Anthropics eksperimenter viser både nytten av denne tilnærmingen og forholdene som kan gjøre minnet til en hindring.
Hva forskerne mener med agentminne
I beskrivelsen av minnekomponenter definerer Anthropic minne som kunnskap fra tidligere samhandlinger og oppgaver som beholdes mellom økter i form av kontekst agenten kan bruke. Dette er et eget lag i systemet: Det dreier seg om notater, filer, indekser og andre eksterne representasjoner, ikke om å endre modellens parametere eller lage et vanlig, kort sammendrag av den pågående samtalen.
Modellen består av flere nivåer. En logg eller transkripsjon registrerer hendelser; notater trekker fram enkeltobservasjoner; sammenknyttede fremstillinger, som en wiki, samler informasjon etter tema; og et lite topplag kan lastes inn på forhånd i en ny økt. Agenten må avgjøre hva som skal lagres, hva som bør kontrolleres senere, og hva som bør vises direkte i neste kjøring.
Det siste valget er spesielt vanskelig: Betydningen av en hendelse blir ofte først tydelig når agenten ser hva som skjer videre. Derfor undersøkte Anthropic en oppdeling mellom arbeid i økten og behandling i bakgrunnen. Mens agenten arbeider, legger den igjen logger og notater; senere kan en separat gjennomgang vurdere dem på nytt, sammenholde kilder og oppdatere minnestrukturen.
Slik testet de mekanismen
I stedet for én samlet test beskrev selskapet flere oppgaver: spørsmål mot en kunnskapsbase, gjennomspilling av Pokémon Red, bygging av en wiki fra interne bedriftsdokumenter og utarbeiding av et juridisk notat om avtalevilkår. Utvalget tester ulike minnefunksjoner: å beholde regler mellom økter, velge nyttige detaljer, rette feil og samle informasjon fra flere dokumenter.
I én kunnskapsbaseoppgave startet hvert spørsmål i en ny økt. Mellom øktene var det bare minnemappen som ble beholdt, og modellen kunne hente informasjon derfra. Forskerne sammenlignet resultatene med og uten minne og fulgte også med på hvordan modellene laget notater. Anthropic peker på et viktig skille: Et notat med en kontrollert regel og en forklaring på hvor den kommer fra, kan hjelpe med neste spørsmål, mens en samling ubekreftede antakelser ikke gir en pålitelig læringssløyfe.
I et eget forsøk bygde en agent en wiki fra rundt 350 000 interne dokumenter, til sammen rundt 420 millioner tokener. Deretter utvidet og kontrollerte 128 økter etter hverandre sidene, rettet koblinger og slo sammen duplikater. Evalueringen besto av 25 spørsmål om dokumentmaterialet. Dette er en avgrenset forsøksoppgave med et definert dokumentsett, ikke en universell vurdering av minne for alle agenter.
Hva eksperimentene viste
I oppgaven med kunnskapsbasen økte minne gjennomsnittsresultatet for flere modeller. For eksempel steg den gjennomsnittlige andelen oppfylte kriterier for Opus 5.5 fra 0,655 uten lagring til 0,838 med lagring; for Sonnet 5.5 steg den fra 0,644 til 0,833. Resultatet var likevel avhengig av hvordan modellen brukte notatene: Claude Sonnet 4.6 leste ofte ikke minnefilene før den svarte, mens Opus 5.5 og Sonnet 5.5 var flinkere til å formulere kontrollerte regler og bruke dem senere.
Pokémon-eksperimentet viste kostnaden ved overdreven arkivering. I én kjøring opprettet Sonnet 3.7 413 filer i 225 mapper og registrerte en mengde møter, gjenstander og figurer. Mye av denne informasjonen ble raskt utdatert: Spillets posisjon og tilstand endret seg, og agenten brukte handlinger på å gjennomgå og bygge om notatene. I en separat sammenligning ved omtrent 10 000 steg brukte Fable 5 ni filer i to mapper og én egen fellesfil. Ifølge Anthropic fikk Fable 5 fire merker, mens Sonnet 3.7 fikk ett.
Et særlig tydelig eksempel gjelder et feilaktig notat om hvor Pokémon-senteret ved Mt. Moon-grotten lå. Agenten trodde den allerede hadde kommet seg gjennom grotten og havnet stadig tilbake på den samme ruten. En bakgrunnsgjennomgang sammenholdt notatet med handlingsloggen, oppdaget feilen og skrev det om. Etterpå vendte agenten tilbake til inngangen og kom fram til Cerulean City; varianten med det ukorrigerte notatet ble stående fast på den tidligere strekningen. Her fungerte «drømming» som en kontroll av historikken, ikke som en fri prosess for å legge til nye fakta.
I forsøket med den store wikien steg kriteriepoengsummen på 25 spørsmål fra 13 % til 48 % mens wikien ble bygget. I en separat sammenligning fikk wiki uten søk 48 %. Da wikien ble brukt sammen med søk, økte resultatet fra 54 % til 61 %, mens søk uten wiki ga 53 %. I dette forsøket fungerte wikien mer som et kart over sammenhenger og et tematisk lag over søket enn som en erstatning for originaldokumentene.
Hvorfor mer minne ikke alltid er bedre
Et notat er en prognose om framtiden: Agenten antar at den får bruk for det som lagres. Prognosen kan bli utdatert, vise seg å være feil eller gjenta informasjon som allerede finnes direkte i miljøets nåværende tilstand. I en spilloppgave kan figurens plassering ses på skjermen, mens en utledet strategi eller en kontrollert regel ikke kan hentes fram på samme måte uten at agenten resonnerer på nytt.
Dokumenteksperimentet avdekket en annen risiko: strukturelle feil. Flere agenter samlet samtidig avtalevilkår på én felles side og overskrev deler av tabellen. Resultatet var at wikien inneholdt 41 av 57 fakta som kunne kontrolleres, og at det første notatet oppfylte 72 % av kriteriene. Etter at hver avtale fikk en egen side, og viktige vilkår ble overført ordrett, oppfylte notatet 100 % av kriteriene. For juridisk betydningsfulle formuleringer viste det seg mer nyttig å bevare sitatet og lenken til originaldokumentet enn å skrive et generelt sammendrag.
En wiki er heller ikke alltid verdt kostnaden ved å bygge den. I en oppgave der svarene sto i ett dokument, fant Anthropic ingen tydelig gevinst sammenlignet med vanlig tekstsøk. I en annen test viste den ferdige wikien seg å være større enn originalfilene. Resultatene peker mot en enkel tommelfingerregel: En kompleks struktur er nyttig når spørsmål jevnlig krever at informasjon fra ulike kilder kobles sammen; ved enkle søk kan den føre til mer vedlikehold uten tydelig nytte.
Hva som kan overføres til utvikling av agenter
Resultatene støtter en praktisk arkitektur med tre deler. Først bør rålogger bevares, slik at notater fortsatt har et kontrollerbart grunnlag. Deretter bør korte notater om konklusjoner, regler og planer utarbeides, med opplysninger om hvor de kommer fra og om de er kontrollert. Til slutt bør en separat gjennomgang kjøres med jevne mellomrom for å finne motsetninger i notatene, rette koblinger og bygge opp indeksen på nytt, uten å erstatte kildematerialet med agentens eget sammendrag.
For informasjon som endrer seg, er det nyttig å lagre dato eller kontekst for når den gjelder, og kontrollere notatet når det brukes på nytt. For stabil kunnskap bør kilde og bekreftelse bevares. Bare en kort indeks bør legges inn i den felles konteksten for hver økt: Anthropic påpeker også at instruksjoner som lastes inn, bruker av kontekstvinduet, og at et feilaktig notat som automatisk legges til ved hver kjøring, kan spre feilen gjentatte ganger.
Hovedlærdommen fra studien er at agentminne blir nyttig gjennom utvalg og vedlikehold, ikke gjennom opphopning. Arkivet bevarer historikken, søk finner de relevante utdragene, strukturerte notater knytter sammen regler som går igjen, og bakgrunnskontroll fører konklusjonene tilbake til de opprinnelige beleggene. Det er denne etterprøvbare koblingen som gjør tidligere erfaring til en ressurs for neste økt.
