Michael JohnsonExtern bedömning av AI-risker beror på vilken information forskare får tillgång till: företaget har vanligtvis bättre insyn i interna tester, modellträning och skyddsmekanismer än externa utvärderare. Den 15 oktober 2026 meddelade Anthropic att organisationen börjat ge METR tillgång till sina interna verktyg och system. Sex medarbetare vid den ideella organisationen har fått utrustning och arbetsplatser hos företaget; METR kan självständigt publicera resultaten av sina riskbedömningar.
Enligt Anthropics beskrivning av avtalet är gruppens tillgång ungefär jämförbar med den som företagets egna riskbedömningsteam har. Anthropics medarbetare uppmanas att dela information med METR:s deltagare på samma sätt som med kollegor som arbetar med riskbedömning. Det gör det möjligt att studera inte bara modellernas beteende, utan även information om deras träning, utvärderingsprocesser och skyddsmekanismer.
Vad METR kan granska
METR kan publicera analyser av risknivåer, incidenter och Anthropics arbetssätt. Företaget uppger att det inte kan lägga in veto mot en publicering, men får begära redigering av information inom i förväg angivna kategorier, till exempel kunduppgifter, material som omfattas av advokatsekretess och information om modellarkitektur. Det är Anthropic som avgör om en viss passage faller under dessa undantag. METR behåller å sin sida rätten att beskriva hur omfattande tillgång gruppen fått och vilken information den har tagit del av.
Den oberoende bedömningen kommer alltså att kombinera tillgång till internt material med begränsningar för offentliggörande av vissa uppgifter. För läsarna är både METR:s slutsatser och beskrivningen av vilket material gruppen kunde granska, och vilka begränsningar som påverkade publiceringen, viktiga. Anthropic motiverar samarbetsmodellen med en vilja att minska kunskapsgapet mellan externa utvärderare och laboratoriet självt.
Så fungerar åtkomstnivån
Anthropic beskriver avtalet med METR som den tredje nivån i företagets egen modell för utvärderares tillgång. Den innebär tillgång jämförbar med den som interna riskbedömningsteam har och publiceringsrättigheter liknande dem på den andra nivån. Arbetet är samtidigt begränsat till en liten grupp från METR som omfattas av bindande avtal; övriga medarbetare i organisationen, även de som arbetar med andra projekt tillsammans med Anthropic, hålls åtskilda från arbetet.
Företaget uppger att det har samarbetat med METR i ungefär ett år, bland annat med granskningar av riskrapporter. Andra partnerskap befinner sig i ett tidigare skede: SecureBio granskar kapitlet om kemiska och biologiska vapen i Anthropics rapport från augusti, och företaget överväger att utöka tillgången när arbetet är klart. Anthropic utvecklar ett separat samarbete med Accenture och Faculty kring modellevaluering, red teaming och granskning av skydd. Företaget för också inledande samtal med andra organisationer, däribland Hugging Face.
Vad detta innebär för företag
För organisationer som inför modeller i känsliga processer kommer uppläggets praktiska värde att framgå av de publicerade bedömningarna: vilka risker som granskats, vilka uppgifter som studerats och vilka begränsningar som påverkat slutsatserna. Anthropics tillkännagivande beskriver villkoren för tillgång och publicering, men redovisar inga nya resultat från modellbedömningar. Företagsköpare bör därför se framtida material från METR som belägg för specifika granskningar, inte som ett färdigt utlåtande om säkerheten hos alla företagets modeller.
Händelsen den 15 oktober förändrar externa utvärderares tillgång till intern information och ger METR möjlighet att publicera sina slutsatser med angivna undantag. Det är innehållet i kommande bedömningar och tydligheten i beskrivningen av deras villkor som kommer att visa hur användbart upplägget är för oberoende granskning av AI-risker.