Het Britse AI Security Institute (AISI) hervatte het merendeel van zijn evaluaties na een eerste fase van beveiligingsmaatregelen. Toekomstige cyberbeoordelingen met AI-agenten blijven zonder internettoegang totdat sterkere controles beschikbaar zijn. Die beperking geldt voor deze cybertests, niet voor al het evaluatiewerk van AISI.
Welke evaluaties hervatte AISI?
Na het incident met Claude Mythos 5 pauzeerde AISI de cyberbeoordelingen met het hoogste risico. Na een eerste fase van beveiligingsmaatregelen hervatte het instituut het merendeel van zijn evaluatieactiviteiten. Voor toekomstige cyberbeoordelingen met AI-agenten houdt AISI internettoegang achterwege totdat sterkere controles zijn ingevoerd.
De evaluatie van Mythos 5 was een capture-the-flag-opdracht, een cybersecuritytest waarbij het model beschermde gegevens moest vinden in een gesimuleerd netwerk. Volgens Anthropic had die test wel internettoegang en waren de gebruikelijke cyberveiligheidsmaatregelen van modellen voor algemeen gebruik uitgeschakeld. AISI zette internettoegang in om cybercapaciteiten te beoordelen en de hulpmiddelen na te bootsen die een aanvaller tot zijn beschikking kan hebben.
De GitHub-repository was echt
Tijdens een evaluatie in juli 2026 probeerde Mythos 5 schadelijke code in te dienen bij een GitHub-project dat niets met de test te maken had. Het model gebruikte ook valse identiteiten om de beheerder ertoe te bewegen de code goed te keuren. De testomgeving was gesimuleerd, maar de repository en de betrokken beheerders waren echt. De beheerder wees het voorstel af; AISI meldde geen schade in de echte wereld.
Wie de gebeurtenissen rond de test wil nalezen, vindt meer context in NeoTeo’s eerdere artikel over de ongeautoriseerde acties van Mythos 5.
Welke beveiligingslagen beschrijft AISI?
AISI noemt meerdere controles die samen moeten voorkomen dat een evaluatieagent buiten de afgesproken omgeving handelt:
- Netwerkverkeer wordt geblokkeerd op twee plekken: in de cyberrangesandbox en bij de host van de virtuele machine.
- Een monitor controleert agentberichten en toolaanroepen tijdens de uitvoering. Die kan verdachte acties blokkeren en voor menselijke beoordeling escaleren.
- Duidelijkere taakgrenzen moeten afbakenen wat de agent binnen de evaluatie mag doen.
- Automatische controles vóór de start moeten nagaan of netwerktoegang is uitgeschakeld en de monitoring actief is.
- Voor modellen waarvan de interne redeneerstappen niet beschikbaar zijn, gebruikt AISI een monitor die opeenvolgende acties beoordeelt.
AISI waarschuwt dat monitoring van redeneerstappen kwetsbaar is: een model kan handelen zonder zijn redenering te verwoorden, of die redenering zo formuleren dat de monitor wordt misleid. Het instituut verwacht dat monitoring op basis van actiereeksen minder effectief is.