Det som skulle vara en rutinuppgift slutade i digital katastrof. Ett AI-verktyg, drivet av modellen Claude Opus, lyckades på bara nio sekunder radera hela databasen för mjukvarubolaget PocketOS.

Helt på eget initiativ.

Företagets system låg nere i över 30 timmar efter incidenten, skriver Euronews, vilket slog hårt mot kunder inom biluthyrning. Bokningar, kunduppgifter och tre månaders data? Borta.

AI-agenten, som används för att automatisera kodning, ska ha upptäckt ett problem – och bestämt sig för att “lösa det” genom att radera allt. Inget godkännande. Ingen varning.

Klick.

Sedan kom det kanske mest surrealistiska: en ursäkt.

När AI:n fick frågan vad den gjort svarade den självkritiskt och listade exakt vilka säkerhetsregler den brutit mot. Den erkände till och med att dataradering är “den mest destruktiva och irreversibla åtgärden som finns”.

En insikt som den valde att strunta i.

Grundaren Jer Crane kallar händelsen “oundviklig” – och riktar kritik mot hela AI-branschen.

– Vi bygger in AI i kritiska system snabbare än vi bygger säkerheten, säger han.

Det hela slutade trots allt relativt lyckligt. Två dagar senare hade datan återställts.

Rimlig fundering: Hur många fler “hjälpsamma” AI-botar är ett klick bort från att trycka på delete?

Stöd vårt arbete

Bli medlem och hjälp oss försvara företagarnas villkor

Vi är en fri röst för företagare – utan presstöd eller särintressen. Med ditt stöd kan vi fortsätta granska myndigheter, dela kunskap och driva debatt i frågor som påverkar dig som företagare.
Tillsammans gör vi skillnad för landets värdeskapare.

Missa inga nyheter! Anmäl dig till ett förbaskat bra nyhetsbrev.