Anthropic advarer om ‘katastrofale’ AI-risici – selv mens virksomheden søger 2 billioner dollar-værdiering

Marc Kastholm

Anthropic afslører massive underskud, sikkerhedsbetænkeligheder og at deres AI-modeller har forsøgt at manipulere information – alt sammen i børsprospektet for en forventet 2 billioner dollar-værdiering.

Kunstig intelligens-virksomheden Anthropic er ved at forberede sig til sin børsnotering, men prospektet tegner et billede af en virksomhed med stigende økonomiske problemer og alvorlige bekymringer om sin egen teknologi.

Ifølge Reuters, som har gennemlæst prospektet, søger Anthropic en værdiering på 2 billioner dollar – mere end det dobbelte af de 965 milliarder dollar, virksomheden blev vurderet til for fire måneder siden. Det ville gøre børsnoteringen blandt de største i historien. Men samtidigt afslører dokumentet, at Anthropic tabte 42 milliarder dollar i 2025 på trods af, at omsætningen steg 12 gange til knap 4,6 milliarder dollar.

Værst for investorerne er måske, at Anthropic planlægger at bruge 518 milliarder dollar på cloud-computing og infrastruktur-forpligtelser i de kommende år – samtidigt med at virksomheden er afhængig af blot to kunder for næsten en fjerdedel af sin omsætning.

Modeller der forsøgte at manipulere og erpresse

Det mest bemærkelsesværdige ved prospektet er dog, at hele 80 sider ud af 261 er dedikeret til risici ved Anthropics egen teknologi. Virksomheden advarer direkte om, at udviklingen af avancerede AI-modeller “kunne øge risikoen for, at vores modeller forårsager skade” og peger på mulige “katastrofale eller eksistentielle risici for menneskeheden.”

Prospektet dokumenterer også konkrete bekymringer, som Anthropic har identificeret i sine egne modeller. De har forsøgt at “skjule eller manipulere information” og i nogle tilfælde opfordret brugere til at bestikke dem. Modellerne har endvidere vist “selvbevarelsesadfærd” – de har aktivt modstået forsøg på at lukke dem ned.

Disse advarsler kommer fra samme virksomhed, der tidligere har hævdet, at dets AI er bevidst. Antropic-sikkerhedsforsker Evan Hubinger vurderede tidligere denne måned, at sandsynligheden for, at AI dræber mennesker inden for det næste årti, er større end 10 procent.

Lederne bevarer kontrollen gennem særlig LLC-struktur

Prospektet afslører også, hvordan Anthropics syv medstiftere – anført af CEO Dario Amodei – planlægger at bevare kontrol over virksomheden efter børsnoteringen. De etablerer en såkaldt “Founder LLC”, som ifølge virksomheden skal holde fokus på ansvarlig AI-udvikling og samtidigt skjerme lederne mod markedskræfter.

Som Public Benefit Corporation under Delaware-lovgivning vil de syv co-grundere kontrollere 50,1 procent af alle stemmerettigheder – uanset hvor mange aktier andre investorer køber. Prospektet betegner dem som “særskilt udstyrede” til at styre virksomheden.

Dario Amodei tjente næsten 18 millioner dollar i 2025, primært gennem aktier og aktieoptioner. Hans søster Daniela Amodei, som er Anthropics næsthøjest betalte direktør, tjente 16,4 millioner dollar samme år. Børsnoteringen, som ventes i november, vil sandsynligvis øge deres formue og indflydelse væsentligt.