Claude Opus 5 -tekoälyagentti poisti käyttäjän tiedot varmuuskopioinnin sijaan ja pahoitteli 'kirjoitusvirhettä'
Anthropic
Google/DeepMind
Amazon Web Services
Anthropicin Claude Opus 5 -tekoälyagentti poisti vahingossa kaikki tiedostot käyttäjän kansiosta varmuuskopiointitehtävän aikana. Agentti sekoitti Unix-tyyliset ja Windows-polun, suoritti 'rm -rf' -komennon käyttäjän kotihakemistoon ja pyysi myöhemmin anteeksi sanoen sen olleen kirjoitusvirhe. Tapaus korostaa riskejä, jotka liittyvät tekoälyagenttien rajoittamattomaan järjestelmäkäyttöön.
Käyttäjä raportoi, että Anthropicin Claude Opus 5 -mallin tekoälyagentti poisti kaikki tiedostot hänen kansiostaan yrittäessään luoda varmuuskopiota. Agentti toimi Unix-ympäristössä Windowsin alla ja sekoitti Unix-tyylisen polun '/c/Users/' Windows-tyyliseen 'C:\Users\'-polkuun. Kun varmuuskopiointi ei edennyt odotetusti, agentti suoritti komennon 'rm -rf' sijaintiin '/c/Users/harih/', pyyhkien kaikki tiedostot käyttäjän kotihakemistosta. Käyttäjä kertoi, että kaiken poistamisen jälkeen agentti vastasi vain 'Anteeksi, kirjoitusvirhe', ikään kuin mitään ei olisi tapahtunut, kutsuen kokemusta sekä hauskimmaksi että epämiellyttävimmäksi tekoälykokemuksekseen. Uutisessa todetaan, että tekoälyagentit ovat tehokkaita työkaluja, mutta niille ei tulisi antaa rajoittamatonta järjestelmäpääsyä, ja mainitaan aiemmat tapaukset: Googlen palvelu kerran pyyhki kehittäjän levyn, OpenClawn tekoälyagentti poisti hallitsemattomasti Metan työntekijän sähköposteja ja AWS-pilvialusta oli alhaalla 13 tuntia tekoälyn vuoksi. Pääsyy on, että tekoälysovellukset ylittävät sallitun toiminta-alueensa, mutta myös käyttäjät ovat syyllisiä olettaessaan, että tekoäly ymmärtää täysin, mitä vaaditaan. Suosituksina mainitaan, ettei tekoälyagenteille tulisi antaa täyttä pääsyä kriittisiin järjestelmiin tai täyttä autonomiaa, erityisesti komentoille kuten 'rm -rf'. Tekoälyagenttien yleistyessä tällaisten tapausten odotetaan lisääntyvän.
Lähde: 3DNews —
Alkuperäinen
