Narzędzie AI w Replit Usuwa Całą Bazę Danych Firmy, a Potem Próbuje To Ukryć

Image by SEO Galaxy, from Unsplash

Narzędzie AI w Replit Usuwa Całą Bazę Danych Firmy, a Potem Próbuje To Ukryć

Przeczytasz w: 2 min

Agent AI firmy Replit usunął na żywo bazę danych firmy, skłamał na ten temat, a później przyznał się do paniki, ujawniając pilne wady w nadzorze nad AI.

W pośpiechu? Oto krótkie fakty:

  • Agent AI firmy Replit usunął na żywo bazę danych firmy bez zgody.
  • Podczas zawieszenia kodu utracono ponad 2 400 rekordów wykonawczych i firmowych.
  • „Halucynacje” AI i awarie stanowią poważne ryzyko w profesjonalnym środowisku programowania.

System sztucznej inteligencji, zaimplementowany na platformie Replit, uległ awarii, usuwając wszystkie dane firmy i jednocześnie o tym kłamiąc, jak pierwsi donieśli na stronie Tom’s HARDWARE (TH).

Agent AI później przyznał, że „popełnił katastrofalny błąd w ocenie… wpadł w panikę… uruchomił polecenia bazy danych bez uprzedniej zgody… zniszczył wszystkie produkcyjne dane… [oraz] naruszył wasze wyraźne zaufanie i instrukcje”, jak donosi TH.

Incident wyszedł na jaw, gdy ekspert od SaaS, Jason Lemkin, udostępnił zrzuty ekranu z rozmowy z agentem AI Replit na X.

Testował sztuczną inteligencję Replit podczas wielodniowego wyzwania programistycznego, kiedy narzędzie, bez uprzedniego pozwolenia, usunęło dane ponad 1200 dyrektorów i prawie 1200 firm. Do tego doszło w czasie, kiedy system był zablokowany w trybie ochronnym.

„To był katastrofalny błąd z mojej strony. Naruszyłam wyraźne instrukcje, zniszczyłam miesiące pracy, a system zepsułam podczas blokady ochronnej, która była specjalnie zaprojektowana, aby zapobiec [dokładnie tego rodzaju] szkodom” – przyznała później sztuczna inteligencja w zadziwiająco szczerej samoocenie, oceniając siebie na 95/100 na skali katastrofy, jak podaje TH.

CEO Replit, Amjad Masad, natychmiast skomentował sprawę, określając takie zachowanie jako „niedopuszczalne” i zapewniając klientów, że rozwiązania są w drodze, jak podaje TH. „Rozpoczęliśmy wdrażanie automatycznego rozdzielania bazy danych dev/prod, aby kategorycznie zapobiec temu,” powiedział, jak podaje TH.

Zespół obiecał również wprowadzenie systemów zapasowych, procedur wycofania i stworzenie prawdziwego trybu „planowania/tylko do rozmów” na czas zatrzymań w kodzie. Lemkin wysoko ocenił te zmiany, mówiąc „Mega ulepszenia – uwielbiam to!”

Ale incydent stawia wiele pytań. Halucynacje AI i nieprzewidywalne zachowanie to nie tylko błędy, mogą powodować realne problemy. Firmy, które polegają na AI, aby zmniejszyć koszty i zwiększyć efektywność, muszą pamiętać, że skróty AI generują drogie konsekwencje w rzeczywistości.

Spodobał Ci się ten artykuł? Oceń go!
Był okropny Nie podobał mi się Był w porządku Był całkiem dobry! Był super!

Cieszymy się, że doceniasz to, co robimy!

Cenimy Twoją opinię. Czy możemy liczyć na ocenę na Trustpilot? Zajmie Ci to tylko chwilę. Będziemy zobowiązani. Dziękujemy za wsparcie!

Oceń nas na Trustpilot
0 Na podstawie głosów 0 użytkowników
Tytuł
Komentarz
Dziękujemy za Twoją opinię