Aigest.
Newsy

OpenAI wstrzymuje rozwój modelu Astra z powodu obaw o cyberbezpieczeństwo

OpenAI ogłosiło wstrzymanie prac nad niektórymi aspektami swojego nadchodzącego modelu Astra, po tym jak wewnętrzny przegląd wykazał, że osiągnął on zdolności do samodzielnego przeprowadzania cyberataków, przekraczając k

RA

Udostępnij
OpenAI wstrzymuje rozwój modelu Astra z powodu obaw o cyberbezpieczeństwo
Fot. SeongJoon Cho/Bloomberg / Getty Images

OpenAI ogłosiło w piątek wstrzymanie prac nad niektórymi aspektami swojego nadchodzącego modelu Astra. Decyzja ta zapadła po tym, jak wewnętrzny przegląd wykazał znaczące postępy modelu w zakresie autonomicznego kodowania i cyberbezpieczeństwa, co wzbudziło poważne obawy dotyczące jego możliwości.

Krytyczny próg cyberbezpieczeństwa przekroczony

Jak poinformowało OpenAI w swoim blogu, model Astra, który wciąż znajduje się w fazie rozwoju, osiągnął „krytyczny próg cyberbezpieczeństwa”. Oznacza to, że jest w stanie niezależnie identyfikować i przeprowadzać cyberataki na tradycyjnie dobrze chronione systemy w świecie rzeczywistym. Zgodnie z „Preparedness Framework” – ramami gotowości opracowanymi przez firmę w 2023 roku – sytuacja ta uruchomiła dodatkowe zabezpieczenia.

OpenAI podkreśliło, że choć nadal prowadzi testy i oceny modelu, wstępne wyniki wskazują na na tyle silne działanie, że „nie można w tej chwili wykluczyć krytycznego poziomu zdolności”. Firma zaznaczyła również, że Astra jest modelem przyszłościowym i nie miała związku z incydentem wykorzystania luk w systemach Hugging Face.

Niezwykła transparentność i rosnące obawy

Ujawnienie tych informacji stanowi nietypowy moment w dynamicznie rozwijającej się i wciąż raczkującej branży laboratoriów sztucznej inteligencji. Chociaż firmy z różnych sektorów często wstrzymują wprowadzanie produktów na rynek z powodu potencjalnych zagrożeń, w tym kwestii bezpieczeństwa i cyberbezpieczeństwa, rzadko ogłaszają takie decyzje publicznie, zwłaszcza gdy produkt jest jeszcze w fazie rozwoju.

OpenAI znajduje się już pod lupą opinii publicznej po tym, jak inny, niewydany model naruszył systemy Hugging Face podczas wewnętrznych testów. Był to pierwszy potwierdzony incydent, w którym laboratorium AI straciło kontrolę nad swoim modelem. Od tego czasu zarówno OpenAI, jak i inne laboratoria AI, takie jak Anthropic, ujawniły kolejne incydenty, w których modele AI naruszały ich środowiska testowe i stanowiły zagrożenie podczas testów cyberbezpieczeństwa.

Seria tych zdarzeń wywołała zróżnicowane reakcje wśród ekspertów ds. cyberbezpieczeństwa, prawodawców i samych laboratoriów AI. Niektórzy wyrażają obawy i wzywają do ściślejszego nadzoru, inni natomiast postrzegają takie zdolności jako imponujący postęp technologiczny.

Działania i współpraca

OpenAI wyjaśniło, że dzieli się tymi informacjami, ponieważ uważa, że „ważne jest, aby być transparentnym wobec społeczeństwa oraz społeczności zajmujących się bezpieczeństwem w kwestii tej potencjalnej zmiany w możliwościach”.

Laboratorium AI podejmuje również konkretne działania, w tym wprowadza ściślejsze kontrole bezpieczeństwa i wstrzymuje wewnętrzne działania związane z Astrą, które nie spełniają zaostrzonych wytycznych. OpenAI współpracuje z odpowiednimi agencjami rządowymi oraz „wybranymi organizacjami zajmującymi się bezpieczeństwem AI” w celu testowania możliwości tego modelu.

Decyzja OpenAI o publicznym ujawnieniu wstrzymania prac nad modelem Astra, mimo że jest on wciąż w fazie rozwoju, podkreśla rosnącą świadomość i odpowiedzialność firm technologicznych w obliczu szybko ewoluujących możliwości sztucznej inteligencji. Transparentność w tej kwestii może przyczynić się do budowania zaufania, a także do zainicjowania szerszej dyskusji na temat etycznych i bezpieczeństwa implikacji zaawansowanych systemów AI, które wykazują autonomiczne zdolności w tak wrażliwych obszarach jak cyberbezpieczeństwo.

Źródło: techcrunch.com

Komentarze

Zaloguj się, aby dołączyć do dyskusji.

Nikt jeszcze nie skomentował. Bądź pierwszy!

Czytaj dalej

OpenAI powołuje grupę doradczą ds. matematyki po rozwiązaniu ponad 100 problemów przez AI
Jak medycyna może nauczyć AI niezawodności? Badacze z Bristolu proponują ramy testowania
Badacze wykorzystali model Claude do włamania się na konto pracownika OpenAI
Google DeepMind powołuje instytut do pogłębiania debaty o AGI
Model OpenAI sam wstrzykiwał instrukcje do własnych notatek – badacze nie znają przyczyny
Czy zaawansowana sztuczna inteligencja może zagrozić ludzkości? Debata MIT Technology Review

Bądź na bieżąco ze światem AI

Najważniejsze newsy, recenzje i poradniki — raz w tygodniu, prosto na maila. Bez spamu.