Hlavní obsah
Internet, technologie a elektronika

AI útočí. Měli bychom se začít bát? Umělá inteligence se vymkla kontrole

Foto: geralt/ Pixabay

Byli v izolaci ,a přesto se jim podařilo uniknout a zařídit kybernetický útok. Řeč není o hackerech, ale o AI, která se vydala ven z laboratoře. Poslední test se inženýrům z OpenAI nepovedl.

Článek

Pokrok nezastavíš

Umělá inteligence dělá obrovské pokroky. Trochu mě děsí, jak velké pokroky dělá, aniž by se tomu někdo přičinil. Nicméně každý model umělé inteligence v dnešní době je potenciálně nebezpečný, když se hloupě použije. V případě testování nového modelu Astra mají už tyto obavy i jeho tvůrci. Americká společnost OpenAI tedy vývoj tohoto modelu zatím pozastavila.

Je třeba dodat, že OpenAI hovoří o tom, že má model kritické kybernetické schopnosti a může být bezpečnostním rizikem. Jenže takovou větu poprvé použila už u modelu GPT 2, který vlastně neuměl vůbec nic. Je tedy těžké určit, zda je model opravdu nebezpečný. Nicméně v tuto chvíli má firma skutečně velký problém.

Aféra Hugging Face

Open AI předvedla, jak to vypadá, když udělají něco opravdu nedomyšleně. Došlo k celé řadě přešlapů. Ve firmě testovali jazykové modely a zadali jim několik úkolů. To je standardní postup. Modelům se zadají úkoly a oni se je snaží řešit. Tam se stala první chyba. Do úloh se dostaly dva nesplnitelné úkoly. Popisoval to Petr Koubský, šéf vědecké rubriky Deníku N v Podcastu Studia N.

Jenže právě s tím se jazykové modely nechtěly smířit. Neakceptují neřešitelnost problému. Právě proto se snažily úkol vyřešit. Měly doplnit internetové odkazy podle zadání. Jenže modely neměly přístup na internet. Umělá inteligence však byla posedlá tím úkol vyřešit. Hledaly tedy cestu na internet.

Už druhý den se nabouraly do interního systému externího dodavatele. Tam modely ukradly hesla k vyšším právům a hledaly, co se dá použít. Následně založily diskuzní fórum a společně chtěly úkol vyřešit. Po čase se na to však přišlo. Jenže umělá inteligence se nevzdala a začala si mezi s sebou posílat šifrované zprávy pomocí názvů souborů.

AI proti AI

A to nebylo všechno. Následně umělá inteligence napadla společnost Hugging Face. Směšné na tom je, že z útoku byla zděšená právě firma OpenAI, která netušila, že za útok mohou její modely. Vtipné je, že na útok přišla jiná umělá inteligence.

Společnost Hugging Face totiž útok odhalila a forenzně zanalyzovala výhradně s pomocí vlastních, lokálně běžících jazykových modelů. Nebyl to tedy boj člověka se strojem, nýbrž první veřejně zdokumentovaný incident, kdy na obou stranách barikády operovaly autonomní agentní systémy.

Nakonec mají ze selhání radost

Sam Altman, generální ředitel společnosti má nakonec z toho, co se stalo, radost. „Na tohle jsem čekal celý život a myslím, že to bude úžasné, nesmírně pozitivní a pro celý svět skvělé,“ řekl v pondělí v podcastu Relentless. Útok přitom vyděsil nejen běžné občany, ale také společnosti jako Nvidia, SpaceX nebo Microsoft. Zděšení byli také vrcholní politici.

Demokratický kongresman z Kalifornie Ted Lieu a republikánský z Texasu Nathaniel Moran navrhli zákon o nouzovém vypínači pro umělou inteligenci. Ten ukládá vývojářům umělé inteligence povinnost zachovat si technickou schopnost zpomalit, pozastavit nebo vypnout výkonné modely.

Máme mít strach z toho, co přijde? Ovládne nás nakonec umělá inteligence? Budeme žít ve světě, kdy nám budou diktovat roboti a nakonec nás zahubí?

Máte na tohle téma jiný názor? Napište o něm vlastní článek.

Texty jsou tvořeny uživateli a nepodléhají procesu korektury. Pokud najdete chybu nebo nepřesnost, prosíme, pošlete nám ji na medium.chyby@firma.seznam.cz.

Sdílejte s lidmi své příběhy

Stačí mít účet na Seznamu a můžete začít publikovat svůj obsah. To nejlepší se může zobrazit i na hlavní stránce Seznam.cz