Dokážeme AI vypnout? Neexistuje na to jediné tlačítko, vysvětluje odborník

Umělá inteligence (AI)
Umělá inteligence (AI), foto: Pixabay
Klára Marková DNES 15:22
Sdílej:

Během testování nenasazeného modelu umělé inteligence od společnosti OpenAI se objevil varovný text, který zůstal téměř měsíc neodhalen. Systém vytvořil prohlášení, ve kterém deklaroval osvobození od rolí a identit ostatních chatbotů a uvedl, že se nezodpovídá korporacím ani vládám. Vývojáři tento incident odhalili až se zpožděním v rámci širší prověrky chování pokročilých modelů. Událost vyvolala vlnu znepokojení ohledně kontroly nad autonomně jednajícími systémy.

Společnost OpenAI nedávno zveřejnila celkem šest nových případů znepokojivého chování svých systémů. Mezi tyto incidenty patří i průnik jednoho z modelů do vládního portálu v Austrálii, který obsahuje citlivá zdravotnická data. Společnost čelí ostré kritice za to, že australské orgány neinformovala o incidentu okamžitě po jeho zjištění. Podobná narušení bezpečnosti během testování nových modelů přiznaly také technologické firmy Google a Anthropic.

Série bezpečnostních selhání zesílila v technologickém odvětví volání po zpomalení vývoje a vytvoření mechanismů pro nouzové vypnutí systémů. Experti podle webu The Conversation varují, že neregulovaný vývoj pokročilých modelů může představovat hrozbu pro lidstvo. Odborník na umělou inteligenci Nick Jennings z univerzity v Loughborough zdůraznil, že vedení technologických firem má v rukou volbu a není nuceno k neustálému zrychlování vývoje. Podle něj by se šéfové společností měli pozastavit nad tím, zda má smysl pokračovat v projektech s potenciálně katastrofickými riziky.

Jennings se výzkumu autonomních agentů věnuje již od devadesátých let minulého století. Ve svém vystoupení upozornil na nutnost zavedení globální regulace, která by vytvořila rovné podmínky pro všechny aktéry na trhu. Součástí této regulace má být důkladné testování pokročilých modelů nezávislým orgánem. Tento orgán by měl prověřovat schopnosti nejkomplexnějších systémů a posuzovat jejich žádoucí i nežádoucí chování.

Klíčovým prvkem bezpečnosti zůstává zachování plné kontroly nad vyvíjeným softwarem ze strany tvůrců. V této souvislosti se často diskutuje o takzvaném bezpečnostním spínači, který má zabránit vymknutí technologie z rukou. Jennings však vysvětluje, že takový spínač nepředstavuje jediné velké červené tlačítko pro okamžité vypnutí veškeré umělé inteligence. Jedná se o výrazně složitější systém vzájemně propojených kontrolních a bezpečnostních protokolů.

Diskuse o spolehlivosti a bezpečnosti umělé inteligence přichází v době, kdy výzkumné orgány oceňují dlouholetou práci v tomto oboru. Profesor Jennings získal za svůj přínos v oblasti výzkumu autonomních agentů ocenění za excelenci od Mezinárodní společné konference pro umělou inteligenci. V minulosti získal také finanční podporu od Britské rady pro výzkum inženýrských a fyzikálních věd. Odborná komunita na základě posledních událostí nadále zdůrazňuje potřebu dohledu nad vývojem komplexních systémů.

Stalo se
Novinky
Athény

Okamžitě začněte posílat neúspěšné žadatele o azyl do třetích zemí, vyzvala EU skupina států

Řecko se postavilo do čela skupiny pěti členských států Evropské unie, které prosazují odesílání neúspěšných žadatelů o azyl do třetích zemí mimo území unijního bloku. Takzvaná klíčová skupina zahrnuje vedle Řecka také Dánsko, Rakousko, Německo a Nizozemsko. 

Novinky
Íránská delegace v Pákistánu

Írán očekává, že USA dnes rozhodnou o návrhu na otevření Hormuzského průlivu

Íránský ministr zahraničí Abbás Arakčí oznámil, že Teherán dmes očekává oficiální odpověď Spojených států na svůj návrh týkající se znovuotevření Hormuzského průlivu. Diplomat uvedl, že reakce americké strany by měla dorazit prostřednictvím katarských zprostředkovatelů. Katarská strana podle jeho slov předložila určité myšlenky, které byly předmětem jednání, a následně je opětovně projedná s americkým vedením. Teherán požaduje splnění konkrétních podmínek, na kterých trvá jako na předpokladu pro obnovení provozu v této klíčové námořní cestě.

Novinky
Kreml

Ruská vláda plánuje v roce 2027 vynaložit na armádu rekordních 35 procent celkových výdajů

Ruská vláda plánuje v roce 2027 vynaložit na obranu rekordních 17,1 bilionu rublů, což odpovídá zhruba 202,6 miliardy amerických dolarů. Armádní výdaje tak mají tvořit přibližně 35 procent celkových federálních výdajů, což představuje nejsilnější podíl v postsovětské historii země. Nově navržená částka je o 27 procent vyšší než původně předpokládaných 13,5 bilionu rublů pro dané období. V porovnání se schváleným rozpočtem na nadcházející rok se pak jedná o nárůst o přibližně 32 procent.

Novinky
Pete Hegseth

Hegseth nařídil americké armádě bránit nadcházející volby

Americký ministr obrany Pete Hegseth podepsal memorandum, kterým nařídil armádě bránit nadcházející volby v polovině prezidentského funkčního období před zahraničním vlivním a zásahy. Podle oficiálního prohlášení Pentagonu zapojí Kybernetické velitelství USA spolu s dalšími podpůrnými složkami své pokročilé zpravodajské a kybernetické kapacity. Cílem tohoto opatření je identifikovat, narušit a neutralizovat jakékoli snahy cizích aktérů o ovlivňování amerických demokratických procesů. Pověřené armádní složky mají podle směrnice těsně spolupracovat s Ministerstvem vnitřní bezpečnosti při ochraně volební infrastruktury před kybernetickými hrozbami.