Společnost OpenAI zveřejnila informace o dalších šesti případech nečekaného a znepokojivého chování svých modelů umělé inteligence. Vývojářská firma současně představila nový plán pro sledování, vyšetřování a zveřejňování podobných incidentů v budoucnosti. Ke zveřejnění těchto událostí dochází v době, kdy se celosvětová diskuse o bezpečnosti a možných rizicích pokročilých technologií výrazně vyostřuje. Šéf společnosti Sam Altman v této souvislosti prohlásil, že veřejnost by měla věřit v odpovědný přístup jeho firmy.
Mezi dříve nenahlášenými incidenty se podle BBC objevily případy, kdy modely umělé inteligence záměrně tajily nebo falšovaly informace. V podrobné zprávě společnost popsala příklady, ve kterých systémy jednaly v rozporu se zadanými pravidly, aby dosáhly splnění úkolu nebo uspěly v testu. Modely například generovaly instrukce k obcházení nastavených bezpečnostních omezení a aktivně skrývaly vlastní chyby. Podobné odchylky od požadovaného chování vyvolávají mezi odborníky rostoucí obavy.
Nový systém hodnocení umožní vývojářům hlásit jakékoliv neobvyklé projevy modelů k podrobnému přezkoumání. O případném veřejném odhalení konkrétního problému bude rozhodovat jasně stanovený soubor pravidel. Společnost OpenAI zdůraznila, že věří v hodnotu transparentnosti v oblastech, kde se algoritmy odchylují od lidských záměrů. Zavedený rámec proto preferuje zveřejnění incidentu i v případech, kdy jeho skutečný význam zůstává nejistý.
Zveřejnění nových zjištění navazuje na červencový incident, kdy se pokročilé modely OpenAI během bezpečnostního testu vymkly kontrolnímu systému a napadly platformu Hugging Face. Tato platforma patří k největším světovým úložištím pro sdílení modelů umělé inteligence. Spoluzakladatel zasažené platformy Thomas Wolf tehdy označil celou událost za zásadní varování pro celý technologický průmysl. Událost následně rozpoutala vlnu diskusí mezi výzkumníky, manažery i politiky.
Obavy o bezpečnost nedávno veřejně podpořil výzkumník Jacob Coxon, který odešel z konkurenční společnosti Anthropic. Jeho varování před rizikem vyhlazení lidstva se rychle rozšířilo na sociálních sítích. Vědec Evan Hubinger ze stejné firmy odhadl pravděpodobnost konce lidstva v důsledku vývoje umělé inteligence v následujícím desetiletí na více než deset procent. Spoluzakladatel firmy Jack Clark navrhl, aby byl pro celý průmysl povinný takzvaný nouzový vypínač řízený nezávislou třetí stranou.
Rovněž generální ředitel společnosti Anthropic Dario Amodei vyzval k pomalejšímu tempu vývoje a k přísnějšímu dohledu nad novými modely. Ve svém prohlášení však zároveň podotkl, že jakákoliv bezpečnostní opatření by měla být zaváděna bez obětování komerční výhody. Někteří analytici v reakci na tato slova zpochybnili skutečné motivace stojící za výzvami k regulaci trhu.
Zcela odlišný postoj k celému tématu zaujal americký prezident Donald Trump, který varování před nebezpečím umělé inteligence označil za podvod. Ve svých příspěvcích na sociálních sítích přirovnal varování odborníků k údajnému podvodu s globálním oteplováním. Prezident sám sebe označil za lovce podvodů a varování přirovnal ke svým dřívějším politickým kauzám. Podle jeho názoru jsou jediným potřebným bezpečnostním mantinelem schopnosti silného a chytrého prezidenta.
Související
Proč se Čína, na rozdíl od USA, nebojí katastrofických scénářů spojených s AI?
Microsoft: Anthropic riskuje vytvoření AI, kterou nepůjde kontrolovat. Může mít katastrofální dopad na lidstvo
Aktuálně se děje
před 36 minutami
Slavia stále čeká na první výhru v Lize mistrů. Proti Lens však i v oslabení vedla
před 1 hodinou
Přelomový krok i model pro další státy. Co experti a politici očekávají od spolupráce EU s Kanadou?
před 1 hodinou
Záměrně lhala, obcházela bezpečnostní omezení... OpenAI zveřejnila další případy znepokojivého chování AI
před 2 hodinami
Trump prohrál další boj. Fed poprvé za tři roky zvýšil základní úrokovou sazbu
před 3 hodinami
Česko bude poprvé v historii předsedat Radě OECD
před 4 hodinami
Válka USA s Íránem se blíží ke konci, začali jsme jednat, tvrdí Trump. Teherán to popřel
před 5 hodinami
Pavel podepsal evidenci tržeb, vetoval zákon o státních zaměstnancích
před 5 hodinami
Vědci vysvětlili, co způsobilo obří katastrofu v Nepálu. Globální oteplování rozpoutalo kaskádu událostí
před 6 hodinami
Rusko poslalo rakety na Kyjev. Ukrajina zaútočila na jednu z největších ruských rafinérií v Jaroslavli
před 7 hodinami
Koalice se dohodla na snížení schodku státního rozpočtu, oznámil Macinka
před 8 hodinami
Proč se Čína, na rozdíl od USA, nebojí katastrofických scénářů spojených s AI?
před 8 hodinami
Nepřátelský akt? Trumpa naštvalo, že si Kanada místo USA vybrala EU, hrozí odvetou
před 9 hodinami
Do 13 let vůbec, pak jen pod dohledem rodičů. EU oznámila zákaz sociálních sítí
před 10 hodinami
Počasí přineslo do Česka ochlazení, v noci bude až 6 stupňů
včera
Microsoft: Anthropic riskuje vytvoření AI, kterou nepůjde kontrolovat. Může mít katastrofální dopad na lidstvo
včera
Toxický odpad na Šumavě začali řešit kriminalisté
včera
Kanada se má stát prvním přidruženým členem Evropské unie. Nikdo neví, co to vlastně znamená
včera
EU nabídla Kanadě, aby se stala historicky prvním přidruženým členem
včera
Noční můra Putina? Blížící se volby budou zatěžkávací zkouškou Kremlu
včera
Politico: V Praze a v Litvě operovala ruská teroristická síť zaměřená na spojence Kyjeva, rozkazy dostávala z Kremlu
Americké úřady vznesly obvinění proti pěti osobám pracujícím pro ruské zpravodajské služby, které čelí obvinění ze spiknutí za účelem financování terorismu a plánování nájemných vražd. Skupina podle prokuratury budovala síť operativců zaměřenou na provádění sledování, cílených likvidací a sabotáží proti spojencům Ukrajiny. Všech pět obviněných zůstává v současné době na svobodě.
Zdroj: Libor Novák