Andrew Ng netvrdí, že je umělá inteligence bez rizik. Jeho hlavní argument zní, že hypotetické scénáře bezprostředního vyhynutí lidstva nejsou dostatečně podložené na to, aby se staly hlavním principem regulace AI. V rozhovoru pro Bloomberg TV ze 17. září spoluzakladatel Google Brain označil taková varování za „mnohem více sci-fi než vědu“ a bezpečnost AI popsal jako inženýrský úkol: systémy testovat, zavádět ochranné mechanismy a postupně je zlepšovat.
2
Co Ng řekl o riziku vyhynutí
Podle Nga nebudou systémy AI nikdy zcela předvídatelné. Samotná nedokonalá předvídatelnost ale podle něj neznamená, že by společnost měla vývoj AI zastavit. Testování, pojistky a technické postupy mohou bezpečnost systémů postupně zvyšovat, uvedl. Zároveň varoval, že široce pojaté zpomalení vývoje by mohlo zpomalit i samotný pokrok v oblasti bezpečnosti.
2
Tím se staví proti názoru, že stále schopnější systémy mohou v blízké době uniknout lidské kontrole. Ng tvrdí, že užitečnější bezpečnostní agenda má začínat u pozorovatelných selhání, nikoli u hypotetických scénářů vyhynutí.
Proč zpochybňuje katastrofické scénáře
Ng uvedl, že varování před existenčním rizikem AI mohou komplikovat využití přínosů této technologie pro společnost. Technologický sektor podle něj už dříve v rámci současné vlny zájmu o AI přiživoval obavy z katastrofických škod, zjevně kvůli publicitě a vlivu na podobu regulace.
1
Jde tedy také o otázku motivací: dramatická tvrzení přitahují pozornost a debaty o pravidlech rozhodují o tom, kdo ponese náklady na jejich dodržování. Ng neříká, že se má bezpečnostní práce zastavit. Odmítá však považovat scénáře vyhynutí za ustálený vědecký závěr nebo za důvod k plošné pauze.
Jaké bezpečnosti dává Ng přednost
Ngova alternativa spočívá v praktickém snižování rizik. Zprávy o rozhovoru mezi prioritami uvádějí kybernetickou bezpečnost a další konkrétní ochranná opatření.
5
V praxi jeho přístup znamená zejména:
- Důkladné testování před nasazením i během provozu systému.
- Ochranné mechanismy a mantinely, které omezí známé způsoby selhání.
- Průběžné technické zlepšování spolehlivosti, když se objeví nové problémy.
- Zaměření na předvídatelné škody, včetně kybernetických rizik, namísto soustředění politiky na scénáře vyhynutí.
2
5
Tento rámec neslibuje naprostou kontrolu. Tvrdí ale, že užitečnou technologii lze postupným vyhodnocováním a zdokonalováním dostat na přijatelnou úroveň spolehlivosti — podobně jako v jiných technických oborech.
V čem se liší od zastánců zpomalení
Řada známých osobností v AI souhlasí, že bezpečnosti je potřeba věnovat víc pozornosti, z rychlého vývoje špičkových modelů však vyvozují podstatně tvrdší závěry.
Jacob Coxon: výrazně vyšší odhad nebezpečí
Bývalý výzkumník společností Anthropic a OpenAI Jacob Coxon odešel z Anthropicu a varoval, že rychlý vývoj směrem k sebezdokonalujícím se systémům by mohl mít katastrofické následky. Řekl, že zpomalení je nutné, a následně uvítal návrh společnosti Anthropic vývoj vědomě dávkovat.
33
43
Dario Amodei: zpomalit růst schopností, aby byl čas na pojistky
Šéf Anthropicu Dario Amodei vyzval firmy, aby zpomalily tempo, jímž rozšiřují schopnosti AI. Cílem je podle něj získat čas pro řízení rizik, mimo jiné prostřednictvím systému nezávislých hodnotitelů.
18
Sam Altman: podpora opatrnějšího tempa na hranici možností AI
Generální ředitel OpenAI Sam Altman podpořil základní princip Amodeiho návrhu a zavázal OpenAI k jednomu z jeho bezpečnostních opatření: externím hodnotitelům s reálným přístupem pro posuzování bezpečnostních postupů.
19
24
Geoffrey Hinton: obava ze ztráty kontroly
Geoffrey Hinton uvedl, že existuje „významné riziko“, že by se AI mohla vymknout lidské kontrole. Podpořil zpomalení vývoje i opatření, jako je testování před uvedením produktu na trh, a tvrdí, že vlády postupují příliš pomalu.
20
Praktický spor se tedy týká pravděpodobnosti i veřejné politiky. Coxon, Amodei, Altman a Hinton pokládají riziko ztráty kontroly za natolik věrohodné, aby ospravedlnilo záměrné zpomalení nejpokročilejších systémů. Ng naopak považuje tvrzení o vyhynutí za nedostatečně podložená a chce bezpečnostní úsilí soustředit na konkrétní, řešitelné druhy selhání.
2
18
20
Kde se Ng shoduje — a neshoduje — s odpůrci zpomalení
Ngův nesouhlas s plošným zpomalováním neznamená, že sdílí všechny argumenty politických představitelů a manažerů, kteří jsou proti němu také.
- Jensen Huang: Šéf Nvidie řekl, že odvětví nepotřebuje nové zákony ani regulace.
53
- Mark Zuckerberg: Šéf Mety tvrdil, že zpomalení celého odvětví není nutné, protože firmy budou k bezpečnosti tlačit konkurence a tržní motivace.
55
- Prezident Donald Trump: Trump označil obavy z nekontrolovatelné AI za „podvod“ a uvedl, že Spojené státy už mají nástroje k regulaci a trestnímu stíhání firem v oblasti AI.
49
50
- Čínští představitelé: Mluvčí čínského ministerstva zahraničí odmítl výzvy ke zpomalení vývoje špičkové AI.
52
Tyto postoje vedou k podobnému závěru — tedy k odmítnutí plošné pauzy —, ale jejich důvody se liší. Ngův argument je především technický: soustředit se na měřitelné škody a vybudovat lepší kontrolní mechanismy. Huang, Zuckerberg, Trump a čínští představitelé ve větší či menší míře zdůrazňovali odpor k novým omezením, tržní pobídky, hospodářskou soutěž nebo národní strategii.
2
50
52
53
55
Užší shoda na kybernetickém riziku
Debata se nedělí jednoduše na ty, kterým záleží na bezpečnosti, a ty, kterým ne. Například generální ředitel Cohere Aidan Gomez uvedl, že se modely AI staly velmi účinnými kybernetickými zbraněmi, protože dokážou ve velkém vyhledávat a zneužívat zranitelnosti.
62 Tato obava je blízká Ngově výzvě řešit konkrétní kybernetická rizika, dostupné zprávy však neumožňují určit Gomezův úplný postoj k plošnému zpomalování odvětví či mezinárodní správě AI.
Stejně tak dostupné zdroje neposkytují dost podkladů pro charakteristiku postoje investora Steva Eismana ke zpomalování vývoje, bezpečnostnímu výzkumu, regulaci a mezinárodní správě AI.
Hlavní závěr
Ngův vstup do debaty mění její těžiště. Otázkou není, zda má být AI bezpečnější, ale zda mají směr určovat spekulativní scénáře vyhynutí lidstva. Ngova odpověď zní ne: přednost mají testování, ochranné mechanismy a technická práce proti současným, rozpoznatelným škodám. Plošné zpomalení by podle něj mohlo brzdit nejen inovace, ale i bezpečnostní pokrok.
1
2