První programy pro hraní her ukázaly, že počítač může v přesně vymezeném prostředí prohledávat možné tahy a hledat vhodné řešení. Později se podobné principy spolu se statistickým učením uplatnily například při:
Tyto systémy bývají velmi účinné, pokud je úloha úzce vymezená, opakuje se a její výsledek lze měřit. Dokážou rychle zpracovat velké množství případů a poskytovat konzistentní výstupy. Pravidlové systémy se také často snáze kontrolují než složité modely, protože jejich rozhodovací logika je přímo zapsaná.
Tradiční AI sama o sobě nerozumí tomu, proč určitý výsledek nastal. Model může odhalit statistickou souvislost, aniž by prokázal příčinu. Pokud je navíc trénován na historických datech zatížených předsudky, může tyto předsudky reprodukovat nebo zesílit.
Pravidla mohou být mimo původně navržené podmínky křehká a složité prediktivní modely se mohou obtížně vysvětlovat. Výkon se také může zhoršit, když se změní reálné prostředí – tento problém se obvykle označuje jako datový drift.
U významných rozhodnutí v oblasti úvěrů, zaměstnávání, pojištění, policie nebo zdravotnictví jsou proto zapotřebí kontroly kvality dat, testování zaujatosti, přiměřené vysvětlení, lidské posouzení, průběžné sledování a možnost odvolání.
Generativní AI se učí vzorce z rozsáhlých souborů textů, obrázků, zvuku, videa nebo kódu a na jejich základě vytváří nové výstupy. Velké jazykové modely generují text postupně, zatímco multimodální systémy dokážou pracovat s více formáty.
To zásadně změnilo způsob, jakým lidé s AI komunikují. Namísto výběru z omezené nabídky příkazů nebo obdržení klasifikačního skóre mohou v běžném jazyce popsat cíl a požádat systém, aby materiál vytvořil, upravil nebo vysvětlil.
Mezi běžné příklady patří:
Hlavními přínosy jsou rychlost, nižší náklady na přípravu textů, přirozené ovládání a možnost vytvářet více personalizovaných verzí. Přesvědčivě znějící odpověď ale není totéž co spolehlivý odborný úsudek.
Halucinace a přehnaná jistota. Velké jazykové modely mohou sebejistým tónem vytvářet smyšlené, nepřesné, zaujaté nebo příliš zjednodušené informace. Výzkum uzemnění modelů a jejich hodnocení upozorňuje na halucinace, škodlivý obsah, manipulaci, porušování autorských práv, zásahy do soukromí a bezpečnostní problémy.
Učení a akademická integrita. Velký školní experiment ukázal, že AI doučování zlepšovalo výsledky v době, kdy bylo k dispozici. Studenti, kteří se na něj spoléhali bez vhodných pojistek, však mohli po odebrání přístupu dosahovat horších výsledků, což naznačuje slabší osvojení dovedností. Lepší ochranu poskytovaly nápovědy navržené učiteli než prosté prozrazení odpovědi. Generativní nástroje také mohou usnadnit plagiátorství nebo ztížit ověření, zda student látce skutečně porozuměl.
Autorská práva a původ obsahu. Otázky týkající se původu trénovacích dat, napodobování stylu a výstupů, které reprodukují chráněný materiál, zůstávají předmětem sporů. Doporučení pro vzdělávání řadí porušení duševního vlastnictví mezi významná rizika spolu s nepřesným, zaujatým nebo nebezpečným obsahem.
Škodlivý a manipulativní obsah. Generativní systémy mohou vytvářet dezinformace, obtěžující, sexuální či násilný obsah a nebezpečné instrukce. Bezpečnostní doporučení proto zdůrazňují testování, ochranná opatření, zaznamenávání aktivity a průběžné sledování namísto předpokladu, že se model bude vždy chovat podle záměru tvůrců.
Bezpečnost mladých lidí a duševní pohoda. Výzkum rizik generativní AI pro děti a dospívající upozorňuje na duševní zdraví, behaviorální a sociální vývoj, toxicitu, soukromí i možné zneužití nebo vykořisťování. Rizika jsou zvlášť závažná tehdy, když uživatel začne chatbot vnímat jako náhradu kvalifikované lidské pomoci.
Soukromí a důvěrnost. Do zadání se mohou dostat osobní údaje, obchodní tajemství, materiály klientů nebo informace chráněné právním tajemstvím. Organizace by proto měly jasně určit, jaká data lze zadávat do konkrétních služeb. Neschválené nástroje je vhodné považovat za nevhodné pro citlivé informace.
Rozumným minimem je zacházet s výstupem modelu jako s návrhem, nikoli jako s důkazem. Důležitá faktická tvrzení je nutné ověřovat u autoritativních zdrojů a u lékařských, právních, finančních, pracovních a bezpečnostně kritických rozhodnutí by měl být povinný lidský dohled.
Užitečná opatření zahrnují vyhledávání založené na schválených zdrojích, uvádění citací, red-teamové testování, ochranné filtry obsahu, věkově přiměřený design, auditní protokoly, informování uživatelů a pravidla pro práci s daty, akademické využití, původ obsahu a autorská práva. Vládní doporučení podobně upozorňují na nepřesný či zaujatý obsah, úniky soukromých údajů, porušování duševního vlastnictví a problémy akademické integrity.
Agentní AI přidává k modelu akční vrstvu. Agent může interpretovat cíl, rozdělit ho na kroky, zavolat nástroje, jako jsou prohlížeče, repozitáře kódu, databáze nebo e-mailové systémy, zkontrolovat průběžné výsledky a pokračovat v práci v mezích udělených oprávnění.
Právě tím se agent liší od chatbota, i když oba mohou využívat stejný velký jazykový model. Chatbot může navrhnout e-mail, zatímco agent může vyhledat informace, zprávu připravit, odeslat ji a aktualizovat další systém. Programátorský asistent může vysvětlit chybu; agent může prozkoumat celý repozitář, upravit soubory, spustit testy a připravit změnu ke kontrole.
Mezi uváděné příklady na současném trhu patří vývojářský agent Google Jules, nástroj LinkedIn Hiring Assistant pro náborové procesy a osobní agentní framework OpenClaw. Podle materiálů projektu je OpenClaw osobní open-source asistent, který běží na zařízeních uživatele a propojuje se s komunikačními kanály a nástroji. Jeho skutečné možnosti závisejí na zapnutých integracích a oprávněních.
Agentní systémy mohou:
Mohly by tak zpřístupnit složitější pracovní postupy menším organizacím i jednotlivcům. Zároveň se ale mění klíčová otázka. Už nejde jen o to, zda je odpověď přesná, ale také o to, co smí systém udělat a jak lze jeho kroky zkontrolovat.
Generativní model může udělat chybu v odpovědi. Agent může chybný závěr, škodlivý pokyn nebo napadený nástroj proměnit v reálnou akci.
Agent s přístupem k financím by mohl provést neautorizovanou platbu, nákup, převod nebo zrušení objednávky. Agent s přístupem k e-mailu, prohlížeči nebo cloudovým službám by mohl podlehnout škodlivé webové stránce či dokumentu a odhalit přihlašovací údaje nebo odeslat důvěrné soubory. Nadměrná oprávnění, slabé ověřování identity a špatně oddělené pravomoci mohou malou chybu modelu znásobit v závažný incident.
Obtížnější je také určit odpovědnost, pokud výsledek vznikne souhrou modelu, pokynů, dat, nástrojů a dalších agentů. Provozovatel proto potřebuje vidět nejen konečný výsledek, ale také navrhovanou akci, důkazy, o které se opírá, a využitá oprávnění.
Základní principy platí pro všechny tři etapy: určit odpovědného vlastníka, omezit systém na jasně vymezený účel, chránit data, testovat před nasazením, sledovat výkon, připravit se na incidenty a zajistit smysluplný lidský dohled nebo možnost zásahu u důležitých rozhodnutí.
Agentní systémy potřebují dodatečné kontroly, protože mohou ovlivňovat externí systémy. Praktická ochrana zahrnuje:
Singapurský Modelový rámec řízení AI pro agentní AI, uvedený 22. ledna 2026, představuje doporučení pro organizace, které tyto systémy nasazují, nikoli samostatný zákon o umělé inteligenci. Do centra staví lidskou a organizační odpovědnost a doporučuje řízení rizik a kontrolní mechanismy úměrné míře autonomie agenta.
Pro finanční služby popisuje dokument Monetary Authority of Singapore nazvaný SAFR přístup k řízení v reálném čase. Strukturovaný záznam v něm zachycuje, co agent zamýšlí provést, proč to zamýšlí a jaké důkazy jeho návrh podporují.
Vývoj AI není jednoduchý pochod od „staré“ technologie k „nové“. Pravidlové a prediktivní systémy zůstávají správnou volbou pro řadu omezených a dobře měřitelných úloh. Generativní AI přidává pružnou tvorbu a komunikaci v přirozeném jazyce. Agentní AI přidává schopnost sledovat cíl prostřednictvím nástrojů a vnějších akcí.
S touto schopností roste i náročnost řízení. Predikce vyžaduje kontrolu přesnosti, zaujatosti a datového driftu. Generování vyžaduje ověřování, bezpečnost, ochranu soukromí a znalost původu obsahu. Jednání vyžaduje všechna tato opatření a navíc kontrolu oprávnění, schvalovací kroky, jasnou odpovědnost a plán obnovy po chybě.
Nejspolehlivější AI produkty proto nebudou stát jen na schopnějším modelu. Potřebují také promyšlený návrh celého systému a skutečný lidský dohled.