Poslední dny nám ukazují zajímavý rozpor: zatímco AI agenti nabírají tempem a začínají ovládat skutečné procesy v reálných organizacích, právě teď se bouříme kvůli otázkám, které jsme měli zodpovědět mnohem dřív.
Vezměme si Cisco. Od července budou všichni jejich devět desítek tisíc zaměstnanců mít přístup k vlastním AI agentům schopným odpovídat na pracovní dotazy. To není pokus nebo pilot pro vybraný tým — to je masivní nasazení do celé organizace. Paralelně se Alibaba pochlubil frameworkem SkillWeaver, který snižuje spotřebu tokenů u agentů o 99 procent. Tyto dvě zprávy dohromady znamenají, že autonomní agenti už nejsou kostlivé experimentální verze — stávají se prakticky dostupnými a ekonomicky smysluplnými. Microsoft to chápe taky, proto zakládá novou jednotku Frontier Co. s 2,5 miliardami dolarů a šesti tisíci zaměstnanci speciálně na nasazení AI řešení u klientů.
Problém? Právě když se to chystá opravdu explodovat, si začínáme uvědomovat rizika. Senátor Mark Warner zveřejnil návrh legislativy na ochranu soukromí u AI agentů — to je logické, když budou mít autonomní systémy přístup k pracovním datům a procesům milionů lidí. Horší je varování od odborníků na bezpečnost: agenti schopní psát a podávat grantové žádosti bez lidské kontroly představují existenční hrozbu pro integritu výzkumného financování. Představte si masivní, koordinovanou manipulaci grantových systémů kvůli agentům, které by jejich tvůrci nemuseli ani zvlášť ovládat.
Apropos kontroly — FDA právě schválila první zdravotnickou aplikaci orientovanou na pacienty postavené na velkých jazykových modelech. Rozhodnutí je historické, ale otevírá otázku, kterou si nejsem úplně jistý, jak si pořídit: Je LLM prostředí, kterým se informace pronášejí, nebo je to už rozhodovatel? Pacient se bude chovat jinak, když se rozhoduje podle zobrazené rady. To není triviální právní a etická otázka.
Microsoft mezitím pracuje na přepracování Copilotu — interní dokumenty ukazují, že chce sloučit spotřebitelské a firemní verze a odstranit nepopulární funkce. Chce, aby si aplikace zasloužila místo na zařízeních. To je zajímavé vyznamování: Copilot jako obecný asistent prostě nezvítězil, takže se Microsoft vrací k účelovějším řešením.
Střed toho všeho je tahle myšlenka: agenti a LLM už nejsou výzkumné téma. Jsou to pracující systémy, které mají přístup k penězům, zdravotním datům a důvěrným informacím. Otázka není jestli je regulovat, ale jestli stihnem dospět k rozumným pravidlům dřív, než to všechno už bude rozpuštěné v systémech, které si nebudeme ani vědomí.