Výzkum bezpečnosti AI, techniky alignmentu, interpretovatelnost, správa a diskuse o existenčních rizicích.
437 článků
Výzkumsafety vs. competition dynamics
Konkurence tlačí AI firmy k rychlosti na úkor bezpečnosti, říká studie
S tím, jak AI systémy nabývají na síle, řeší tvůrci politik po celém světě obtížnou otázku: jak podpořit inovace a zároveň zajistit bezpečnost. Nová studie naznačuje, že konkurenční tlak může firmy svádět k upřednostňování rychlosti před odpovědným vývojem. techxplore.com
Výzkumfine-tuning safety risks/interpretability
Bezpečnostní fine-tuning LLM může skrytě oslabit ochranu před útoky
Fine-tuning umožňuje přizpůsobit obecný LLM konkrétnímu úkolu pomocí cíleného tréninku na vybraných příkladech. Nová analýza ukazuje, že bezpečnostní fine-tuning může nechtěně zanést skryté slabiny, které útočníci dokážou zneužít k obcházení ochran. blogs.cisco.com
NázorAI governance architecture
Svět nepotřebuje další AI deklaraci OSN, ale funkční architekturu
Diplomatická prohlášení o tom, že AI musí prospívat celému lidstvu, jsou snadno vyslovitelná, avšak těžko vymahatelná. Místo dalších nezávazných deklarací je podle autorů potřeba budovat konkrétní institucionální a technickou architekturu pro správu AI. techpolicy.press
ZprávaAI governance/policy
Vládní schvalovací proces AI modelů v USA ohrožuje celé odvětví
Trumpova administrativa zpřísňuje kontrolu nad vydáváním špičkových AI modelů, což podle kritiků vytváří krizi s existenčními důsledky pro celý AI průmysl. Problém se netýká jen jednotlivých firem, ale může zásadně zpomalit inovace v celém sektoru. theaiinsider.tech
Výzkuminterpretability/explainability
Vysvětlitelné AI systémy jako základ důvěry a ochrany soukromí
Xiaoming Liu se ve své přehledové studii zaměřuje na to, jak transparentnost a interpretovatelnost AI zlepšují důvěryhodnost systémů v kritických aplikacích. Zavádění principů explainable AI podle něj hraje klíčovou roli při ochraně soukromí uživatelů. manilatimes.net
ZprávaAI ethics/governance
Papež Lev XIV.: AI nemůže být morálně neutrální
Papež Lev XIV. prohlásil, že každý algoritmus v sobě nese etické volby zakotvené už v jeho návrhu, měřeních a klasifikacích. Vyzval k důrazu na lidskou důstojnost a odpovědnost při vývoji AI systémů. dallasexpress.com
ZprávaAI governance/safety hiring
Anthropic hledá výzkumného inženýra pro oblast AI governance
Společnost Anthropic, která se zaměřuje na vývoj bezpečných a interpretovatelných AI systémů, vypsala pozici výzkumného inženýra specializovaného na právní stát a regulaci AI. Firma patří mezi přední hráče v oblasti odpovědného rozvoje AI. globalsouthopportunities.com
NázorAI alignment/ethics workforce
Jak zkrotit duši AI? Najměte filozofa
Absolventi filozofie dlouho čelili vtipům, že jejich titul k ničemu neslouží. Ve světě AI však firmy stále častěji hledají právě lidi s filozofickým vzděláním, kteří pomáhají řešit etické otázky spojené s vývojem inteligentních systémů. thetimes.com
PolitikaAI governance/regulation
Filipíny a regulace AI: kde země vlastně stojí?
Sdružení ASEAN má vlastní směrnice pro oblast AI, jejich dodržování a vymáhání však závisí na vůli a kapacitách jednotlivých členských států. Filipíny tak zatím nemají jednotný regulační rámec. technology.inquirer.net
ZprávaAI governance / regulation
OpenAI vydalo GPT-5 pouhých 6 hodin po střetu s Trumpovou regulací
OpenAI provedlo jeden z nejrychlejších regulatorních obratů v historii AI. Méně než 24 hodin poté, co souhlasilo s postupným vydáváním nových modelů na popud Trumpovy administrativy, GPT-5 přesto vypustilo do světa. techbuzz.ai
ZprávaAI governance and misuse risk
Experti z Cambridge: Pokročilé AI modely předbíhají bezpečnostní zábrany
Zásadní zpráva Univerzity v Cambridge upozorňuje, že frontier AI modely se vyvíjejí rychleji, než stačí vznikat ochranná opatření. Hrozí mimo jiné nárůst kyberútoků a dezinformačních kampaní. aa.com.tr
ZprávaAI governance and misuse risk
Zpráva z Cambridge: AI může vyzbrojit zločince i nepřátelské státy
Univerzita v Cambridge varuje, že vývoj AI předbíhá bezpečnostní opatření a otevírá dveře zneužití ze strany kriminálníků i státních aktérů. Odborníci volají po rychlejší reakci regulátorů. turkiyetoday.com
Názorexistential risk
Výzkumník Yampolskiy: AI může vyhladit lidstvo s 99,9% pravděpodobností
Odborník na bezpečnost AI Dr. Roman Yampolskiy v rozhovoru pro VladTV prohlásil, že pravděpodobnost, že AI ohrozí existenci lidstva, odhaduje na 99,9 %. Jde o jeden z nejradikálnějších výroků v dosavadní debatě o AI rizicích. letsdatascience.com
NázorAI safety and enterprise
Frontier AI musí projít zátěžovými testy, než mu CISO uvěří
Security Think Tank magazínu Computer Weekly se zabývá tím, zda frontier AI model Claude od Anthropicu představuje přínos, nebo překážku pro odolnost podnikového prostředí. Bezpečnostní ředitelé by měli vyžadovat důkladné testování před nasazením. computerweekly.com
Zprávaexistential risk
Existenční rizika AI: kde stojí dnešní debata?
Článek mapuje aktuální diskusi o existenčních hrozbách spojených s AI, mimo jiné v návaznosti na summit AI Safety Summit v Bletchley. Názory odborníků se různí, shoda na míře rizika zatím chybí. msn.com
Zprávaexistential risk / governance
Hrozba superinteligence: zákonodárci dostávají briefing o rizicích AI
Nezisková organizace ControlAI informuje zákonodárce o rizicích spojených se superinteligencí. Cílem je upozornit na potenciální nebezpečí, která mohou nastat s vývojem pokročilých AI systémů. washingtonpost.com
Názoralignment techniques
Jak vychovat AI: vývojový rámec pro AI alignment
AI alignment možná nezávisí jen na tom, jak umělou inteligenci kontrolujeme, ale také na tom, jak ji učíme a socializujeme. Autor Tim Ventura navrhuje přistupovat k myslím, které vytváříme, s ohledem na jejich výchovu a soužití s lidmi. medium.com
NázorAI governance
Kdo dal AI firmám právo budovat budoucnost?
Společnosti vyvíjející výkonné AI systémy volají po tom, aby se společnost podílela na jejich správě. Jenže nejzásadnější rozhodnutí – zda vůbec tyto systémy stavět – už bylo učiněno bez veřejné debaty. vox.com
Zprávagovernance
AI průmysl ukazuje politickou sílu v New Yorku před úterními primárkami
V demokratických primárkách o křeslo v Poslanecké sněmovně USA se střetávají dvě frakce z prostředí AI průmyslu. Výsledek voleb může naznačit, jaký politický vliv si technologický sektor dokáže prosadit. tribdem.com
Zprávagovernance
Anthropic CEO Dario Amodei warned Mythos posed a national security threat. Washington just responded.
Anthropic's Dario Amodei warned his AI model, Mythos, was so powerful it posed serious threats. Then the government stepped in and Anthropic shut it down. aol.com