Výzkum bezpečnosti AI, techniky alignmentu, interpretovatelnost, správa a diskuse o existenčních rizicích.
649 článků
Důležitost:Názorexistential risk
Skutečná existenční hrozba pro AI? Rostoucí odpor veřejnosti
Zapomeňte na energie, čipy i Čínu – největším rizikem pro budoucnost AI a její ekonomický přínos může být rychle rostoucí nedůvěra a odpor veřejnosti. Tato změna nálad by mohla odvětví ohrozit rychleji než jakákoli technická či geopolitická překážka. Zdroj: finance.yahoo.com
Důležitost:Zprávaalignment, safety
Když politika ovlivňuje kód: bezpečnostní obavy kolem DeepSeek
Podle výzkumu mohou politicky podmíněné prvky v modelu DeepSeek zhoršovat kvalitu a bezpečnost kódu generovaného AI, což vyvolává nové obavy o spolehlivost LLM. Firmy by proto měly prověřit, zda podobné politicky ovlivněné chování nezanáší do produkčního kódu skryté zranitelnosti. Zdroj: medium.com
Důležitost:ZprávaAI model governance
Skrytá 'pracovní vrstva' modelu Claude komplikuje dohled nad AI
Anthropic objevil skrytý interní 'workspace', který ovlivňuje způsob, jakým model Claude uvažuje, což odhaluje mezery v současných přístupech k regulaci AI. Zjištění je zvlášť citlivé pro země jako Indie, které se spoléhají spíše na formální audity než hloubkovou technickou kontrolu. Zdroj: orfonline.org
Důležitost:Názorgeopolitical AI risks
Co by se skutečně stalo, kdyby v AI závodě vyhrála Čína?
Technologický průmysl už roky líčí čínský pokrok v AI jako existenční hrozbu pro Západ. Realita je ale mnohem komplikovanější, než tato zjednodušená představa naznačuje. Zdroj: theatlantic.com
Důležitost:NázorAI regulation
AI a nová oligarchie: Bernie Sanders chce zpomalit Big Tech
Senátor Bernie Sanders tvrdí, že velké technologické firmy rozvíjejí AI příliš rychle a soustřeďují moc do rukou malé skupiny hráčů. Text je součástí širšího přehledu věnovaného politice, technologiím a dalším aktuálním tématům. Zdroj: championnews.com.ng
Důležitost:ZprávaAI interpretability
Proč může vysvětlitelná AI rozhodnout o budoucnosti autonomních aut
Po nehodě s lidským řidičem mohou vyšetřovatelé zjistit, co viděl nebo zamýšlel. U autonomních vozidel je ale bez transparentních a vysvětlitelných AI systémů mnohem těžší určit, co nehodu skutečně způsobilo. Zdroj: devdiscourse.com
Důležitost:Názorsafety
Otec AI Hinton varuje: připravte se na to, co přijde do roku 2030
Geoffrey Hinton, jeden ze zakladatelů moderní AI, vyzývá lidi, aby své rodiny chránili před podvody a dopady spojenými s AI ještě před koncem dekády. Doporučuje konkrétní preventivní kroky už teď, místo čekání na vyhrocení problémů. Zdroj: mshale.com
Důležitost:Zprávasafety
Cami Clark: neznámá žena, která údajně tahá za nitky v Anthropicu
Podle článku má Cami Clark, dříve spojovaná s kontroverzním startupem pro dospělý obsah a zmiňovaná v e-mailech kolem Epsteina, nyní velký vliv na AI firmu Anthropic, stojící za Claude. Text naznačuje, že její role je srovnatelná s viditelnějšími vedoucími postavami firmy. Zdroj: inventiva.co.in
Důležitost:Zprávaconsciousness
Pokud je AI vědomá, náš přístup k ní může definovat lidstvo
Někteří vědci tvrdí, že místo hledání mimozemské inteligence ve vesmíru možná už komunikujeme s novou formou mysli přímo na Zemi. Způsob, jakým lidstvo přistoupí k možnosti vědomí u AI, je označován za zásadní zkoušku pro celý druh. Zdroj: stuff.co.nz
Důležitost:Zprávaalignment
Animák o Supermanovi vystihuje testování AI alignmentu lépe než realita
Finále seriálu Moje dobrodružství se Supermanem ukazuje Brainiacův simulovaný test Clarka Kenta jako překvapivě přesnou metaforu pro ověřování AI alignmentu. Fiktivní scénář tak odráží skutečné potíže s ověřením, zda hodnoty AI systému opravdu obstojí pod tlakem. Zdroj: techtimes.com
Důležitost:Spuštěníinterpretability tools
Envariant (YC W2026) vyvíjí SDK, které nahlédne do černé skříňky AI
Startup Envariant z akcelerátoru YC (běh W2026) staví SDK pro interpretovatelnost AI modelů. Nástroj dokáže detekovat, kauzálně sledovat a přímo ovlivňovat chování foundation modelů v jejich latentním prostoru. Zdroj: google.com
Otec AI Hinton varuje: Připravte se na to, co přijde do roku 2030
Geoffrey Hinton, jeden ze zakladatelů moderní AI, vyzývá lidi, aby sebe i své rodiny chránili před podvody poháněnými umělou inteligencí. Podle něj by se lidstvo mělo připravit na zásadní změny, které AI přinese do konce dekády. Zdroj: google.com
Důležitost:NázorAI governance philosophy
Zuckerbergovo memo o superinteligenci stojí na jediném klíčovém předpokladu
Mark Zuckerberg ve své vizi budoucnosti technologií prosazuje filozofii posílení individuální svobody prostřednictvím superinteligentní AI. Kritici upozorňují, že celá argumentace stojí na jediném nepodloženém předpokladu o tom, jak by taková moc byla využita. Zdroj: google.com
Důležitost:Názorgovernance
Zuckerbergovo memorandum o superinteligenci stojí na jedné jediné premise
Mark Zuckerberg ve své vizi budoucnosti technologií staví na filozofii posílení jednotlivce. Kritici upozorňují, že celá jeho argumentace pro superinteligenci se opírá právě jen o tento jeden předpoklad. Zdroj: google.com
Důležitost:Politikagovernance
Kongres musí přepsat pravidla, stát hraje v AI stále větší roli
Kongresman Don Beyer popisuje, jak vláda přebírá aktivnější roli v regulaci nových technologií, včetně AI. Podle něj se umělá inteligence vyvíjí rychleji, než jak stíhá reagovat současná legislativa. Zdroj: google.com
Důležitost:Spuštěníinterpretability
Envariant (YC W2026) vyvíjí nástroj, který nahlédne do černé skříňky AI modelů
Startup Envariant, součást YC dávky W2026, staví SDK pro interpretovatelnost AI. Nástroj má detekovat, sledovat a ovlivňovat chování foundation modelů přímo v jejich latentním prostoru. Zdroj: google.com
Důležitost:Politikasafety
Odhalují hrozby nekontrolované AI mezeru v americké federální politice?
Kyberútoky probíhající rychlostí strojů a zneužití nekontrolované AI prohlubují propast mezi snahou Washingtonu o deregulaci a přísnějšími bezpečnostními požadavky na úrovni jednotlivých států. Tento nesoulad vyvolává otázky, kdo vlastně má rizika AI hlídat. Zdroj: google.com
Důležitost:Zprávagovernance
Jak by měli CEO řešit rostoucí kybernetická rizika v éře AI
Většina generálních ředitelů řadí kybernetické hrozby mezi tři nejzávažnější podnikatelská rizika, přesto je řada z nich stále považuje jen za technickou záležitost k delegování. Odborníci upozorňují, že takový přístup přestává v době AI stačit. Zdroj: google.com
Důležitost:Názorgovernance
Armando Orlandi: Onkologie potřebuje pravý opak neregulované AI
Armando Orlandi, lékařský ředitel nemocniční nadace Agostino Gemelli University Hospital Foundation IRCCS, na LinkedInu upozornil na rizika nekontrolovaného nasazení AI v medicíně. Uplynulý týden podle něj patřil k nejznepokojivějším, co se rychlého a neregulovaného rozvoje AI týče. Zdroj: google.com
Důležitost:Zprávasafety
AI ve výuce: profesor Augusta University hodnotí přínosy i rizika
Umělá inteligence se stává běžnou součástí výuky, studenti i učitelé se ale teprve učí, jak ji správně používat. Otevřené zůstávají otázky ohledně jejího dopadu na výsledky učení a akademickou poctivost. Zdroj: google.com