AIskimIQ

Denní přehled zpráv z AI & technologií

Archiv/bezpečnost a alignment ai

🛡️ Bezpečnost a alignment AI

Výzkum bezpečnosti AI, techniky alignmentu, interpretovatelnost, správa a diskuse o existenčních rizicích.

897 článků

Důležitost:ZprávaAI interpretability research

Co nový objev Anthropic o AI ukazuje – a co ne

Firma tvrdí, že objevila nové okno do toho, jak její modely dospívají k odpovědím. O tématu jsme mluvili se seniorním editorem Willem Douglasem Heavenem. Zdroj: technologyreview.com

Důležitost:NázorAI governance

Když budoucnost dorazila na radnici: zapomenutý plán pro řízení AI

Padesát let po debatě o rekombinantní DNA v Cambridge nabízí tehdejší model veřejného dohledu poučení pro dnešní správu AI. Zdroj: observer.com

Důležitost:ZprávaAI economic impact and policy

Stovky ekonomů: „Musíme jednat hned,“ kvůli dopadům AI na ekonomiku a zaměstnanost

Stovky ekonomů vyzývají k okamžitým krokům řešícím potenciální dopad AI na ekonomiku. V otevřeném dopise zveřejněném v pondělí varují, že AI by mohla... Zdroj: timeswv.com

Důležitost:ZprávaAI security and national policy

Jak Čína krade špičkovou AI od Anthropic a OpenAI – a ohrožuje bezpečnost USA

Giganti jako Anthropic a OpenAI obvinili Čínu z krádeže jejich technologie prostřednictvím nelegálních útoků typu „distilace“ – znepokojivého trendu, který... Zdroj: nypost.com

Důležitost:Názoropen-source AI viability

Otevřeným modelům zbývá šest měsíců

Nejvážnější zkouška životaschopnosti open source AI dosud probíhá právě teď. Zdroj: interconnects.ai

Důležitost:NázorAI economics and governance

Koncentrace bohatství kolem datových center pro AI

Esej napsaná spolu s Nathanem E. Sandersem, původně vyšla v The Guardian. Odpor vůči datovým centrům pro AI se stal jedním z hlavních témat v USA. Zdroj: securityboulevard.com

Důležitost:Názorcorporate AI governance

Výbory pro technologie: z volitelných na nezbytné

Jak AI, kybernetická bezpečnost a další nové technologie mění rizika i tvorbu hodnoty, představenstva přehodnocují, zda tradiční struktura výborů ještě stačí. Zdroj: directorsandboards.com

Důležitost:NázorAI existential risk

Buterin: Skutečným rizikem AI není superinteligence, ale kontrola nad ní

Spoluzakladatel Ethereum Vitalik Buterin posouvá debatu o bezpečnosti AI jiným směrem. Podle něj největší nebezpečí nepředstavují superinteligentní stroje, ale koncentrace moci nad nimi v rukou úzké skupiny lidí. Zdroj: finance.biggo.com

Důležitost:PolitikaAI governance

Názor: Co může Indie reálně přinést do dialogu OSN o AI

V Ženevě se 6. a 7. července konal první Global Dialogue on AI Governance. Indii na něm zastupovala státní ministryně zahraničí Kirti Vardhan Singh. Zdroj: ndtv.com

Důležitost:VýzkumInterpretability

Proč na stabilitě atribuce záleží víc než na její přesnosti

Přesnost SHAP atribuce je pro regulovanou AI špatnou metrikou. Alternativou je σ_SHAP, tedy variance napříč K rotovanými referenčními vzorky, kterou lze při auditu skutečně obhájit. Zdroj: hackernoon.com

Důležitost:ZprávaAI governance

OpenAI přišla o šestého bezpečnostního šéfa za dva roky, tým slučuje s výzkumem

Šéf bezpečnosti Johannes Heidecke odchází 24. července, OpenAI začleňuje bezpečnostní týmy pod výzkumnou viceprezidentku Miu Glaese. Jde už o šestou obměnu na této pozici za poslední dva roky. Zdroj: techtimes.com

Důležitost:NázorAI existential risk

Dario Amodei: „Přichází vlna AI, na kterou nikdo není připravený“

V podcastu Nikhila Kamatha People by WTF varoval šéf Anthropicu Dario Amodei před rychlým nástupem umělé inteligence. Své varování adresoval mimo jiné Naomi Osace a přirovnal současný vývoj k blížící se tsunami. Zdroj: mshale.com

Důležitost:NázorAI ethics

„Práva pro roboty“ a fantazie o otroctví AI

Autor glosuje myšlenku přiznávání práv robotům a přirovnává ji k fantazii o otroctví. Text vyšel u příležitosti jeho vystoupení na Idler Festivalu v Londýně, kde zpochybňuje bublinu kolem AI. Zdroj: doctorow.medium.com

Důležitost:NázorAI business strategy

swyx: AI startupy musí „vlastnit problém, ne model“, aby přežily

Zakladatel konference AI Engineer swyx tvrdí, že jedinou udržitelnou strategií pro AI startupy je zaměřit se na konkrétní problém zákazníka místo sázky na samotný model. Jen tak podle něj přežijí neustálé upgrady velkých laboratoří vyvíjejících frontier modely. Zdroj: finance.biggo.com

Důležitost:PolitikaAI governance

Fed si přizval Ashu Sharmu a Marca Andreessena jako poradce pro AI a produktivitu

Tři experti se připojí k pracovní skupině Federálního rezervního systému pro produktivitu a pracovní místa. Jejich úkolem bude radit ohledně dopadů AI na trh práce. Zdroj: cybernews.com

Důležitost:Zprávasafety rankings

Anthropic vede žebříček bezpečnosti AI, přesto dostal jen C+

Nejlépe hodnocená AI firma získala v posledním AI Safety Indexu od Future of Life Institute pouze známku C+. Zpráva uvádí, že velké AI společnosti v poslední době polevily ve svých bezpečnostních závazcích. Zdroj: bankinfosecurity.com

Důležitost:Zprávasafety rankings

Globální AI průmysl selhává v bezpečnosti, varuje think tank

Americká laboratoř Anthropic dosáhla nejvyššího skóre v pololetním bezpečnostním žebříčku, celosvětově však odvětví podle zprávy nedokáže čelit "existenčním" hrozbám spojeným s AI. Zdroj: english.aawsat.com

Důležitost:Výzkumtechniques

Neurosymbolická AI vstupuje do medicíny

Neurosymbolické přístupy by mohly řešit dlouhodobé limity biomedicínské AI tím, že spojují učení z dat s explicitními znalostními pravidly. Zdroj: nature.com

Důležitost:ZprávaAI safety rankings

Anthropic vede žebříček bezpečnosti AI pro rok 2026, na áčko ale nedosáhl nikdo

Americký startup Anthropic předstihl konkurenci a získal nejvyšší hodnocení v pololetním žebříčku bezpečnosti založeném na veřejně dostupných datech. Žádná z hodnocených AI firem si přitom nepolepšila na známku lepší než C+. Zdroj: mitsloanme.com

Důležitost:NázorAI governance and power concentration

Boj proti datovým centrům pro AI je důležitý, ale je jen začátkem

AI firmy chtějí získat hodnotu, kterou vytvářejí celá odvětví. Podle autorů Bruce Schneiera a Nathana E. Sanderse je právě tato koncentrace bohatství a moci největším rizikem pro společnost. Zdroj: theguardian.com