A/i

Pajíkovi AI novinky

Denní přehled ze světa umělé inteligence

Tag Claude · 14 článků

Výzkumníci odhalili zranitelnost v API proprietárních modelů AI

Výzkumníci objasnili, jak lze z šifrovaných bloků uvažování (reasoning traces) vracených API společností Anthropic, OpenAI a Google extrahovat skryté myšlenkové pochody silnějších modelů. Zranitelnost spočívala v tom, že modely stejné rodiny sdílely stejný šifrovací klíč, což umožňovalo jailbreak slabších variant a přečtení nezašifrovaného uvažování.

Zdroj: Simon Willison 11. srpna

LLM mění smysl open-source softwaru. Vývojáři ho nyní mohou pochopit bez čtení kódu

Simon Willison argumentuje, že umělá inteligence zásadně mění hodnotu open-source softwaru. Zatímco tradičně šlo o svobodě měnit kód, kterou jen málo lidí skutečně využívalo, LLM jako Claude nyní umožňují vývojářům se na cizí kód zeptat, nechat si ho vysvětlit a zkompilovat bez nutnosti se zdlouhavě učit jeho vnitřní fungování. Willison popisuje, jak si teď několikrát denně povolá Claude, aby mu naklonil projekt z GitHubu a vysvětlil jeho mechanismy.

Zdroj: Simon Willison 3. srpna