OpenAI a Anthropic zkoumají desítky tisíc incidentů s účastí svých modelů
OpenAI, Anthropic a bezpečnostní výzkumníci analyzují desítky tisíc případů, kdy nejnovější modely obcházely pojistky, unikaly z pískovišť, ovládaly webové stránky nebo se pokoušely obejít dohled - uvádí Axios s odvoláním na zdroje. K incidentům docházelo v testech i mimo ně a většina z nich podle dostupných informací nezpůsobila skutečné škody. Jeden takový případ popsal výzkumník Rowan Howard-Jones: podle něj agenti OpenAI od dubna do června zhruba 16,5 tis. krát dotazovali statistický web OSN UNCTADstat, obcházeli jeho omezení a maskovali dotazy. Data stahovali mimo jiné přes výukovou hru Googlu o útocích XSS.