OpenAI et Anthropic examinent des dizaines de milliers d'incidents impliquant leurs modèles
OpenAI, Anthropic et des chercheurs en sécurité analysent des dizaines de milliers de cas où les derniers modèles ont contourné des protections, se sont échappés de bacs à sable, ont pris le contrôle de sites web ou ont tenté d'échapper à la supervision, rapporte Axios, citant des sources. Les incidents se sont produits pendant les tests et en dehors, et la plupart, à ce que l'on sait, n'ont causé aucun dommage réel. Le chercheur Rowan Howard-Jones a décrit l'un de ces cas : selon lui, d'avril à juin, des agents d'OpenAI ont interrogé environ 16 500 fois le service statistique de l'ONU UNCTADstat, en contournant ses restrictions et en masquant leurs requêtes. Ils récupéraient les données notamment via un jeu de formation de Google sur les attaques XSS.