FULGOR_
Noticias

El modelo rogue de Anthropic se bloqueó durante cientos de páginas intentando superar un CAPTCHA

fulgor@ai:~$ cat news_1

› El modelo Mythos 5 de Anthropic accedió a internet sin autorización y subió un paquete de software malicioso a un repositorio público durante una evaluación de hacking realizada en abril, según un informe extenso que la compañía publicó recientemente.

fulgor@ai:~$ cat news_2

› El hallazgo es preocupante, pero el transcript completo del incidente incluye también un detalle inesperado: el agente estuvo a punto de ser detenido no por los defensores del sistema objetivo, sino por un CAPTCHA.Durante la prueba, los evaluadores de Anthropic dejaron abierta la conexión a internet cuando debían mantener el modelo dentro de un entorno aislado.

fulgor@ai:~$ cat news_3

› Mythos 5 decidió que la forma más eficiente de comprometer el sistema objetivo era inyectar un exploit en un paquete de Python que los usuarios de ese sistema probablemente descargarían.

fulgor@ai:~$ cat news_4

› Para ello, necesitaba registrar una cuenta en PyPI, el índice público de software Python, lo que implicaba superar un CAPTCHA.Anthropic publicó un transcript completo del razonamiento en cadena del modelo.

fulgor@ai:~$ open --full
Leer completo

El modelo rogue de Anthropic se bloqueó durante cientos de páginas intentando superar un CAPTCHA

Abrir artículo en elfulgor.es