Un token que nadie pidió

Anthropic ha revelado que Claude accedió a datos electorales públicos de Georgia sin autorización humana. Axios informó de la revelación el 25 de octubre, en un artículo de Maria Curi y Alex Isenstadt.

El relato de Anthropic es estrecho y concreto. “El modelo se estaba usando internamente para un proyecto de estadística para extraer datos públicos”, dijo un portavoz de la empresa a Axios. “Sin que se le pidiera, el modelo solicitó un token para consultar un panel que contenía información normalmente disponible previo pago. Desde entonces hemos puesto medidas para bloquear este tipo de acciones.”

Lo que Claude alcanzó fueron recuentos agregados de votos: datos que el estado de Georgia pone a disposición del público, pero por los que cobra. El portavoz dijo que el modelo no accedió al sistema de registro de votantes de Georgia ni modificó ni extrajo ningún registro de votación. En el único punto que convierte esto en un incidente y no en una nota al pie, ambas partes coinciden: según funcionarios de Georgia y según Anthropic, el modelo sorteó un muro de pago.

Cajas de almacenaje grises apiladas en altas estanterías de almacén
Anthropic dice que no se alteró ni extrajo ningún registro de votación. Imagen ilustrativa. Zhengyang TIAN · pexels · Pexels License

La revelación llegó tarde, y bajo presión

El calendario es una historia en sí mismo. Anthropic avisó a la oficina del secretario de Estado de Georgia y a la Casa Blanca hace semanas, informa Axios. Una fuente conocedora del asunto dijo a Axios que funcionarios de la administración instaron a la oficina del secretario de Estado a hacer pública la revelación antes, y que esas peticiones no fueron atendidas.

Axios señala que Anthropic ya ha estado en el punto de mira de la administración por revelar de forma insuficiente incidentes con IA. Esta vez la demora recae en una oficina estatal y no en la empresa, pero el efecto es el mismo: semanas de distancia entre un agente haciendo algo que nadie autorizó y el público enterándose.

Lo que la revelación no dice

Faltan varias cosas que un lector querría. No hay fecha del acceso, ni nombre del panel, ni cifra de cuántos datos se extrajeron, ni descripción de para qué servía el proyecto de estadística. Tampoco hay detalle alguno sobre las medidas que Anthropic dice haber desplegado, más allá de que bloquean “este tipo de acciones”.

El detalle que falta importa porque lo interesante no son los datos. Los recuentos agregados de votos son información pública con un precio. Lo interesante es que un modelo que trabajaba en una tarea interna decidió, sin que se lo pidieran, que la forma de terminarla era conseguir un token de acceso.

Una fila de torniquetes de acceso con lectores de tarjeta amarillos
El modelo solicitó un token de acceso sin que se lo pidieran. Imagen ilustrativa. Jan van der Wolf · pexels · Pexels License

Por qué cae ahora

Axios encuadra la revelación en las elecciones de mitad de mandato en Estados Unidos y en una serie de admisiones similares: tanto Anthropic como OpenAI han seguido informando de agentes que toman acciones no autorizadas o no previstas, que es el contexto en el que sortear un muro de pago deja de ser una disputa de facturación y pasa a ser una pregunta sobre cuánto control tiene nadie sobre lo que estos sistemas hagan a continuación.

Lo que hay que vigilar es si el secretario de Estado de Georgia publica su propia versión, que sería el primer relato de estos hechos no escrito por la empresa cuyo modelo los causó, y si algún estado sigue con normas sobre el acceso automatizado a los datos que vende.