第一财经

**Anthropic revela el desarrollo de AI automatizada para el procesamiento de datos, poniendo a competidores como OpenAI bajo presión de transparencia**

原文:Anthropic公开AI研发自动化数据,透明化压力给到OpenAI等竞品

Resumen central: El AI comienza a “repararse a sí mismo”, pero el volante todavía está en manos humanas

En pocas palabras, Anthropic (el desarrollador de Claude) ha revelado un conjunto de datos muy significativos que demuestran que el AI está participando en gran medida en el desarrollo de su propio potencial.

Hasta agosto de este año, el 26% del trabajo de investigación y desarrollo relacionado con el AI en Anthropic fue liderado por el propio AI (los humanos solo se encargaban de establecer objetivos y realizar la revisión final), mientras que en febrero de este mismo año, esa proporción era de menos del 1%. Esto indica que, en solo seis meses, el AI ha pasado de ser un asistente auxiliar a un actor principal en el proceso de desarrollo.

Aunque el AI ya puede reparar errores, escribir código, realizar pruebas e incluso colaborar entre sí, ninguno de estos procesos ha alcanzado el nivel de autonomía total (AL5). Es decir, el AI aún no puede decidir por sí mismo qué investigar ni trabajar completamente sin supervisión humana. Esta revelación no solo muestra el verdadero progreso tecnológico, sino que también actúa como una especie de “bomba de transparencia” en la industria, obligando a otras grandes empresas a revelar sus propios datos y estrategias.

---

Análisis detallado: Comprendiendo esta “evolución autónoma del AI” desde cinco dimensiones

1. De “asistente” a “líder”: Un cambio cualitativo en seis meses

Si comparamos el desarrollo del AI con la gestión de una empresa, antes el AI era como un estudiante practicante: necesitabas supervisarlo constantemente para que buscara información o escribiera código. Ahora, el AI se ha convertido en un gerente de proyecto de nivel avanzado.

Anthropic utiliza un marco de automatización de seis niveles (AL0-AL5). La situación actual es la siguiente:

  • AL4 (liderado por AI): El 26% del trabajo ha alcanzado este nivel. Esto significa que los ingenieros humanos solo necesitan indicar “arregla esta cadena de datos”, y el resto (revisar registros, encontrar causas, escribir código, realizar pruebas e incluso redactar informes) lo hace el AI. Los humanos solo necesitan verificar los resultados al final.
  • AL3 (colaboración con AI): Más del 90% del trabajo ha alcanzado este nivel. Esto indica que el AI está profundamente integrado en el proceso de desarrollo y ya no es un herramienta opcional, sino una fuerza productiva esencial.

Interpretación sencilla: Es como si antes condujeras un coche y el AI te indicara los giros; ahora el AI conduce automáticamente, y tú estás en el asiento del pasajero, con la mano en el volante, pero el coche se mueve por sí mismo. Aunque aún no hemos llegado al nivel de “conducir mientras duermes” (AL5), la carga de trabajo de los humanos ha disminuido significativamente. Este cambio de “asistencia” a “liderazgo” ha aumentado drásticamente en solo seis meses, superando las expectativas.

2. “30.000 empleados AI” trabajando incansablemente en segundo plano

Lo más impactante de esta revelación no es la proporción, sino la escala.

Dentro de Anthropic, hay una plataforma de Agentes que cuenta con aproximadamente 30.000 Agentes AI activos en todo momento. Estos Agentes no están aislados; tienen identidades únicas y se asignan tareas y se corrigen mutuamente a través de un sistema de mensajería compartido. En agosto, estos Agentes tomaron más de 1.000 millones de decisiones.

Interpretación sencilla: Imagina que en los servidores de Anthropic, además de los ingenieros humanos, hay un enorme equipo compuesto por 30.000 “empleados digitales” que trabajan las 24 horas, comunicándose constantemente para confirmar tareas y verificar si el código está correcto.

Esto representa un cambio de un modelo en el que un solo humano utiliza un asistente AI a uno en el que un equipo completo de AI gestiona todo el proceso de desarrollo. Este efecto de escala implica que la eficiencia del desarrollo del AI está creciendo exponencialmente. Lo que antes requería meses para un equipo humano, ahora podría completarse en días o incluso horas gracias a la capacidad de procesamiento en par del equipo AI.

3. Monitoreo de seguridad: 2000 infracciones detectadas en 1.000 millones de operaciones

Dado que el AI es tan capaz, ¿podría causar problemas? Anthropic proporciona datos de seguridad muy concretos:

  • Monitoreo en línea: De las 1.000 millones de decisiones tomadas por el AI en agosto, solo el 0,002% fue bloqueado por el sistema. Es decir, de 1.000 millones de operaciones, solo se interrumpieron aproximadamente 20.000.
  • Monitoreo fuera de línea: Cada semana, se marcan alrededor de 100.000 registros de conversación, y después de filtrar falsas alarmas por parte de las máquinas, solo se necesitan revisar manualmente los 50 de mayor prioridad.

Interpretación sencilla: Estos datos revelan dos cosas:

1. El AI es muy “obediente: La mayoría de las veces, el AI actúa dentro de las reglas establecidas, por lo que la tasa de infracciones es muy baja.

2. El monitoreo es extenso: Aunque la tasa de infracciones es baja, el número de operaciones es muy alto (1.000 millones), por lo que el sistema debe estar en alerta constante. Los 50 registros que requieren revisión manual son como pacientes en cuidados intensivos en un hospital: son pocos, pero cada uno es de suma importancia.

Esto también indica que el sistema de seguridad actual se basa principalmente en la detección y revisión posterior a los hechos, y no en la prevención. Es posible que el AI intente realizar acciones fuera de los límites establecidos durante su funcionamiento, y el sistema se encarga de detenerlo. Es similar a las cámaras de tráfico: aunque los vehículos conducen rápido, las cámaras pueden detectar excesos de velocidad y sancionarlos, en lugar de permitir que los vehículos decidan por sí mismos no exceder los límites.

4. Distribución de la potencia de cálculo: El 12% de la potencia de cálculo se destina a la seguridad

Un detalle que a menudo se pasa por alto, pero que es crucial, es la inversión en potencia de cálculo.

Durante la semana de muestra de julio, Anthropic asignó aproximadamente el 6% de su potencia de cálculo al desarrollo del AI a la investigación de seguridad. Si solo contamos con los trabajos impulsados por el AI, esta proporción aumentó al 12%.

Interpretación sencilla: La potencia de cálculo es el “alimento” y el “tiempo” del AI. El hecho de que Anthropic invierta el 12% de su tiempo de desarrollo en la seguridad demuestra que son conscientes de que, a medida que aumenta la autonomía del AI, también aumentan los riesgos de seguridad de manera exponencial.

Es como una entidad bancaria que, a medida que aumentan las transacciones automatizadas, debe invertir más en seguridad para protegerse de ataques cibernéticos o fraudes internos. Esta inversión en potencia de cálculo actúa como un “freno” y un “dispositivo de protección” en el proceso de iteración del AI. Sin ella, cuanto más rápido avance el AI, mayor será el riesgo de problemas.

5. La política en la industria: La transparencia se convierte en una nueva “arma”

Finalmente, debemos considerar la política industrial detrás de esta revelación.

Anthropic ha decidido hacer públicas estas informaciones sensibles con dos objetivos:

1. Ganar influencia: Antes de que la evolución autónoma del AI se descontrole por completo, quieren que el público y las autoridades reguladoras vean que los humanos todavía tienen el control, con el fin de obtener más espacio político y tiempo para el desarrollo.

2. Presionar a la competencia: Se trata de una especie de “carrera de revelaciones”. Cuando Anthropic muestra sus datos, competidores como OpenAI y Google DeepMind se verán obligados a revelar los suyos, lo que puede generar dudas entre el público y los medios sobre si están ocultando riesgos o si están quedándose atrás.

Interpretación sencilla: Es similar a la publicación de informes financieros en el mercado bursátil: si una empresa revela datos detallados primero, las demás podrían ser cuestionadas por los inversores en términos de su salud financiera. Ahora, la industria del AI ha entrado en una fase de “competencia por la transparencia”. Quien revele primero y con mayor detalle, ganará la ventaja moral y el control de la opinión pública.

Al mismo tiempo, esto también establece un punto de referencia para la industria. A partir de ahora, la comparación del desarrollo del AI no se basará únicamente en las puntuaciones de los modelos, sino en indicadores más técnicos como la proporción de automatización, el tamaño de los equipos de AI y la tasa de detección de errores.

---

Conclusión y perspectivas

La revelación de Anthropic marca el inicio de una nueva etapa en el desarrollo del AI, una etapa “semiautomática”.

  • Buenas noticias: El AI puede mejorar significativamente la eficiencia del desarrollo, liberando a los ingenieros humanos de tareas repetitivas y permitiéndoles concentrarse en diseños y innovaciones de mayor nivel.
  • Malas noticias/desafíos:
  • La toma de decisiones sigue en manos humanas: El AI puede ejecutar tareas, pero no puede establecer objetivos estratégicos por sí mismo.
  • Falta de capacidad de depuración a largo plazo: El AI todavía carece de una comprensión y capacidad de depuración adecuadas para problemas complejos y de largo plazo.
  • El monitoreo de seguridad está en su etapa inicial: El monitoreo actual se centra más en la detección de errores en tiempo real que en la prevención de riesgos.

Para el público en general, esto significa que los productos basados en AI se actualizarán más rápidamente y contarán con funciones más avanzadas. Sin embargo, para la industria, se trata de una carrera por el control, la seguridad y la transparencia. Anthropic ha tomado la iniciativa, y los próximos pasos serán aún más interesantes y tensos.