El creador de Claude Code propone medir la IA por horas de ingeniería, no por tokens

Boris Cherny, creador de Claude Code, puso sobre la mesa una de las preguntas más operativas de la IA empresarial: cómo medir el retorno del gasto en IA más allá del consumo de tokens . En una serie de posteos en X publicada el jueves, presentó un marco de 4 pasos para la adopción de IA en empresas y reservó el tercer punto para la medición una vez que los equipos ya incorporaron estas herramientas a sus workflows.

"Una vez que tus equipos ya están alineados, ¿cómo lo seguís? El uso vale la pena monitorearlo, por ejemplo con un dashboard, pero mide actividad, no retorno".

Esa fue la premisa que Cherny compartió en X. Su propuesta es más cercana a una lógica de costo evitado que a una métrica de consumo: en lugar de mirar solo el burn de tokens, la pregunta útil es si la empresa habría destinado esfuerzo de ingeniería a esa tarea. Si la respuesta es sí, el retorno se calcula sobre cuántas horas de ingeniería manual se evitaron y cuánto habrían costado .

Cherny empujó la idea un paso más. En el siguiente posteo, sostuvo que el payoff más grande llega cuando la corrección y el mantenimiento pasan a segundo plano y los equipos pueden concentrarse en construir. En ese momento, escribió, las compañías empiezan a hacer cosas que antes ni siquiera estaban dentro de su rango operativo. En una charla reciente con Scale AI, también había planteado que el retorno de la IA puede aparecer en otras formas, como ingenieros generando código más rápido.

El planteo llega en un momento en que el impulso de "tokenmaxxing", que dominó buena parte de la conversación de IA en la primera mitad del año, empezó a perder fuerza. Ahora el foco está en obtener más valor por cada dólar invertido. Ejecutivos de Coinbase y Vercel compartieron estrategias públicas para recortar costos sin limitar el uso de IA por parte de sus empleados, incluso apoyándose en modelos chinos más baratos.

La presión por justificar ese gasto también ya escaló a la primera línea corporativa. Jamie Dimon, CEO de JPMorgan, dijo a CNBC el miércoles que los costos de IA están "subiendo rápidamente" y que las empresas van a gestionarlos con la misma racionalidad que cualquier otro recurso. Sam Altman, CEO de OpenAI, contó la semana pasada que en la Allen & Co. Sun Valley Conference el retorno sobre la inversión en IA fue uno de los temas centrales: "Todos están preguntando qué podemos hacer para ayudar a reducir el gasto o aumentar el valor". La discusión ya no pasa solo por cuánto se usa la IA, sino por qué trabajo reemplaza y qué capacidad nueva habilita dentro de una empresa.