Hacker News Front Page · lasu ·
which AI coding agent changes the least code?
Parsimony compara agentes de programación con IA según las unidades de código que añaden netamente en tareas de SWE-bench Verified: cuenta elementos sintácticos, resta los eliminados y excluye líneas, pruebas, documentación y archivos generados. El método permite comparar el tamaño de los cambios, pero no mide su legibilidad ni su diseño; además, los modelos que escriben más código tienden también a resolver más tareas.
An open-source benchmark of how much code AI models add.