Hacker News Front Page · emrahsamdan ·
edgedelta/project-arena: A vendor-neutral Kubernetes incident benchmark for testing AI investigation tools across detection, diagnosis, and mitigation. Deploy faults, capture investigations, and compare results with a configurable AI judge.
Project Arena ofrece un benchmark neutral respecto a proveedores para evaluar herramientas de investigación de incidentes en Kubernetes, desde la detección y el análisis de causa raíz hasta las propuestas de mitigación. En 21 escenarios, Edge Delta detectó 18 incidentes y Grafana 12; Claude, usando las interfaces de observabilidad de ambas plataformas, obtuvo puntuaciones de análisis de causa raíz de 85,7 % y 90,5 %, respectivamente. El proyecto permite desplegar fallos, guardar investigaciones y puntuarlas con un juez configurable, y advierte que las comparaciones dependen de la cobertura de escenarios, las pruebas y la evidencia disponible.
A vendor-neutral Kubernetes incident benchmark for testing AI investigation tools across detection, diagnosis, and mitigation. Deploy faults, capture investigations, and compare results with a conf...