Resumen:La creación manual de diagramas de arquitectura de sistemas para artículos científicos es un proceso subjetivo y que requiere mucho tiempo, mientras que los modelos generativos existentes carecen del control estructural y la comprensión semántica necesarios para esta tarea. Un obstáculo principal que obstaculiza la investigación y el desarrollo en este campo ha sido la profunda falta de un punto de referencia estandarizado para evaluar cuantitativamente la generación automatizada de diagramas a partir de texto. Para abordar esta brecha crítica, presentamos un punto de referencia novedoso y completo, el primero de su tipo, diseñado para catalizar el progreso en la visualización científica automatizada. Consta de 3.000 artículos de investigación junto con sus correspondientes diagramas de verdad sobre el terreno de alta calidad y está acompañado por una métrica de evaluación de tres niveles que evalúa la precisión semántica, la coherencia del diseño y la calidad visual. Además, para establecer una base sólida en este nuevo punto de referencia, proponemos Paper2SysArch, un sistema de extremo a extremo que aprovecha la colaboración de múltiples agentes para convertir documentos en diagramas estructurados y editables. Para validar su desempeño en casos complejos, el sistema se evaluó en un subconjunto de estos artículos más desafiante y seleccionado manualmente, donde logra una puntuación compuesta de 69,0. La principal contribución de este trabajo es el establecimiento de un punto de referencia fundamental a gran escala para permitir una investigación reproducible y una comparación justa. Mientras tanto, nuestro sistema propuesto sirve como prueba de concepto viable, lo que demuestra un camino prometedor para esta compleja tarea.
Publicado originalmente en export.arxiv.org el 25 de noviembre de 2025.
Ver fuente original
