Alineación semántica de gráficos de conocimiento multilingües mediante proyecciones vectoriales contextualizadas

Resumen: El artículo presenta nuestro trabajo sobre un sistema de alineación de ontologías multilingües que utiliza coincidencias de similitud de cosenos basadas en incrustaciones. Las entidades ontológicas se enriquecen contextualmente mediante la creación de descripciones utilizando técnicas novedosas.

Leer más →

Comentarios desactivados en Alineación semántica de gráficos de conocimiento multilingües mediante proyecciones vectoriales contextualizadas

Colapso del contexto: aprendizaje en contexto y colapso del modelo

Resumen: Esta tesis investiga dos fenómenos clave en los modelos de lenguaje grande (LLM): el aprendizaje en contexto (ICL) y el colapso del modelo. Estudiamos ICL en un transformador lineal con pesos vinculados entrenados en tareas de regresión lineal y mostramos que minimizar la pérdida en contexto conduce a una transición de fase en los parámetros aprendidos.

Leer más →

Comentarios desactivados en Colapso del contexto: aprendizaje en contexto y colapso del modelo

Fin del contenido

No hay más páginas por cargar