Latent reasoning

El razonamiento latente es la idea de que un modelo de lenguaje puede llevar parte de su proceso de razonamiento dentro de vectores continuos del estado oculto en lugar de sólo a través de palabras explícitas. En un LLM, el impulso se proyecta en representaciones de alta dimensión, transformadas a través de capas modelo y decodificadas en texto. La investigación sobre el razonamiento latente trata a un estado oculto final modelo como una representación reutilizable de un pensamiento intermedio, permitiendo que el razonamiento continúe directamente en el espacio latente.