Ollama «olvida» lo que le has dicho: ampliar el contexto

Con textos largos o conversaciones extensas, el modelo ignora la primera parte.

Por · revisada en · Nivel: Intermedio · Cómo verificamos

Por qué pasa (diagnóstico)

Solución paso a paso

  1. Para todo el servidor: variable OLLAMA_CONTEXT_LENGTH=8192 (en el servicio, como en la ficha de acceso en red).
  2. Dentro de ollama run: /set parameter num_ctx 8192.
  3. Por API: "options": {"num_ctx": 8192}.
  4. Comprueba con ollama ps que el modelo sigue cabiendo en la GPU.

Requisitos

Compatibilidad

Verificación

Basado en la documentación oficial citada; aún no probado en este laboratorio.

Fuentes

Guías relacionadas

Más guías de IA local.

Abrir en Friki Labs →