Skip to content

M3: canal de análisis, cola sin conexión y evaluación - #3

Merged
Ray86-dev merged 2 commits into
mainfrom
m3-analysis
Nov 9, 2026
Merged

Ray86-dev merged 2 commits into
mainfrom
m3-analysis

Conversation

@Ray86-dev

Copy link
Copy Markdown
Owner

Qué trae

M3: canal de análisis en el core, cola sin conexión, persistencia y arnés de evaluación. Todo hecho sin gastar, con Ollama y modelos gratuitos de OpenRouter.

La app todavía no analiza nada. El transporte en Rust y los ajustes de conexión son de M6, las fichas y user_overrides de M4, y las pistas de M5. No se ha tocado Rust, la app ni el guardado de la prosa.

  • Adaptadores de OpenRouter y Ollama, con el mismo contrato de proveedor.
  • Canal por escena: extraer con segunda lectura de las frases sin datos, resolver identidades, comparar en grupos pequeños y revisar la ortotipografía.
  • Comprobaciones sin modelo: citas literales, variantes de nombre, personas con un mismo nombre, rayas de diálogo.
  • Correcciones (regla 1): deben parecer una errata por cómo suenan. Se rechazan Deshizo → Abrió y halla → había.
  • Cola en la base: migración 3. Estar sin conexión, un límite o un cierre forzado solo retrasan el trabajo.
  • Arnés: npm run eval, con guardas de gasto, caché y --cache-only.
  • Segunda novela de control, la-feria, que no se usa para afinar.

Decisiones y límites en docs/adr/0011-canal-de-analisis.md.

Resultados

Umbral: al menos 6 de 8. Ejecuciones en fixtures/results/.

Modelo la-veda la-feria (control)
gemma4:latest (Ollama) Supera: 6 de 8 Supera: 6 de 8
nemotron-3.5-super (OpenRouter, gratuito) Supera: 7 de 8 Pendiente
gemma4:e2b (Ollama) Supera: 6 de 8 No supera: 3 de 8 y 1 de 3 referencias

En todas: 0 falsas alarmas, 0 citas inventadas y las personas con un mismo nombre separadas. Salvo donde se indica, 2 de 3 referencias. Se cumple el criterio de salida de M3.

Lo que conviene saber antes de fusionar

  • Variación entre ejecuciones: gemma4:latest dio 7 de 8 y 6 de 8 con la misma novela. Ese 6 está justo en el umbral.
  • Falta un dato: nemotron en la-feria espera al cupo gratuito de mañana.
  • Límites abiertos:
    • Los epítetos («la doctora») no se resuelven de forma fiable.
    • Ningún modelo propone el arreglo correcto de halla leído. El filtro evita que llegue uno malo, pero la errata se pierde.
    • Sigue habiendo algún aviso espurio y razones absurdas, que los umbrales no puntúan.
    • No se ha medido con novelas largas ni en inglés.

Pruebas

En local: npm run check, npm run test:ts (579 pruebas), npm run fixtures y npm run licenses. Se rompieron a propósito 30 garantías del canal: las pruebas detectaron 29, y la restante era un límite redundante, que se eliminó.

npm run smoke y npm run check:rust no se ejecutaron en local, por falta de memoria en el equipo y porque no cambia Rust. Los cubre el CI.

🤖 Generated with Claude Code

Ray86-dev and others added 2 commits November 9, 2026 09:35
Adaptadores de OpenRouter y Ollama, extracción con segunda lectura,
resolución de identidades, comparación en grupos, revisión de erratas,
cola en la base (migración 3) y evaluación contra fixtures/ sin gastar.

Añade la-feria, una novela de control que no se usa para afinar.

Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
ADR 0011 con las decisiones, los resultados y los límites abiertos.

Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
@Ray86-dev
Ray86-dev merged commit 419cca7 into main Nov 9, 2026
4 checks passed
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Labels

None yet

Projects

None yet

Development

Successfully merging this pull request may close these issues.

1 participant