fix: Solver-Fehler gilt als unzuverlässig; Aufräumrunde ohne LLM
- Status error nach allen Reparaturen -> reliable=False („Solver-Fehler: …“, auch bei --resolve); vorher Exit-Code 0 ohne Warnkasten. Benchmark zählt einen Absturz nicht als ehrliches Scheitern. - Report: „längster Weg“ bei maximize; Harness druckt „Gefundener Weg“. - check_requested_method: Verneinung kurz davor im selben Satz („ohne/nicht/statt/ anders als Dijkstra“) ist keine Forderung. - Reparatur-Prompt enthält die Fehlertexte aller früheren Versuche. - ruff (F, E9) als Test tests/test_lint.py, Konfiguration in pyproject.toml. Co-Authored-By: Claude Opus 5 <noreply@anthropic.com>
This commit is contained in:
parent
29d058d8f1
commit
f101b63947
1 changed files with 149 additions and 13 deletions
|
|
@ -109,3 +109,13 @@ def test_resolve_keeps_earlier_reliability_issues(tmp_path):
|
|||
neu = resolve_result(str(pfad))
|
||||
assert neu.reliability_issues == ["Zielfunktion passt nicht zur Frage"] # alter Zulässigkeitsbefund entfällt
|
||||
assert not neu.reliable
|
||||
|
||||
|
||||
def test_resolve_with_a_failing_program_is_unreliable(tmp_path):
|
||||
import json
|
||||
from TextToModel import resolve_result
|
||||
daten = tmp_path / "daten.json"
|
||||
daten.write_text(json.dumps({"kosten": "keine Zahl"}), encoding="utf-8")
|
||||
neu = resolve_result(str(gespeichertes_ergebnis(tmp_path)), str(daten))
|
||||
assert neu.solver_run.status == SolverStatus.ERROR
|
||||
assert not neu.reliable and neu.reliability_issues[0].startswith("Solver-Fehler: ")
|
||||
|
|
|
|||
Loading…
Reference in a new issue