sec-validate
Phase 3 der ellmos-Security-Familie. Vertrag: sec-scan/references/contract.md (Lebenszyklus 2, Severity 3, Regeln 6). Validator: sec-scan/scripts/secfind.py. Haltung: Widerlegen, nicht Bestätigen. Ein Kandidat gilt erst als validated, wenn der Widerlegungsversuch scheitert.
Eingang und Unabhängigkeit
- Eingang:
findings.json + coverage.json eines Scans, Kandidaten mit status: candidate (oder eine vom Nutzer genannte id-Auswahl).
- Unabhängiger Prüfer (Vertrag 6.7): bevorzugt anderer Anbieter als
provider.name des Scans (Claude <-> Codex). Ohne einen: unabhängiger Subagent der höchsten Modellklasse, ohne die Begründung des Finders vorab zu lesen; im Ergebnis vermerken. Mehrere Anbieter oder Fan-out: erst Kosten schätzen und Nutzer warnen (6.5). Geht Code an einen Fremdanbieter, Egress ansagen (6.6).
- Preflight wie
sec-scan Schritt 2 (Eigentum, Lock-Prüfung, fail-closed).
Je Kandidat
- Neu lesen: den Code an
location selbst lesen, die evidence des Finders nur als Hinweis nutzen.
- Pfad nachzeichnen: Quelle -> Transformationen -> Senke, jede Stufe mit Datei:Zeile. Bricht die Kette, ist das ein Widerlegungsgrund.
- Erreichbarkeit: Welche Route, welcher Aufrufer, welche Authentifizierung führt dorthin? Totcode, Testcode, nur-Admin-Pfade und interne Aufrufer senken Schweregrad oder widerlegen.
- Gegenmaßnahmen suchen: Validierung, Escaping, parametrisierte Abfragen, Framework-Schutz, Konfiguration, vorgeschaltete Prüfungen, Berechtigungen. Auch an anderer Stelle (Middleware, Wrapper).
- Voraussetzungen des Angreifers benennen (anonym, Konto, lokaler Zugriff, bestimmte Konfiguration).
- Nachstellen, wenn gefahrlos möglich: nur in einer lokalen Kopie oder Testumgebung, mit synthetischen Daten und Stub-Diensten; z. B. ein gezielter Unit-Test oder Aufruf der Funktion mit Angriffseingabe. Nie gegen fremde oder produktive Systeme, kein Netzzugriff nach außen, keine echten Geheimnisse, keine Zerstörung. Lässt sich nicht gefahrlos nachstellen: statische Argumentation genügt, Verdict
uncertain ist dann erlaubt.
- Schweregrad kalibrieren nach Vertrag 3 (Erreichbarkeit mal Auswirkung);
confidence neu setzen. Änderung als "Severity alt -> neu: Grund" in description.
- Urteil schreiben:
| Verdict |
Folge in findings.json |
confirmed |
status: validated, validatedBy: {provider, model, verdict: confirmed}; Pfad und etwaiges Repro in description; impact und recommendation ergänzen |
refuted |
status: rejected, rejectedReason mit der konkreten Gegenmaßnahme bzw. dem Bruch in der Kette, validatedBy.verdict: refuted |
uncertain |
status bleibt candidate, validatedBy.verdict: uncertain, in description steht, was fehlt, um zu entscheiden |
validatedBy.provider / .model sind der Prüfer, nicht der Finder. Gleicher Anbieter wie der Finder erzeugt die Validator-Warnung "validated by the same provider"; sie bleibt sichtbar und wird nicht unterdrückt.
Abschluss
python sec-scan/scripts/secfind.py validate findings.json coverage.json, Exitcode zeigen. Zusammenfassung: Zahl je Verdict, Severity-Änderungen, offene uncertain. Weiter mit sec-triage (validierte Funde) und sec-report. Keine Geheimniswerte in description oder Repro-Ausgabe (Vertrag 6.4). Kein Patchen, kein Commit.
Changelog
0.1.0 (2026-10-31)
- Erstfassung: Widerlegungsverfahren, Verdict-Abbildung, Unabhängigkeit.
1---2name: sec-validate3version: 0.1.04type: skill5author: Lukas Geiger + Claude6created: 2026-10-317updated: 2026-10-318description: "Versucht jeden Kandidaten aus findings.json zu WIDERLEGEN: Source-to-Sink-Pfad nachzeichnen, Erreichbarkeit und Gegenmaßnahmen prüfen, Schweregrad kalibrieren, wo gefahrlos möglich lokal nachstellen. Setzt validatedBy (confirmed/refuted/uncertain) und Status validated bzw. rejected mit Grund. Nutzen bei 'Funde prüfen', 'False Positives aussortieren', 'ist das wirklich ausnutzbar', 'unabhängige Zweitprüfung des Scans'. Der Prüfer soll ein anderer Anbieter als der Finder sein. Neue Funde suchen: sec-scan. Fremde Berichte einordnen: sec-triage. Bericht: sec-report."9standalone: true10anthropic_compatible: true11bach_compatible: false12bach_origin: false13category: dev14tags: [security, validation, false-positives, exploitability, review]15language: de16status: draft17visibility: public18dependencies: {'tools': [], 'services': [], 'protocols': [], 'python': []}19provenance: {'origin': 'custom', 'origin_path': null, 'origin_version': null, 'origin_repo': null, 'last_sync_from_origin': null, 'last_sync_to_origin': null, 'local_changes_since_sync': false}20metadata:21 source: https://skillmd.com/skills/ellmos-ai/sec-validate22---2324<img src="banner.png" width="100%" alt="sec-validate banner">2526# sec-validate2728Phase 3 der ellmos-Security-Familie. Vertrag: `sec-scan/references/contract.md` (Lebenszyklus 2, Severity 3, Regeln 6). Validator: `sec-scan/scripts/secfind.py`. Haltung: **Widerlegen, nicht Bestätigen.** Ein Kandidat gilt erst als `validated`, wenn der Widerlegungsversuch scheitert.2930## Eingang und Unabhängigkeit3132- Eingang: `findings.json` + `coverage.json` eines Scans, Kandidaten mit `status: candidate` (oder eine vom Nutzer genannte `id`-Auswahl).33- **Unabhängiger Prüfer (Vertrag 6.7):** bevorzugt anderer Anbieter als `provider.name` des Scans (Claude <-> Codex). Ohne einen: unabhängiger Subagent der höchsten Modellklasse, **ohne** die Begründung des Finders vorab zu lesen; im Ergebnis vermerken. Mehrere Anbieter oder Fan-out: erst Kosten schätzen und Nutzer warnen (6.5). Geht Code an einen Fremdanbieter, Egress ansagen (6.6).34- Preflight wie `sec-scan` Schritt 2 (Eigentum, Lock-Prüfung, fail-closed).3536## Je Kandidat37381. **Neu lesen:** den Code an `location` selbst lesen, die `evidence` des Finders nur als Hinweis nutzen.392. **Pfad nachzeichnen:** Quelle -> Transformationen -> Senke, jede Stufe mit Datei:Zeile. Bricht die Kette, ist das ein Widerlegungsgrund.403. **Erreichbarkeit:** Welche Route, welcher Aufrufer, welche Authentifizierung führt dorthin? Totcode, Testcode, nur-Admin-Pfade und interne Aufrufer senken Schweregrad oder widerlegen.414. **Gegenmaßnahmen suchen:** Validierung, Escaping, parametrisierte Abfragen, Framework-Schutz, Konfiguration, vorgeschaltete Prüfungen, Berechtigungen. Auch an anderer Stelle (Middleware, Wrapper).425. **Voraussetzungen des Angreifers** benennen (anonym, Konto, lokaler Zugriff, bestimmte Konfiguration).436. **Nachstellen, wenn gefahrlos möglich:** nur in einer lokalen Kopie oder Testumgebung, mit synthetischen Daten und Stub-Diensten; z. B. ein gezielter Unit-Test oder Aufruf der Funktion mit Angriffseingabe. **Nie** gegen fremde oder produktive Systeme, kein Netzzugriff nach außen, keine echten Geheimnisse, keine Zerstörung. Lässt sich nicht gefahrlos nachstellen: statische Argumentation genügt, Verdict `uncertain` ist dann erlaubt.447. **Schweregrad kalibrieren** nach Vertrag 3 (Erreichbarkeit mal Auswirkung); `confidence` neu setzen. Änderung als "Severity alt -> neu: Grund" in `description`.458. **Urteil schreiben:**4647| Verdict | Folge in `findings.json` |48|---|---|49| `confirmed` | `status: validated`, `validatedBy: {provider, model, verdict: confirmed}`; Pfad und etwaiges Repro in `description`; `impact` und `recommendation` ergänzen |50| `refuted` | `status: rejected`, `rejectedReason` mit der konkreten Gegenmaßnahme bzw. dem Bruch in der Kette, `validatedBy.verdict: refuted` |51| `uncertain` | `status` bleibt `candidate`, `validatedBy.verdict: uncertain`, in `description` steht, was fehlt, um zu entscheiden |5253`validatedBy.provider` / `.model` sind der **Prüfer**, nicht der Finder. Gleicher Anbieter wie der Finder erzeugt die Validator-Warnung "validated by the same provider"; sie bleibt sichtbar und wird nicht unterdrückt.5455## Abschluss5657`python sec-scan/scripts/secfind.py validate findings.json coverage.json`, Exitcode zeigen. Zusammenfassung: Zahl je Verdict, Severity-Änderungen, offene `uncertain`. Weiter mit `sec-triage` (validierte Funde) und `sec-report`. Keine Geheimniswerte in `description` oder Repro-Ausgabe (Vertrag 6.4). Kein Patchen, kein Commit.5859## Changelog6061### 0.1.0 (2026-10-31)6263- Erstfassung: Widerlegungsverfahren, Verdict-Abbildung, Unabhängigkeit.