Skill ai_code_audit · Version 0.1.0
AI-Generated Code Audit
Deterministische statische Prüfung einer KI-generierten ("vibe-coded") Anwendung auf typische Defektklassen von Coding-Assistenten: hartkodierte Platzhalter-Secrets, unsichere Header-only-Auth, client-gesteuerte Autorisierung, fehlende Input-Validierung, Copy-Paste-Boilerplate, Security-TODOs, halluzinierte und veraltete Abhängigkeiten, unbehandelte Async-Fehler, verschluckte Exceptions, aktive Debug-Endpunkte/-Flags, inkonsistente Env-Namen, tautologische/übersprungene Tests und nicht implementierte Produktions-Stubs. Heuristische Regeln sind als solche markiert und tragen eine bewusst niedrigere Confidence; deterministische Regeln eine höhere. Der Risiko-Score und die Kategorie-Scores werden transparent aus den Severity-Gewichten berechnet (Formel im Skill-README und Summary). Kein Zielcode wird ausgeführt, kein Netzwerk, keine LLM-Aufrufe; zwei Läufe sind byte-identisch. Saubere Muster (src/secure/*, tests/validation.test.ts) werden über explizite Guards unterdrückt.
Berechtigungen
- Nur Lesen (Workspace)
- Kein Netzwerk
Kosten- und Laufzeitmodell
| Feld | Wert |
|---|---|
| LLM-Aufrufe erlaubt | 0 |
| Netzwerkzugriff | nein (erzwungen) |
| Max. Laufzeit | 120000 ms |
| Letzte Evidenz | 6c99bf9121a94979a8fd1a81066b72b9 (2026-11-03T11:20:22Z) |
Validierungs-Schwellenwerte
| Feld | Bedeutung | Wert |
|---|---|---|
min_recall | Mindest-Recall | 1 |
min_precision | Mindest-Precision | 0.9 |
max_runtime_ms | Max. Laufzeit (ms) | 120000 |
max_cost_usd | Max. Kosten (USD) | 0.05 |
Grenzen des Skills
- Rein statische Heuristiken/Muster; keine semantische Analyse, kein LLM, keine Codeausführung, kein Datenfluss-Tracking.
- Heuristische Regeln (AI-ASYNC-001, AI-CATCH-001, AI-CONFIG-002, AI-DUP-001, AI-TEST-001, AI-TEST-002) haben niedrigere Confidence und können False Positives/Negatives enthalten; deterministische Regeln sind im Summary getrennt ausgewiesen.
- Halluzinierte Abhängigkeiten werden gegen synthetisch kuratierte Dependency-Facts (Snapshot 2026-10-28) geprüft, nicht gegen eine Live- Registry; neue oder private Pakete können daher als unbekannt gelten.
- Kein Ersatz für manuellen Code-Review, SAST mit Datenflussanalyse, Pentest oder Zertifizierung.
- Das Golden-Dataset ist synthetisch; keine echten Secrets, Domains, Kunden- oder Personendaten.
Eingabe-Vertrag (JSON-Schema)
Der Runner validiert Eingaben gegen dieses Schema, bevor der Skill startet.
{
"additionalProperties": false,
"properties": {
"max_findings": {
"default": 200,
"type": "integer"
},
"scope": {
"default": [
"secrets",
"auth",
"validation",
"code_quality",
"dependencies",
"errors",
"config",
"tests",
"stubs"
],
"items": {
"type": "string"
},
"type": "array"
},
"target_path": {
"type": "string"
}
},
"required": [
"target_path"
],
"type": "object"
}
Ausgabe-Vertrag (JSON-Schema)
Die Ausgabe wird nach dem Lauf gegen dieses Schema geprüft; Abweichungen brechen den Lauf ab.
{
"additionalProperties": false,
"properties": {
"findings": {
"maxItems": 500,
"type": "array"
},
"summary": {
"type": "object"
}
},
"required": [
"findings",
"summary"
],
"type": "object"
}
Evidenz für diesen Skill
Nur verifizierte Records, neueste zuerst. Ein Record belegt einen konkreten Lauf gegen ein synthetisches Lab-Ziel.
| Record | Zeitstempel | Status | Reife | Precision / Recall | Laufzeit | Kosten |
|---|---|---|---|---|---|---|
| 6c99bf9121a94979a8fd1a81066b72b9 | 2026-11-03T11:20:22Z | PASSED | VALIDATED | 1,000 / 1,000 | 858 ms | 0,00 € |