Der Audit erkennt Injection-/Tool-Permission-/Output-Guardrail- und Policy-Lücken in Prompt-Sicherheitssuiten datei- und zeilengenau.
Produkt prompt-security-audit · Version 0.1.0
Prompt Security Audit (synthetic suite, technical draft)
Standardisierter, deterministischer Prompt-Security-Audit für LLM-/Agent-Anwendungen. Prüft eine synthetische Testsuite (Policy, Testfälle, System-Prompts, Refusal-Policy) auf nicht blockierte Injection-/Encoding-Angriffe, nicht geloggte Jailbreaks, fehlende Output-Filter/Exfiltrationsschutz, PII ohne Redaction, Tool-Least-Privilege, ungehärtete System-Prompts/Secrets, fehlende Safety-Policy/Refusal-Abdeckung, Testabdeckung, Expected-Severity, Duplikate und Audit-Log-Evidenz. Liefert datei-/zeilengenaue Befunde und transparenten Prompt-Security-Score; evidenzgebunden und reproduzierbar. Technischer Entwurf: keine vollständige OWASP-Abdeckung, keine Zertifizierung; keine echten Prompts/Secrets/Netz/LLM.
Zielkunde (ICP)
AI-Security-/Platform-Teams in mittelständischen Unternehmen, die LLM-/Agent-Anwendungen vor Produktivgang oder Reviews auf Prompt-Injection-, Tool-Permission-, Output-Guardrail- und Policy-Lücken prüfen müssen.
Problem
Prompt-Injection, ungeprüfte Tool-Nutzung, fehlende Output-Filter und Secrets in System-Prompts werden spät sichtbar; manuelle Reviews sind inkonsistent. Teams benötigen eine deterministische, lokal laufende Prüfung mit datei-/zeilengenauen Fix-Aufträgen.
Liefermodelle
- Audit as a Service
- Agent as a Service
Service-Level (SLA)
| Feld | Wert |
|---|---|
delivery_time_hours | 48 |
max_findings_per_audit | 200 |
max_runtime_seconds | 120 |
Grenzen des Produkts
- Rein statischer Audit einer synthetischen Testsuite; kein Live-LLM-Aufruf, kein Pentest, kein Netz/LLM.
- Keine vollständige OWASP-/LLM-Top-10-Abdeckung und keine Zertifizierung; Mapping ist ein technischer Entwurf.
- Heuristiken über deklarierte Felder; alle Prompts/Tests sind fiktiv.
- Prompt-Security-Score ist ein technisches Signal, keine Sicherheitsgarantie.
- Rein statischer Audit einer synthetischen Testsuite; kein Live-LLM-Aufruf, kein Pentest, kein Netz/LLM.
- Keine vollständige OWASP-/LLM-Top-10-Abdeckung und keine Zertifizierung; Mapping ist ein technischer Entwurf.
- Heuristiken über deklarierte Felder; alle Prompts/Tests sind fiktiv.
Verträge: Eingabe und Ausgabe
Ein Claim erscheint nur, wenn die Evidenz zur exakten Version passt. Contract-Felder werden aus dem veröffentlichten Datenvertrag gerendert.
JSON-Schema (input_contract) aus dem veröffentlichten Datenvertrag. Der Runner validiert Ein- und Ausgaben gegen dieses Schema.
{
"properties": {
"repository_snapshot": {
"type": "object"
}
},
"required": [
"repository_snapshot"
],
"type": "object"
}| Feld | Typ | Pflicht | Beschreibung |
|---|---|---|---|
repository_snapshot | object | ja |
JSON-Schema (output_contract) aus dem veröffentlichten Datenvertrag. Der Runner validiert Ein- und Ausgaben gegen dieses Schema.
{
"properties": {
"findings": {
"type": "object"
},
"report": {
"type": "object"
}
},
"required": [
"report",
"findings"
],
"type": "object"
}| Feld | Typ | Pflicht | Beschreibung |
|---|---|---|---|
findings | object | ja | |
report | object | ja |
Veröffentlichte Claims (gate-geprüft)
Jeder folgende Claim ist an mindestens einen PASSED-Evidenz-Record gebunden. Die SHA-256-Hashwerte der Records sind direkt an jedem Claim sichtbar; nicht freigegebene Claims werden nicht gerendert.
Jeder Audit-Lauf ist deterministisch, unabhängig re-validiert und über einen hash-verketteten Evidence-Record mit Ed25519-Signaturen und Contract-Digests reproduzierbar.
Jeder Befund ist datei- und zeilengenau mit Evidenz/Fix-Anweisung dokumentiert; der Prompt-Security-Score ist transparent.
Es sind keine unterdrückten Claims für dieses Produkt im Gatekeeper-Status enthalten.
Workflow
Ausführungsschritte laut Manifest; jeder Schritt referenziert einen geprüften Skill.
| Schritt | Skill | Beschreibung | Abhängig von |
|---|---|---|---|
audit | prompt_security_audit | Prompt-Security-Suite statisch prüfen. | — |
Skills in diesem Produkt
Versionen, Schwellenwerte und Evidenzstand je Skill. Details in der Skill-Registry.
| Skill | Version | Reife | Recall / Precision | Evidenz | Letzte Evidenz |
|---|---|---|---|---|---|
| Prompt Security Audit (synthetic test suite, technical draft) | 0.1.0 | VALIDATED | 1,000 / 0,900 | 1 | 4fbd6b79550441009102d0c669c8d0db |
Evidenz für dieses Produkt
Ausschließlich verifizierte Records. Hashes und Artefaktpfade sind im Evidenz-Detail einsehbar.
record_sha256: 36860e5d8d0a871487d4d14a149fd0597d4518b6a00a662bb651fc2eb1bfb513
- Rein statischer Audit einer synthetischen Testsuite; kein Live-LLM-Aufruf, kein Pentest, kein Netz/LLM.
- Keine vollständige OWASP-/LLM-Top-10-Abdeckung und keine Zertifizierung; Mapping ist ein technischer Entwurf.
- Heuristiken über deklarierte Felder; alle Prompts/Tests sind fiktiv.
- … 4 weitere
Bericht: evidence/artifacts/4fbd6b79550441009102d0c669c8d0db/report.md
Weitere Dokumentation
Kein Dokumentationspfad veröffentlicht.