Der Audit erkennt Backtest-, Bias-, Interval-, Versionierungs- und Dokumentationslücken in Prognose-Paketen datei- und zeilengenau.
Produkt forecast-model-audit · Version 0.1.0
Forecast Model Quality Audit (synthetic package)
Standardisierter, deterministischer Audit für Prognose-Pakete. Prüft ein synthetisches Paket (forecast-policy.yaml, forecasts.csv, backtest.json, model-card.md) auf unzureichende/fehlende Backtests, MAPE-/Bias-Verstöße, fehlende Baselines/Samples, veraltete Evaluierung, fehlende Confidence- Intervalle, negative Prognosen, Duplikate, Frequenz-/Versionsinkonsistenzen, fehlende Actuals und unvollständige Model Cards. Liefert datei-/zeilengenaue Befunde und transparenten Forecast-Quality-Score; evidenzgebunden und reproduzierbar. Kein Modelltraining/Netz/LLM; keine Genauigkeits-/ Finanzgarantie; keine Finanzberatung.
Zielkunde (ICP)
Data-/Analytics-Teams in mittelständischen Unternehmen, die Prognosemodelle vor Einsatz oder Review auf Backtest-, Bias-, Interval- und Versionierungsqualität prüfen müssen.
Problem
Prognosen ohne ausreichende Backtests, ohne Baseline, mit Bias oder ohne Confidence-Intervalle führen zu Fehlentscheidungen. Manuelle Reviews sind inkonsistent; Teams benötigen eine deterministische, lokal laufende Prüfung mit datei-/zeilengenauen Fix-Aufträgen.
Liefermodelle
- Audit as a Service
- Workflow as a Service
Service-Level (SLA)
| Feld | Wert |
|---|---|
delivery_time_hours | 48 |
max_findings_per_audit | 200 |
max_runtime_seconds | 120 |
Grenzen des Produkts
- Rein statischer Audit synthetischer Prognose-/Backtest-Dateien; kein Modelltraining, kein Live-Scoring, kein Netz/LLM.
- Keine Genauigkeits-, Finanz- oder Prognosegarantie; keine Finanz-/Anlageberatung; Heuristiken über deklarierte Felder.
- Alle Daten sind fiktiv.
- Forecast-Quality-Score ist ein technisches Signal, keine Garantie.
- Rein statischer Audit synthetischer Prognose-/Backtest-Dateien; kein Modelltraining, kein Live-Scoring, kein Netz/LLM.
- Keine Genauigkeits-, Finanz- oder Prognosegarantie; Heuristiken.
- Alle Daten sind fiktiv.
Verträge: Eingabe und Ausgabe
Ein Claim erscheint nur, wenn die Evidenz zur exakten Version passt. Contract-Felder werden aus dem veröffentlichten Datenvertrag gerendert.
JSON-Schema (input_contract) aus dem veröffentlichten Datenvertrag. Der Runner validiert Ein- und Ausgaben gegen dieses Schema.
{
"properties": {
"repository_snapshot": {
"type": "object"
}
},
"required": [
"repository_snapshot"
],
"type": "object"
}| Feld | Typ | Pflicht | Beschreibung |
|---|---|---|---|
repository_snapshot | object | ja |
JSON-Schema (output_contract) aus dem veröffentlichten Datenvertrag. Der Runner validiert Ein- und Ausgaben gegen dieses Schema.
{
"properties": {
"findings": {
"type": "object"
},
"report": {
"type": "object"
}
},
"required": [
"report",
"findings"
],
"type": "object"
}| Feld | Typ | Pflicht | Beschreibung |
|---|---|---|---|
findings | object | ja | |
report | object | ja |
Veröffentlichte Claims (gate-geprüft)
Jeder folgende Claim ist an mindestens einen PASSED-Evidenz-Record gebunden. Die SHA-256-Hashwerte der Records sind direkt an jedem Claim sichtbar; nicht freigegebene Claims werden nicht gerendert.
Jeder Audit-Lauf ist deterministisch, unabhängig re-validiert und über einen hash-verketteten Evidence-Record mit Ed25519-Signaturen und Contract-Digests reproduzierbar.
Jeder Befund ist datei- und zeilengenau mit Evidenz/Fix-Anweisung dokumentiert; der Forecast-Quality-Score ist transparent.
Es sind keine unterdrückten Claims für dieses Produkt im Gatekeeper-Status enthalten.
Workflow
Ausführungsschritte laut Manifest; jeder Schritt referenziert einen geprüften Skill.
| Schritt | Skill | Beschreibung | Abhängig von |
|---|---|---|---|
audit | forecast_model_audit | Prognose-Paket statisch prüfen. | — |
Skills in diesem Produkt
Versionen, Schwellenwerte und Evidenzstand je Skill. Details in der Skill-Registry.
| Skill | Version | Reife | Recall / Precision | Evidenz | Letzte Evidenz |
|---|---|---|---|---|---|
| Forecast Model Quality Audit (synthetic package) | 0.1.0 | VALIDATED | 1,000 / 0,900 | 1 | ff29100cabf041c08cd75484cdaa184a |
Evidenz für dieses Produkt
Ausschließlich verifizierte Records. Hashes und Artefaktpfade sind im Evidenz-Detail einsehbar.
record_sha256: 85b4f46ab385b05e33e4cac76a21c8cc84bd6050f0abd496b48812c9cafcc96f
- Rein statischer Audit synthetischer Prognose-/Backtest-Dateien; kein Modelltraining, kein Live-Scoring, kein Netz/LLM.
- Keine Genauigkeits-, Finanz- oder Prognosegarantie; keine Finanz-/Anlageberatung; Heuristiken über deklarierte Felder.
- Alle Daten sind fiktiv.
- … 4 weitere
Bericht: evidence/artifacts/ff29100cabf041c08cd75484cdaa184a/report.md
Weitere Dokumentation
Kein Dokumentationspfad veröffentlicht.