Zum Hauptinhalt springen

Oraclaw Calibrate

Skill Verifiziert Aktiv

Bewertung der Vorhersagequalität für KI-Agenten. Brier-Score, Log-Score und Konvergenzanalyse mehrerer Quellen. Wissen Sie, ob Ihre Prognosen korrekt sind und ob Ihre Datenquellen übereinstimmen.

Zweck

Bereitstellung präziser, mathematischer Werkzeuge für KI-Agenten zur Bewertung der Genauigkeit ihrer Vorhersagen und der Übereinstimmung zwischen verschiedenen Informationsquellen.

Funktionen

  • Bewertung der Vorhersagegenauigkeit (Brier, Log-Score)
  • Analyse der Übereinstimmung/Konvergenz mehrerer Quellen
  • Identifizierung von Ausreißer-Datenquellen
  • Bereitstellung deterministischer algorithmischer Antworten
  • Angebot als MCP-Server, REST-API und SDK

Anwendungsfälle

  • Bewerten Sie, wie genau frühere Vorhersagen waren
  • Prüfen Sie, ob mehrere Datenquellen mit Prognosen übereinstimmen
  • Finden Sie die Ausreißerquelle, die vom Konsens abweicht
  • Vergleichen Sie die Qualität von Prognosen verschiedener Modelle

Nicht-Ziele

  • Bereitstellung der Vorhersagen selbst
  • Durchführung allgemeiner KI-Agenten-Argumentation
  • Ersatz für primäre LLM-Funktionen

Installation

npx skills add Whatsonyourmind/oraclaw

Führt das Vercel skills CLI (skills.sh) via npx aus — benötigt Node.js lokal und mindestens einen installierten skills-kompatiblen Agent (Claude Code, Cursor, Codex, …). Setzt voraus, dass das Repo dem agentskills.io-Format folgt.

Qualitätspunktzahl

Verifiziert
97 /100
Analysiert about 23 hours ago

Vertrauenssignale

Letzter Commit12 days ago
Sterne8
LizenzMIT
Status
Quellcode ansehen