claude plugin eval führt Ihr Plugin gegen eine Reihe von Testfällen aus, bewertet die Ergebnisse und führt standardmäßig jeden Fall erneut ohne das Plugin aus, damit Sie sehen können, welchen Beitrag es leistet. claude plugin eval init fragt Sie, wie ein gutes Ergebnis aussieht, schlägt dann Testfälle und die Überprüfungen vor, die sie bewerten, versucht die Suite einmal und schreibt die Dateien. Jede Ausführung und jede Überprüfung, bei der ein zweites Modell die Antwort bewertet, ist ein echter Modellaufruf auf Ihrem Konto.

Lassen Sie Claude aus dem Stammverzeichnis Ihres Plugins die Suite entwerfen:
Wenn Claude Ihnen mitteilt, dass die Suite bereit ist, beenden Sie die Sitzung, die claude plugin eval init geöffnet hat, und führen Sie claude plugin eval . aus, um jeden Fall zu bewerten. Die Zusammenfassungstabelle wird in Ihrem Terminal gedruckt, und report.html unter evals/results/ enthält die Details pro Ausführung.
In der Claude Code Desktop-App können Sie jeden Bereich in sein eigenes Fenster ausklappen. Ziehen Sie das Diff oder Terminal auf einen zweiten Bildschirm, während Claude in dem Hauptfenster weiterarbeitet, und docken Sie den Bereich später wieder an, wenn Sie fertig sind.
Weitere Verbesserungen
maxEffortLevel auf der obersten Ebene oder pro Modell unter modelSettings fest, um die Aufwandsstufe bei jedem Anbieter zu begrenzen, einschließlich Amazon Bedrock, Google Cloud’s Agent Platform und Microsoft Foundry; jede höhere Stufe wird mit der Obergrenze ausgeführt--plugin-dir auf einen Ordner mit Plugins, um jeden unmittelbaren Unterordner mit einem Manifest zu ladenCLAUDE_CODE_WEBFETCH_DEADLINE_MS, um die Deadline zu ändern, oder auf 0, um die Grenze zu entfernen--json an claude plugin install, uninstall, update, enable oder disable, um das Ergebnis als ein JSON-Objekt in der letzten Zeile von stdout auszugeben[Data Exfiltration]/ mitten in einer Eingabeaufforderung eingeben, können Sie jetzt aus einer Liste übereinstimmender Befehle wählen, anstatt einen einzelnen Vorschlag zu erhalten. Die Liste wird beim Eingeben in Vollbilddarstellung geöffnet. Eine Plugin-Skill stimmt auch mit ihrem Namen ohne das Plugin-Präfix übereinEsc oder Up, und der Text kehrt zum Nachrichtenfeld zurück