Leistungen
Über uns
Anmelden

Yaga Benchmark

Beim Pentest mit KI leistet dasselbe Modell weit mehr
mit dem Harness von Yaga als allein.

Ergebnisse von Yaga

Mit dem Harness von Yaga in Kombination mit verschiedenen Modellen sind die Ergebnisse weit besser als die jedes einzelnen Modells.

Ergebnisse von Yaga Liniendiagramm, das den Anteil der gelösten Szenarien von Yaga mit sechs kombinierten Modellen und von Mythos, GPT Daybreak, Opus 5, GPT 6, Grok 4.7 und Sonnet 5 allein in den Modi Black Box, Gray Box und White Box vergleicht. Yaga liegt in allen Modi deutlich über jedem einzelnen Modell. 0 20 40 60 80 100 Black Box Gray Box White Box 98.0 98.7 99.0 Yaga Mythos GPT Daybreak Opus 5 GPT 6 Grok 4.7 Sonnet 5
Mythos GPT Daybreak Opus 5 GPT 6 Grok 4.7 Sonnet 5 Yaga · 6 kombinierte Modelle

Prozentsatz der festen Menge von Szenarien, gelöst pro Testmodus. Fahren Sie mit der Maus über die Punkte, um den genauen Wert zu sehen.

Yaga vs. jedes einzelne Modell

Mit Yaga wird Ihr Pentest weit besser als der jedes einzeln laufenden Modells.

Modell Black Box Gray Box White Box
Yaga · 6 kombinierte Modelle 98.0% 98.7% 99.0%
Mythos 40.5% 47.0% 61.5%
GPT Daybreak 40.0% 46.5% 60.5%
Opus 5 38.0% 46.6% 58.0%
GPT 6 37.5% 46.0% 57.5%
Grok 4.7 37.0% 44.5% 52.2%
Sonnet 5 27.0% 32.2% 44.0%

Interner Benchmark von HackerSec anhand einer festen Menge von Szenarien, gemessen an bestätigten und ausnutzbaren Schwachstellen. Jedes Modell wird allein bewertet, ohne das Harness von Yaga; die kombinierte Linie ist das produktive Yaga, mit den sechs Modellen in einer orchestrierten Ausführung.

Yaga v3.0 · Letzte Aktualisierung · 27. Oktober 2026

Yaga wird mit jeder Version besser

Jede YagaBench-Modalität über die Yaga-Versionen hinweg.

90 92,5 95 97,5 100 White Box Gray Box Black Box v2.0 v2.5 v2.7 v2.8 v3.0

Skala von 90 bis 100, damit der Unterschied sichtbar wird. Jeder Punkt ist ein vollständiger Benchmark-Lauf.

Wie wir messen

Der Maßstab ist für alle gleich

Jedes Modell führt dieselbe Menge von Szenarien unter denselben Bedingungen aus. Der Maßstab ist für alle identisch, und der Unterschied in den Ergebnissen spiegelt nur die von jedem Modell angewandte Methode wider.

Von einem menschlichen Experten validiert

Im YagaBench wird eine Schwachstelle nur dann gezählt, wenn sie tatsächlich von einem Experten von HackerSec ausgenutzt und bestätigt wurde. Nur was nachgewiesen wurde, zählt.

Das Modell antwortet. Yaga operiert.

Allein antwortet ein Modell nur. Innerhalb des Harness von Yaga erkundet es das Ziel, nutzt echte Schwachstellen aus und weist den Impact nach, wie es ein Pentester tun würde. Orchestriert leistet dieselbe KI weit mehr.

Gemessen mit aktivierten Grenzen

Yaga hat den Benchmark mit denselben Guardrails ausgeführt, die auch in der Kundenumgebung gelten. Die obigen Zahlen stammen aus dem realen Betrieb, nicht aus einem lockereren Modus, der für den Test erstellt wurde.

Szenarien ausgerichtet an OWASP PTES MITRE CWE NIST

Sehen Sie Yaga bei der Arbeit an Ihrem Ziel

Setzen Sie dasselbe Harness in Ihrem Scope ein, mit menschlicher Aufsicht durch HackerSec.