Was bedeutet "SICHER"?
Inhaltsverzeichnis
SECURE ist ein System, das entwickelt wurde, um große Sprachmodelle im Bereich Cybersicherheit zu testen. Diese Modelle haben vielversprechende Ansätze gezeigt, machen aber oft Fehler oder produzieren falsche Informationen. Die bestehenden Tests konzentrieren sich nicht genug darauf, wie diese Modelle in echten Cybersicherheits-Situationen abschneiden.
SECURE umfasst sechs Datensätze, die auf den Sektor der industriellen Steuerungssysteme abzielen. Das hilft dabei, zu bewerten, wie gut Modelle Informationen extrahieren, verstehen und logisch basierend auf gängigen Branchenquellen denken können.
Durch das Testen von sieben fortschrittlichen Modellen bei verschiedenen Aufgaben gibt SECURE ein klareres Bild ihrer Stärken und Schwächen in der Cybersicherheit. Es bietet auch Vorschläge, wie man diese Modelle zu zuverlässigeren Werkzeugen für Sicherheitsberatung machen kann.