Was unterscheidet das von einem Penetrationstest?
Ein Penetrationstest betrachtet Infrastruktur und Anwendungscode. KI-Red-Teaming greift zusätzlich das Verhalten des Modells an, seine Prompts, seine Datenquellen und die Aktionen, die Agenten ausführen können. Wo es sinnvoll ist, kombinieren wir beides.
Können Sie Microsoft 365 Copilot testen?
Ja. Wir testen, wie Copilot und Copilot-Studio-Agenten mit indirekter Prompt Injection, zu weit freigegebenen Inhalten und Daten aus angebundenen Quellen umgehen, im Rahmen der Testbedingungen von Microsoft.
Testen Sie in der Produktion?
Wir bevorzugen eine Testumgebung, die der Produktion entspricht. Wenn wir in der Produktion testen, stimmen wir Umfang, Testkonten und Grenzen vorab mit Ihnen ab.
Was sind die OWASP Top 10 for LLM Applications?
Eine verbreitete Liste der wichtigsten Sicherheitsrisiken für Anwendungen auf Basis großer Sprachmodelle, von Prompt Injection bis zu zu weitreichenden Handlungsbefugnissen. Wir strukturieren damit Tests und Befunde.
Verlangt der EU AI Act Sicherheitstests?
Für Hochrisiko-KI-Systeme verlangt der AI Act ein angemessenes Maß an Genauigkeit, Robustheit und Cybersicherheit. Unabhängig davon sollte jede KI mit Zugriff auf Daten oder Systeme getestet werden, bevor sie live geht.