Evaluation Grundschutz-KI

Evaluation Grundschutz-KI
feature image Grundschutz-KI

Wir haben den Prototypen der Grundschutz-KI nun zur Evaluation unter https://gski.fghgsd.de bereitgestellt. Die Evaluation wird im Rahmen einer Masterarbeit im Studiengang IT-Sicherheit und Forensik an der Hochschule Wismar durchgeführt.

Ihre Teilnahme erfordert eine halbe Stunde Zeit. Neben den umfangreichen automatisierten Auswertungen und Messungen der Antwortgenauigkeit möchten wir auch menschliches Feedback.

Abbildung: wirklich kurzes Feedback-Formular ;) 

Testen Sie die Grundschutz-KI gegen Ihre Anwendungsfälle! Mit nur 30 Minuten Ihrer Zeit können Sie dazu beitragen, dass neue KI-Anwendungen nicht nur technisch und letztlich wiederum durch KI bewertet werden. Und vielleicht finden Sie in der Anwendung spannende Impulse für Ihre eigenen Themen.  Das Feedback-Formular haben wir extra kurz gehalten.

Disclaimer: Wir sind uns einiger Unzulänglichkeiten des Prototypen bewusst. Insbesondere das Retrieval der Informationen aus dem IT-Grundschutz soll in zukünftigen Ausbaustufen noch durch bessere Strategien verstärkt werden. Und auch das verwendete LLM macht uns in manchen Antworten noch einen Strich durch die Rechnung.