socbench

socbench Бенчмарк для проверки передовых рассуждающих LLM как агентов SOC на сырых данных NetFlow. socbench тестирует передовые рассуждающие модели в качестве агентов SOC: каждая модель выполняет ограниченный многошаговый цикл агента над детерминированным, предварительно проиндексированным корпус...

dataset

🚀 CySecBench：基于生成式AI的网络安全专用提示数据集，用于基准测试大语言模型 🛡️ 规模最大、最全面的基于生成式AI的网络安全专用数据集，用于基准测试大语言模型 🌟 概述 CySecBench 论文提供了： 🎯 一个尖端的提示数据集 ，包含12662条针对网络安全挑战的提示。 🧠 新颖的越狱方法 ，利用提示混淆与改进技术。 📊 对大语言模型（如ChatGPT、Claude和Gemini）的全面性能评估 。 为什么选择 CySecBench？ 现有数据集过于宽泛，且往往缺乏对网络安全的专注。CySecBench 通过提供领域专用的提示...