Data-Centric Benchmarking of Exploit Generation in LLMs: Understanding the Impact of Fine-Tuning
数据为中心的LLM漏洞利用生成基准测试:理解微调的影响
机构 * Cisco Systems, Inc.(思科系统公司) ; Michigan State University(密歇根州立大学)
AI总结 采用数据驱动方法,构建高质量数据集并设计评估框架,对17个大语言模型进行零样本漏洞利用生成能力基准测试,发现8B开源模型经微调后性能提升超42.5%,接近部分商业模型。
Comments Technical Report