«3CB»: il benchmark delle capacità cibernetiche catastrofiche

Abstract

Presenta il benchmark 3CB (Catastrophic Cyber Capabilities Benchmark), un quadro per valutare le capacità informatiche offensive di agenti basati su LLM, organizzato secondo la tassonomia MITRE ATT&CK. Contiene 15 sfide originali che coprono 14 strategie di attacco e dimostra che modelli di frontiera come GPT-4o e Claude 3.5 Sonnet possono già condurre ricognizione, sfruttamento e movimenti laterali, evidenziando lacune significative nelle valutazioni di cybersecurity esistenti per i sistemi di IA. – Abstract generato dall’IA.