ACTS: 통제된 블라인드 조건에서 LLM 암호 식별 평가를 위한 다단계 벤치마크
연구팀은 LLM의 암호 해독 능력을 평가하는 다단계 벤치마크 ACTS를 제안하고, 메타데이터 제거 수준에 따른 정확도 차이를 실험적으로 보여준다. 블라인드 조건(Tier-3)에서 30.8%의 정확도를 기록했으며, 이는 14.3%의 무작위 기준보다 약간 높았다.
시사점 이 연구는 LLM이 암호문만으로 암호 식별에 어려움을 겪는다는 점을 실증해, 보안 설계 시 메타데이터 보호의 중요성을 강조한다.