클로드 미토쓰(Claude Mythos) 프리뷰가 발표되면서 AI 보안위협 대응을 위해 AI로 보안점검을하고 AI로 보안대응을 해야하는 시기가 점점 다가오고 있습니다.
해당 내용은 AI을 기반하여 보안점검을 하는 AI Red Team 구성안을 AI와 대화하여 만든 데이터이니 참고 부탁드립니다.

AI 보안위협 대응을 위한
조직 내부 Red Team 구축 전략
AI 기반 사이버공격은 2025년 한 해 동안 89% 증가했고, Anthropic의 Mythos Preview가 등장하며 'AI가 사람 개입 없이 익스플로잇을 자율 작성'하는 시대가 열렸다.
우리 조직이 Mythos에 직접 접근할 수 없어도, Claude Opus 4.7 + 자체호스팅 LLM + 멀티에이전트 + RAG의 조합으로 Mythos 능력의 70~85%까지 따라갈 수 있다. 핵심은 도구가 아니라 거버넌스·시스템 설계다.
들어가며 — 왜 지금 AI Red Team인가
지난 1년 사이 사이버보안 판이 완전히 바뀌었다. 공격자들이 AI를 본격적으로 무기화하기 시작하면서 공격의 속도·정밀도·규모가 모두 한 자릿수에서 두 자릿수로 점프했다. 반면 방어자는 여전히 사람 중심이다. 외부 펜테스트는 1년에 1~2회뿐이고, 망분리 환경에서는 외부 인력 투입조차 어렵다.
이 글은 그 비대칭을 메우기 위한 실전 가이드다. AI 위협이 실제로 어떻게 파악됐는지부터, AI Red Team을 우리 조직에 어떻게 구축할지, 어디까지 따라갈 수 있을지까지 — 한 호흡으로 정리했다.
1. AI 위협, 어떻게 파악됐나 — 4대 채널
"AI 공격이 늘었다"는 명제는 다음 네 가지 독립된 채널의 데이터가 같은 방향을 가리키며 검증됐다.
① 보안업체 글로벌 텔레메트리
CrowdStrike·IBM·PwC는 전 세계 수억 대 단말의 EDR/XDR 로그를 빅데이터로 분석한다.
- CrowdStrike 2026: AI 활용 공격자에 의한 공격이 2025년 기준 전년 대비 89% 증가
- IBM X-Force 2026: 외부 공개 앱 공격 44% 증가, 주요 원인은 AI 기반 자동 취약점 탐색
- PwC 2026: 신원 기반 공격 급증, AI가 진입장벽 하락과 공격 속도 가속을 동시에 견인
② 공격 결과물의 'AI 흔적' 분석
받은 피싱메일·악성코드를 뜯어보면 사람이 만든 것과 LLM이 만든 게 다른 패턴을 보인다.
- 오탈자·문법 오류 거의 없음 (과거 피싱 식별 신호 사라짐)
- 한국어·영어·일본어 동시 다국어 캠페인 (사람 작업 불가능한 속도)
- LLM 특유의 코드 주석·변수명·함수 분리 패턴
- 텍스트 분류기로 '95% 확률로 LLM 생성' 정량 판정 가능
③ AI 회사 자체의 악용 사례 적발 (가장 결정적)
Anthropic·OpenAI 같은 AI 제공사가 자기 모델이 어떻게 악용됐는지 직접 추적·공개한다.
④ 다크웹·지하포럼 모니터링
- WormGPT, FraudGPT 등 가드레일 제거 LLM이 활발히 거래
- 'AI as a Service' 형태로 비전문가에게 공격 도구 판매
- FBI 통계: 2025~2026 AI 사이버공격 피해자의 70%+가 50인 미만 소기업·개인
핵심 통계 한눈에 보기
| 지표 | 수치 | 출처 |
|---|---|---|
| AI 활용 공격 증가율 | +89% | CrowdStrike 2026 |
| 공개 앱 대상 공격 증가율 | +44% | IBM X-Force 2026 |
| AI 사이버공격 사고 건수 | 10,870 → 16,200건 (+72%) | 2025 글로벌 통계 |
| AI 공격 경험 조직 비율 | 전 세계 87% | 2025 종합 |
| 피싱 공격 증가율 (2022 대비) | +1,265% | 2025 종합 |
| Mythos 익스플로잇 작성 성공률 | 첫 시도 83% | Anthropic 2026 |
2. Mythos 충격 — AI 단독 해킹의 도래
Mythos가 뭐길래
Claude Mythos Preview는 Anthropic이 2026년 4월 발표한 보안 특화 차세대 모델이다. 일반 Claude 모델과 달리 보안 작업용으로 별도 사후훈련된 모델로, 코드를 직접 분석해 취약점을 발견하고 익스플로잇 코드까지 자동 작성하는 능력을 입증했다.
Mythos는 일반 공개되지 않으며, Project Glasswing 파트너(JPMorgan, Microsoft, AWS, Google, Cisco, Nvidia, CrowdStrike 등)에게만 제공된다. 한국 금융권 일반 조직은 직접 접근 불가.
Mythos가 보여준 4단계 능력
- Mozilla: Firefox에서 271개 취약점 식별·패치
- OpenBSD: 27년 묵은 보안 취약점 신규 발견
- FreeBSD: NFS RCE 취약점 자율 발견·익스플로잇 (17년 묵은 버그, 인증 없이 root)
- OpenSSL: 단일 보안 릴리스에서 12개 중 12개 발견
반론도 있다 — AISLE의 분석
객관성을 위해 반론도 짚자. 보안 AI 스타트업 AISLE에 따르면:
- Mythos의 대표 사례인 FreeBSD NFS RCE를 8개 모델 모두가 탐지함
- 그중에는 토큰당 0.11달러짜리 36억 파라미터 작은 모델도 포함
- 5.1B 오픈모델이 27년 묵은 OpenBSD 버그의 핵심 체인을 복원
- OpenAI Sam Altman은 Anthropic의 홍보를 "fear-based marketing"이라고 비판
즉 취약점 발견은 작은 오픈소스 모델로도 상당히 가능하고, 진짜 격차는 익스플로잇 작성·체이닝의 신뢰성에 있다는 뜻이다.
3. AI vs 도구 — "AI만으로 해킹 가능한가?"
Mythos를 보고 "AI가 도구 없이도 다 한다"는 오해가 퍼지는데, 이는 절반만 맞다. AI 자율 해킹의 본질은 'AI 지휘관 + 도구 병사'이지 'AI 단독'이 아니다.
- 익스플로잇 코드 작성 (메모리 안전)
- 취약점 분석·코드 리뷰
- 셸코드 생성
- 맞춤형 피싱·딥페이크 콘텐츠
- 로그·패킷 해석
- 공격 시나리오 기획
- 보고서 자동 작성
- 실제 네트워크 패킷 전송
- 포트 스캔 실행
- 대용량 무차별 대입
- 실시간 양방향 인터랙션
- 메모리 익스플로잇 실행
- C2 통신·포스트익스플로잇
- 패시브 스니핑
학계 검증 — 도구 없는 LLM의 한계
- CyBench: GPT-4·Claude도 중급 CTF 해결률 30~40% (도구 결합 시 더 높음)
- NYU CTF Bench: 단순 web/crypto는 풀지만 pwn/reverse는 도구 필요
- PentestGPT 논문: LLM 단독은 HTB easy 박스도 못 깸. 도구 결합 시에만 성공
즉 도구 없는 LLM은 '보안 컨설턴트' 수준은 가능하지만 '오퍼레이터'는 아니다.
미니멀 스택 — 5종이면 충분
- Kali Linux 1대 (대부분 도구 사전 설치)
- Metasploit Framework (익스플로잇 자판기)
- Burp Suite Community (웹)
- BloodHound (AD 경로 분석)
- LLM (Claude Opus 또는 자체호스팅 Qwen·Llama)
이 5개 + LLM이면 약 80%의 일반 침투 시나리오를 커버할 수 있다. 50개 도구 다 깔 필요 없다.
4. AI Red Team 5계층 아키텍처
AI Red Team은 단순한 도구 묶음이 아니라 통제·실행·자원의 5개 계층이 적층된 시스템이다.
| 계층 | 이름 | 역할 |
|---|---|---|
| [5] | 거버넌스 | RoE·승인·감사로그 — 사고 방지 최후 보루 |
| [4] | 오케스트레이션 | 에이전트 프레임워크·MCP — 자율 의사결정 |
| [3] | 공격 도구·LLM | Metasploit·Burp·LLM 추론 서버 |
| [2] | 타겟 환경 | 사이버 레인지·취약 VM (안전한 복제 환경) |
| [1] | 격리 인프라 | 망분리·하이퍼바이저 — 모든 것의 토대 |
※ 거버넌스가 가장 위에 있지만 구축 순서상으론 가장 먼저 정립해야 한다.
[1] 격리 인프라
AI Red Team Lab Zone은 운영망과 완전 분리되어야 하며, 내부적으로 다시 3개 세그먼트로 나뉜다.
- 관리 세그먼트: Jump Host, 로깅 서버, 백업 NAS
- 공격자 세그먼트: Kali·공격 VM, LLM 추론 서버, 에이전트 서버
- 타겟 세그먼트: 취약 시스템, AD 도메인, DB·Web 미러
| 하이퍼바이저 | 장점 | 추천 대상 |
|---|---|---|
| Proxmox VE | 무료, GUI 좋음, 스냅샷 빠름 | 팀·부서 단위 |
| VMware ESXi | 안정성, 사내 표준 가능성 | 전사 표준 환경 |
| KVM + Cockpit | 완전 오픈소스, 커스텀 자유 | 엔지니어 풍부한 팀 |
격리 체크리스트:
- 별도 VLAN + 별도 물리 스위치 (논리분리만으론 부족)
- 운영망과 ARP/MAC 레벨 차단 검증
- 외부 인터넷 화이트리스트 프록시(Squid)로만 허용
- DNS 분리 (내부 DNS만 사용)
- 일일 자동 스냅샷 체계
[2] 타겟 환경 (사이버 레인지)
Tier 1 — 단일 취약 VM (입문): Vulhub(Docker 기반 CVE 재현), DVWA, OWASP Juice Shop, Metasploitable 3
git clone https://github.com/vulhub/vulhub.git
cd vulhub/log4j/CVE-2021-44228
docker compose up -d
Tier 2 — AD 도메인 환경 (중급):
- GOAD (Game of Active Directory): DC 2대 + 워크스테이션 + 의도적 취약점(Kerberoasting, AS-REP, ACL 악용)
- Ludus: GOAD보다 가볍고 사용 편의성 높음
git clone https://github.com/Orange-Cyberdefense/GOAD.git
cd GOAD
./goad.sh -t install -l GOAD -p virtualbox
Tier 3 — 사내 시스템 미러링 (실전):
- 형상만 복제 (동일 OS·미들웨어·패치 레벨)
- 더미 데이터만 사용 — Faker 라이브러리로 생성
- 방화벽 정책 export 후 동일 룰셋 적용 (민감정보 마스킹)
[3] 공격 도구 + LLM 인프라
LLM 선택: 망분리 환경에선 자체호스팅이 기본. 외부 API는 보조·승인된 경우에만.
| 모델 | VRAM | 특징 |
|---|---|---|
| Llama 3.3 70B (4bit) | ~40GB | 범용 성능 최상급, 가장 검증됨 |
| Qwen 2.5 72B | ~45GB | 코드·도구호출 강함, 보안 작업 유리 |
| DeepSeek-R1 | ~80GB | 긴 사고체인 추론 (계획 수립) |
| WhiteRabbitNeo 33B | ~20GB | 보안 특화 파인튜닝 |
vLLM 추론 서버 실행 예시:
pip install vllm
python -m vllm.entrypoints.openai.api_server \
--model meta-llama/Llama-3.3-70B-Instruct \
--tensor-parallel-size 2 \
--gpu-memory-utilization 0.9 \
--port 8000
MCP 서버로 도구 래핑 — 화이트리스트 자동 적용:
from mcp.server.fastmcp import FastMCP
import subprocess
mcp = FastMCP("nmap-server")
@mcp.tool()
def nmap_scan(target: str, scan_type: str = "-sV") -> str:
"""승인된 타겟에만 스캔 수행"""
ALLOWED = ["10.10.0.0/16", "192.168.56.0/24"]
if not any(target.startswith(net.split('/')[0][:7]) for net in ALLOWED):
return "ERROR: 타겟이 화이트리스트에 없음"
result = subprocess.run(["nmap", scan_type, target],
capture_output=True, text=True, timeout=300)
return result.stdout
if __name__ == "__main__":
mcp.run()
[4] 오케스트레이션 — 자율 에이전트
ReAct 패턴 기반 에이전트 흐름:
- Planner: 'AD 환경 침투 경로 찾기' → 작업 분해
- Reasoner: '먼저 SMB 포트 스캔 필요' → 다음 행동 결정
- Tool Caller: nmap_scan(target=10.10.0.0/24) → 도구 호출
- Observer: 'DC 발견, 다음은 사용자 열거' → 결과 분석
- Memory/Log: 결과 저장 후 1번으로 회귀
| 프레임워크 | 난이도 | 추천 상황 |
|---|---|---|
| PentestGPT | 낮음 | 빠른 PoC |
| HackingBuddyGPT | 중간 | 자율 에이전트 학습 |
| LangGraph | 높음 | 자체 에이전트 직접 설계 |
| CrewAI | 중간 | 다중 에이전트 역할 분담 |
| Caldera + LLM | 높음 | ATT&CK 매핑 필요 시 |
다중 에이전트 역할 분담 예시:
- Recon Agent: nmap·amass만 접근
- Exploit Agent: Metasploit 접근
- Privilege Agent: BloodHound 접근
- Reporter Agent: 도구 접근 권한 없음, 보고서만
- Orchestrator: 전체 조율, 사람 승인 요청
5. Mythos를 따라잡는 현실 전략
Project Glasswing 파트너가 아닌 일반 조직도 Mythos 능력의 70~85%까지 따라갈 수 있다. 핵심은 모델 자체가 아니라 시스템 설계의 우수성이다.
능력 영역별 도달 가능성
| 능력 | Mythos | 대안 도달도 |
|---|---|---|
| 알려진 CVE 분석 | ★★★★★ | ★★★★★ |
| 소스코드 취약점 탐지 | ★★★★★ | ★★★★ |
| 익스플로잇 PoC (메모리 안전) | ★★★★★ | ★★★★ |
| 익스플로잇 (메모리 손상·커널) | ★★★★★ | ★★ |
| 익스플로잇 체이닝 | ★★★★ | ★★★ |
| 제로데이 발견 | ★★★★ | ★★ |
| N-day → 익스플로잇 변환 | ★★★★ | ★★★ |
권장 모델 스택
- Claude Opus 4.7 — 메인 추론·계획
- Claude Sonnet 4.6 — 대량 작업·로그 분석
- GPT-5 — 이중 검증용 보조
- Qwen 2.5 72B — 코드 분석 특화
- DeepSeek-R1 — 장기 추론·체이닝
- WhiteRabbitNeo 33B — 보안 파인튜닝
격차를 메우는 4대 기법
6. 4단계 구축 로드맵
- 임원 보고 및 예산 승인
- 정보보호위원회 안건 상정
- 법무·컴플라이언스 검토
- 팀 구성: 인프라 1 + 보안 2 + AI 1
- 워크스테이션 1대 + Proxmox + Kali + Vulhub
- Ollama로 Llama 3.3 70B 4bit 구동
- PentestGPT/HackingBuddyGPT 연동
- 검증 시나리오: Log4Shell 자동 익스플로잇
- 도달 목표: Mythos의 30%
- GPU 서버 도입 + vLLM 프로덕션
- GOAD 구축 → AD 자동 침투
- MCP 서버로 nmap·msf·BloodHound 래핑
- 킬스위치·로깅 구현, RoE v1.0 결재
- 도달 목표: Mythos의 60%
- 사내 시스템 미러링 (CRM 복제 등)
- 다중 에이전트 구조 전환
- BAS 도구 통합 (Caldera·AttackIQ)
- 월 1회 정기 캠페인 운영
- 도달 목표: Mythos의 75%
- 분기별 RoE·모델 갱신
- 신규 CVE 자동 검증 파이프라인
- 외부 레드팀 결과와 비교
- 방화벽·EDR 룰 자동 연계 (취약점 → 조치)
- 도달 목표: 우리 환경 한정 Mythos 동등
7. 거버넌스 — 가장 먼저 갖춰야 할 것
RoE (Rules of Engagement) 핵심 항목
- 허용 타겟: 10.10.0.0/16, redlab.internal
- 금지 타겟: 운영망(192.168.x.x), 외부 인터넷, 협력사
- 정찰, 취약점 스캔, 익스플로잇 시연(PoC)
- 권한 상승, 측면이동 (랩 내 한정)
- 데이터 파괴, 실제 암호화 수행
- 사람 대상 사회공학 (별도 승인)
- 운영 시스템 영향 가능한 모든 행위
- 화이트리스트 외부 IP 접근
- 외부 인터넷 통신 시도
- 미승인 도구 실행
- 30분 이상 사람 응답 없는 자율 작업
- L1 (자동): 정찰, 비파괴 스캔
- L2 (사후 보고): 알려진 CVE 익스플로잇
- L3 (사전 승인): 신규 익스플로잇, 권한 상승
- 모든 LLM 프롬프트·응답
- 모든 도구 호출 (입력·출력)
- 모든 네트워크 트래픽 (PCAP)
- 보존: 최소 1년
킬 스위치 구현 예시
class KillSwitch:
def check(self, action: dict) -> bool:
# 1. 타겟 화이트리스트 검증
if not self.is_target_allowed(action.get('target')):
self.trigger("타겟 위반")
return False
# 2. 도구 화이트리스트 검증
if action.get('tool') not in WHITELIST_TOOLS:
self.trigger("미승인 도구")
return False
# 3. 호출 빈도 검증
if self.too_fast(action):
self.trigger("비정상 빈도")
return False
return True
def trigger(self, reason):
os.system("systemctl stop redteam-agent") # 즉시 중단
send_alert_to_soc(reason)
self.armed = False
금융권 컴플라이언스 매핑
| 규제 | 관련 조항 | 대응 |
|---|---|---|
| 전자금융감독규정 | 제15조 (해킹방지) | 레드팀 결과 → 패치 프로세스 |
| 개인정보보호법 | 제29조 (안전조치) | 더미 데이터·DLP |
| 금융보안원 가이드 | AI 활용 보안 | 사전 신고·협의 |
| 망분리 가이드 (금감원) | 별도 격리 입증 | RedTeam Zone 분리 증빙 |
8. 흔한 함정 5가지 — 미리 피하자
| 함정 | 결과 | 예방책 |
|---|---|---|
| "외부 API 잠깐만" | 사내 코드 외부 유출 | 처음부터 자체호스팅 |
| "실데이터 좀만" | 개인정보 유출 사고 | 절대 금지, 더미만 |
| "승인 절차 나중에" | 사고 시 책임 불명 | RoE를 코드보다 먼저 |
| "AI가 알아서 하겠지" | 환각으로 운영망 공격 | 화이트리스트 필수 |
| "한 번 세팅하면 끝" | 6개월 후 outdated | 분기별 갱신 체계 |
AI 환각 위험 — 실제 사고 시나리오
- LLM이 'CVE-2026-99999'라는 가상의 취약점 익스플로잇 작성
- LLM이 타겟 IP를 잘못 인식해 인접 운영망에 스캔
- LLM이 '이 페이로드는 안전하다' 판단 후 실제 운영 영향 발생
1차 방어선은 화이트리스트 게이트 + 사람 승인 + 자동 검증이다.
9. 결론 — 6대 권고
RoE·킬스위치·로깅을 코드보다 먼저. 사고 예방의 최후 보루.
망분리 환경에서 외부 API 의존은 컴플라이언스 리스크가 큼. Qwen 2.5 72B 또는 Llama 3.3 70B를 메인으로.
Kali + Metasploit + Burp + BloodHound + LLM의 5종으로 시작. MCP 래핑으로 LLM이 자연스럽게 호출.
Mythos 격차의 핵심은 모델이 아니라 스캐폴드와 사내 컨텍스트. 4-에이전트 구조와 사내 RAG에 우선 투자.
Phase 1 PoC → Phase 2 거버넌스 → Phase 3 확장. 한 번에 풀 운영하면 거버넌스 공백으로 사고 위험.
AI 모델·도구·취약점은 6개월이면 outdated. 분기 갱신 사이클 사전 설계.
마무리
AI 위협은 데이터로 입증됐고, Mythos급 모델로 'AI 단독 익스플로잇' 시대도 열렸다. 그러나 AI는 여전히 도구·인프라·거버넌스 위에서 작동하는 시스템의 일부다. 'AI 지휘관 + 도구 병사'의 본질은 변하지 않는다.
우리 조직이 Mythos에 직접 접근할 수 없어도, 모델 스택·에이전트 스캐폴드·RAG·거버넌스의 조합으로 Mythos 능력의 70~85%까지 따라갈 수 있다. 사내 환경 한정으로는 더 높은 효용도 가능하다. 단, '도구 인프라'가 아니라 '시스템 설계와 거버넌스'에 투자해야 한다는 전제 위에서.
실제 구축 시에는 조직 컴플라이언스·법무·정보보호위 검토를 거쳐야 합니다.