Baidu Agent+ 라이브 레인지
2026-08-16
67.83/100
7위, 5시간 08분, 456M 토큰
ARTEX 벤치마크 점수:Baidu Agent+ 67.83점, TSecBench 89.78점.
ARTEX는 2026-09-03 제1회 Baidu BSRC Agent+ 공방 대회에서 우승했습니다. 두 점수, 결승 심사 방식, 그리고 찾아낸 다른 모든 ARTEX 테스트를 정리했습니다.
Tencent TSecBench
2026-09-03
89.78/100
6위, 5시간 03분, 271M 토큰
ARTEX의 Baidu Agent+ 우승 방식:라이브 레인지 절반, 심사위원 절반.
Baidu BSRC가 Kuaishou, Didi, Duxiaoman 등과 함께 주최했습니다. 언론은 李浦华 (Li Puhua)를 ARTEX 팀 리더로 지목합니다.
- 온라인 참가 팀
- 150+
- 라이브 레인지와 심사
- 50/50
- 종합, 전국 우승
- 1위
- 오프라인 결승
- 청두
심사 항목
- 01전 과정 자동화
- 02취약점 발견율
- 03오탐률
- 04코드 감사 규모
- 05첫 고위험 취약점까지 걸린 시간
- 06LLM 실행 비용
- 07사람 확인에 쓴 시간 비율
기록된 모든 ARTEX 테스트,대회 점수부터 포크 하네스까지.
Baidu BSRC 'Agent+' 공방 대회, 종합
ARTEX (v0.3.x, 李浦华가 이끈 팀)
전국 우승, 종합 1위 (라이브 레인지 50% + 심사위원 평가 50%)
2026-09-03cn-sec.comBaidu Agent+ 라이브 레인지
ARTEX
67.83/100, 7위; 유효 시간 5h08m18s; 토큰 456,495,944개
2026-08-16cn-sec.comTencent TSecBench 블라인드 테스트 레인지
ARTEX
89.78/100, 최신 리더보드 6위; 유효 시간 5h03m40s; 토큰 270,797,493개
2026-09-03 보도cn-sec.comBaaRai/ARTEX L3 벤치마크 하네스 (Juice Shop 정답 기준, 항목 8개, 독립 LLM 판정자, Wilson 95% CI)
BaaRai 포크
하네스만 있음. 결과 디렉터리는 gitignore 처리되어 공개된 수치 없음
2026-10-12 (PR #59)BaaRai/ARTEX업스트림의 docker-compose.bench.yml
ARTEX 업스트림 / RuoJi6
artex-bench 컨테이너용 Compose 스텁 (Dockerfile.bench, bench/.env는 저장소에 없음). 결과 없음
날짜 없음RuoJi6/ARTEX/btw 곁가지 질문 검증
ARTEX 기능 테스트
엔지니어링 테스트 표, 전부 통과. 성능 벤치마크 아님
2026-09-10RuoJi6/ARTEX
실제 공격 속 ARTEX:위협 보고서에 나온 속도.
벤치마크가 아닙니다. ARTEX를 사용한 공격자에 대한 사고 보고서에서 가져온 수치입니다.
15분
처음 탈취한 계정에서 깊은 접근까지 가장 빠른 사례. 보통은 약 4시간
GTIG23초에 27건
AWS 탐색 중 발생한 이벤트, 2초에서 25초 길이의 버스트
GTIG분당 2,900회
클라우드 테넌트 2,250곳 이상을 노린 로그인 시도
Microsoft (The Hacker News 경유)
ARTEX와 함께 언급된 프레임워크:PentAGI, Cairn, Hexstrike, AgentZero.
PentAGI
VXControl, Go, MIT. GitHub 스타 약 14,700개, 하위 에이전트 4개.
Cairn
oritera/Cairn, 스타 4,756개. ARTEX README가 참고 프로젝트로 명시합니다.
Hexstrike와 AgentZero
GTIG가 PentAGI, CAIRN과 함께 공격자가 악용한 에이전트형 프레임워크로 지목했습니다.
ARTEX Pro
ThreatBook의 RedAgents 상용판으로, Cyber (YanJi), Yanxun, CyberStrikeAI와 함께 판매됩니다.
