맞대결

Beam vs Nemotron 3 Ultra

13:1

Beam은 공통 벤치마크 15개 중 13개에서 승리

1번의 무승부

결론

또 다른 미국 오픈 모델인 NVIDIA의 Nemotron 3 Ultra와 비교하면 Beam이 확실히 강합니다. 공통 벤치마크 15개 중 13개에서 앞서고, AA-LCR에서는 동률이며 IFBench에서만 뒤처집니다. 차이가 가장 큰 항목은 Terminal-Bench, BrowseComp, SWE-Bench Pro입니다.

벤치마크별 비교

벤치마크	Beam	Nemotron 3 Ultra	차이
SWE-Bench Pro v1	65.5	46.4	+19.1
Terminal-Bench v2.1	80.1	56.4	+23.7
SWE-Bench Multilingual	78.0	67.7	+10.3
SWE-Bench Verified	80.9	70.7	+10.2
Humanity's Last Exam (no tools)	36.2	26.7	+9.5
SciCode	49.7	44.6	+5.1
CritPt (AA)	16.3	3.1	+13.2
GPQA Diamond	90.5	87.0	+3.5
MCP Atlas	78.7	63.1	+15.6
τ³ banking	38.0	22.6	+15.4
BrowseComp (context mgmt)	77.4	44.4	+33.0
AA-LCR (long context)	79.3	79.3	0.0
LongBench v2	65.5	61.9	+3.6
IFBench	79.7	81.7	-2.0
AA Omniscience index (public split)	13.0	8.6	+4.4

모든 점수는 Reflection의 발표(2026년 10월 8일 개정판)에서 가져왔습니다. Nemotron 3 Ultra의 점수는 Reflection이 Artificial Analysis와 DataCurve를 인용한 값입니다.

두 모델

	Beam	Nemotron 3 Ultra
개발사	Reflection AI	NVIDIA
기반 국가	미국	미국
매개변수(전체 / 활성)	501B / 23B	550B / 55B
가중치	Apache 2.0, 2026년 10월 후반 공개 예정	OpenMDW-1.1
출시일	2026년 10월 5일	2026년 6월 4일
이용 방법	대기자 명단에 등록해야 하는 베타 API, 가중치는 추후 공개	Hugging Face, NVIDIA NIM