Kimi K3란? 2.8T 파라미터 OSS 모델과 출시 배경
2026년 7월 16일 심야, Moonshot AI(월지암면)가 API 문서 상단에 「Kimi K3 출시」 배너를 게시했습니다——대규모 발표회도, 사전 예열 SNS 공세도 없이 기술 블로그 1편, 요금 페이지 1개, 즉시 호출 가능한 모델 ID kimi-k3만 있습니다. 저조한 자세와 2.8조 파라미터 규모가 대조를 이룹니다.
한 줄 정의: Kimi K3는 현재 세계 최대 파라미터 수의 오픈소스 AI 모델입니다——2.8T 파라미터로 DeepSeek V4 Pro(1.6T)를 약 75% 앞서며, 샤오미 OSS 모델(1.02T)의 2.7배, 알리(397B)의 7배 이상입니다. 희소 MoE 아키텍처로 추론 시 896개 전문가 중 16개를 활성화합니다. 100만 token 초장 컨텍스트(『홍루몽』 전 5권 분량을 한 번에 읽는 규모)와 네이티브 시각 이해를 갖추고, 복잡한 코딩, 장문 추론, 지식 작업을 위해 설계되었습니다. 완전한 가중치는 7월 27일 OSS 공개되며 Claude Opus 4.8보다 약 40% 저렴합니다.
| 사양 | 값 |
|---|---|
| 총 파라미터 수 | 2.8조(2.8T) |
| 아키텍처 | Kimi Delta Attention + Attention Residuals + Stable LatentMoE |
| 활성 전문가 | 16 / 896(희소도 1.8%) |
| 컨텍스트 윈도우 | 1,048,576 tokens(1M) |
| 입력 모달리티 | 텍스트, 이미지, 비디오 |
| 추론 모드 | 현재 max만(low/high는 추후 업데이트) |
| API 요금 | $3 / $15 per 1M tokens(입력/출력) |
| OSS 가중치 | 2026년 7월 27일(Hugging Face) |
왜 이번 출시가 중요한가? Moonshot AI는 지난 18개월 DeepSeek 부상의 충격을 겪었습니다. K3는 멋진 반격이라 할 수 있습니다.
규모 기록: 지난 12개월 Kimi 시리즈는 9개월 OSS 모델 규모 상한을 차지했습니다.
전략적 타이밍: 출시 시점이 2026 세계 인공지능 대회(WAIC) 개막 전야로 신호성이 매우 강합니다.
상용화 급성장: 2026년 6월 기준 ARR 3억 달러 돌파, 올해 6라운드 투자 완료, 투자 전 밸류에이션 315억 달러입니다.
API 주도: API 수입이 전체 70% 이상, 해외 유료 사용자 400% 증가——「규모만을 위한 이상론」이 아니라 상용화가 폭발 중인 기술 선언입니다.
선정 오판: 「파라미터 최대=모든 벤치마크 1위」와 같지 않습니다. 자체 보고 harness 차이를 무시하지 마세요. 7/27 전에 풀 가중치 로컬 실행을 가정하지 마세요. FrontierSWE에서 Fable 5가 여전히 앞섭니다. 단일 모델로 모든 Agent 시나리오를 커버하지 마세요.
Kimi Delta Attention 등 3대 아키텍처 혁신 상세
Kimi K3는 단순한 파라미터 누적이 아닙니다——아키텍처 층에서 3가지 엔지니어링 혁신을 도입해 장 컨텍스트와 초희소 MoE 학습의 실제 병목을 해결합니다.
2.1 Kimi Delta Attention(KDA)—— 하이브리드 선형 어텐션
기존 Full Attention은 장 컨텍스트에서 KV 캐시 메모리가 제곱급으로 증가해 100만 token에서 치명적입니다. KDA는 3:1 비율로 선형 어텐션 층과 전체 어텐션 층을 교대합니다. 3개 선형 층이 국소 구조 처리(계산 저렴), 1개 전체 어텐션 층이 전역 정보 흐름을 유지합니다. 결과적으로 KV 캐시 메모리는 최대 75% 감소, 100만 token 컨텍스트 디코딩 속도는 최대 6.3배 향상됩니다. 짧은·긴 컨텍스트, RL 확장 3가지 시나리오 모두에서 순수 전체 어텐션 베이스라인을 넘습니다.
비유하면: 전체 어텐션은 대화의 모든 세부를 동시에 기억하는 것과 같습니다. KDA는 효율적인 비서——대부분은 빠르게 색인하고, 중요한 순간만 정확히 회상합니다.
2.2 Attention Residuals(AttnRes)—— 깊이를 가로지르는 선택적 검색
표준 잔차 연결은 깊이에 따라 균등히 누적되어 초기 층의 핵심 표현이 깊은 층에서 희석됩니다. AttnRes는 선택적 검색을 도입해 모델이 더 이른 층의 고가치 표현을 깊이를 가로질러 직접 가져올 수 있습니다. Moonshot AI는 약 25% 학습 효율 향상을 보고하며 추가 계산 오버헤드는 2% 미만입니다.
2.3 Stable LatentMoE —— 896 전문가 중 16개만 활성화
| 기술 | 역할 |
|---|---|
| Quantile Balancing | 라우터 점수 분위수에서 전문가 할당을 도출해 휴리스틱 하이퍼파라미터 제거 |
| Per-Head Muon | 각 어텐션 헤드를 독립 최적화해 대규모 학습을 더 적응적으로 |
| Sigmoid Tanh Unit(SiTU) | 활성화 함수 제어 개선 |
| Gated MLA | 어텐션 선택성 향상 |
위 혁신을 종합하면 Kimi K3는 Kimi K2 대비 전체 스케일 효율이 약 2.5배 향상——동일 연산 자원에서 더 강한 지능을 끌어냅니다.
Kimi K3 벤치마크: Claude Fable 5, GPT-5.6 Sol 전면 비교
아래는 Moonshot AI 자체 보고 핵심 벤치마크입니다(각 모델은 서로 다른 추론 harness 사용: K3는 Kimi Code, GPT는 Codex, Claude는 Claude Code). 독립 제3자 재현은 진행 중입니다.
| 벤치마크 | Kimi K3 | Claude Fable 5 | GPT-5.6 Sol | Claude Opus 4.8 | GLM-5.2 |
|---|---|---|---|---|---|
| DeepSWE | 67.5 | 70.0 | 73.0 | 59.0 | 46.2 |
| Program Bench | 77.8 | 76.8 | 77.6 | 71.9 | 63.7 |
| Terminal Bench 2.1 | 88.3 | 84.6 | 88.8 | 84.6 | 82.7 |
| FrontierSWE | 81.2 | 86.6 | 71.3 | 66.7 | 67.3 |
| SWE Marathon | 42.0 | 35.0 | 39.0 | 40.0 | 13.0 |
| BrowseComp | 91.2 | 88.0 | 90.4 | 84.3 | — |
| Automation Bench | 30.8 | 29.1 | 29.7 | 27.2 | 12.9 |
| GPQA-Diamond | 93.5 | 92.6 | 94.1 | 91.0 | 91.2 |
| MMMU-Pro(시각) | 81.6 | 81.2 | 83.0 | 78.9 | — |
| OmniDocBench(문서 이해) | 91.1 | 89.8 | 85.8 | 87.9 | — |
해석 포인트:
SWE Marathon(42.0 1위): 지속적 장시간 코딩을 전문 측정하며 「실제로 수 시간 코딩」에 가장 가깝고 K3가 크게 앞섭니다.
Program Bench(77.8 1위): Fable 5(76.8)와 GPT-5.6 Sol(77.6)을 근소하게 앞섭니다.
FrontierSWE: Fable 5가 86.6으로 앞서고 K3(81.2)는 GPT-5.6 Sol(71.3)을 크게 앞섭니다.
OmniDocBench(91.1 1위): 시각 + 장 컨텍스트 시너지를 보여줍니다.
종합 지능: Artificial Analysis Intelligence Index v4.1에서 K3는 57.1점 4위, Fable 5(59.9)와 GPT-5.6 Sol(58.9) 뒤에 차이는 2.8점뿐입니다.
주의: 위는 벤더 자체 보고 데이터이며 harness가 통일되지 않았습니다. 방향성 참고로 활용하고 확정적 근거로 삼지 마세요——프로덕션 선정 시 반드시 자체 평가 세트로 검증하세요.
Kimi K3 요금 비교와 6가지 즉시 연동 방법
| 모델 | 입력($/M) | 출력($/M) | 캐시 적중 입력 | 컨텍스트 |
|---|---|---|---|---|
| Kimi K3 | $3.00 | $15.00 | $0.30 | 1M |
| Claude Sonnet 5 | $3.00(프로모 $2) | $15.00(프로모 $10) | — | 200K |
| Claude Opus 4.8 | $5.00 | $25.00 | — | 200K |
| GPT-5.5 | $5.00 | $30.00 | — | 400K |
| DeepSeek V4 Pro | $1.74 | $3.48 | $0.145 | 128K |
| Kimi K2.6 | $0.95 | $4.00 | $0.16 | 256K |
K3 표준가는 Claude Sonnet 5와 동일($3/$15)하지만 컨텍스트 윈도우는 5배입니다. 캐시 적중은 $0.30/M(표준가 1/10)까지 내려가며 Moonshot AI는 코딩 시나리오 캐시 적중률 90% 초과를 보고합니다. 실효 입력 비용은 매우 낮아집니다. 국내 API: 입력 ¥20/M, 출력 ¥100/M, 캐시 적중 ¥2/M. 소비자용 kimi.com은 무료 계정 사용 가능, 선불 플랜 ¥199부터(할인 8월 11일까지).
6가지 즉시 연동 단계:
Kimi 웹/App: kimi.com 접속, 계정 등록(Google 지원). K3는 기본 최대 추론 강도, 신용카드 불필요합니다.
공식 API Key: platform.kimi.ai에서 키 생성, base_url을 https://api.moonshot.ai/v1, 모델 ID kimi-k3로 설정합니다.
OpenRouter 라우팅: 모델 ID moonshotai/kimi-k3, 공식 가격 마크업 없음, 완전 1M 컨텍스트 지원.
캐시 최적화: 코딩 Agent 워크플로에서 system prompt와 도구 정의 접두사를 최대한 재사용. Mooncake 분 추론 아키텍처에서 캐시 적중률 90%+ 달성 가능.
7월 27일 가중치: 완전 모델 가중치 Hugging Face 공개. 64+ 가속 카드 슈퍼노드 필요. 양자화 MXFP4/NVFP4와 vLLM, SGLang Day-0 지원 예상.
혼합 라우팅: 긴 코드 작업은 K3, 복잡한 Repo급 Bug 수정은 Fable 5, 터미널 집약형 Agent는 GPT-5.6 Sol——단일 모델 All-in은 피하세요.
from openai import OpenAI
client = OpenAI(
api_key="your_moonshot_api_key",
base_url="https://api.moonshot.ai/v1"
)
response = client.chat.completions.create(
model="kimi-k3",
messages=[{"role": "user", "content": "이 코드를 분석해 주세요..."}]
)시나리오 선정 매트릭스, OSS 약속, 인용 가능 데이터
| 시나리오 | 추천 모델 | 이유 |
|---|---|---|
| 지속적 장코드 작업 | Kimi K3 | SWE Marathon 1위, 최장 컨텍스트 |
| 복잡한 Repo급 Bug 수정 | Claude Fable 5 | FrontierSWE에서 크게 앞섬 |
| 터미널/툴체인 집약형 Agent | GPT-5.6 Sol | Terminal Bench와 Coding Agent Index 선두 |
| 초장문/멀티모달 문서 이해 | Kimi K3 | OmniDocBench 1위, 네이티브 시각 + 1M 컨텍스트 |
| 비용 민감 시나리오 | DeepSeek V4 Pro | 출력 $3.48/M만, K3보다 훨씬 저렴 |
| OSS 자체 배포(7/27 이후) | Kimi K3 | 지금까지 최강 다운로드 가능 OSS 가중치 |
7월 27일 OSS 약속: Moonshot AI는 공식 WeChat 공지에서 7월 27일 완전 모델 가중치 공개를 명시했습니다. 공개 후 K3는: 지금까지 최대 파라미터 다운로드 가능 OSS 모델, 최초 2조 파라미터급 OSS 가중치, OSS 커뮤니티 학습/미세조정 베이스의 새 기준이 됩니다. 학습은 MXFP4 가중치와 MXFP8 활성화를 채택한 양자화 인식 설계입니다. Hugging Face에 MXFP4/NVFP4 양자화 버전이 등장할 전망입니다.
2.8T / 75%: DeepSeek V4 Pro(1.6T)를 약 75% 앞서 세계 OSS 파라미터 규모 신기록입니다.
57.1 / 2.8: Artificial Analysis v4.1 종합 지능 4위, 1위 Fable 5(59.9)와 차이 2.8점뿐입니다.
$0.30 / 90%+: 캐시 적중 입력가 + 코딩 시나리오 캐시 적중률——실효 입력 비용은 약 $0.55/M까지 내려갑니다(OpenRouter 7일 가중 검증).
요약: Kimi K3는 아키텍처 층에서 진정한 엔지니어링 혁신을 이뤘고, 코딩 장기 작업과 문서 이해 등 핵심 분야에서 일부 폐쇄형 플래그십에 필적하거나 앞서며, 합리적 가격과 완전 OSS 약속을 갖췄습니다——중국 AI OSS 생태계가 「저가로 시장 확보」에서 「지능 프론티어 도전」으로 전환한 상징입니다. 주목할 타임라인: 7월 17–20일 WAIC 추가 발표 → 7월 27일 K3 완전 가중치 OSS.
대안을 정리하면: 개인 Mac만으로 Kimi Code / API Agent 부하 테스트 시 절전과 네트워크 변동으로 장 컨텍스트 작업이 쉽게 중단됩니다. 7/27 자체 배포 대기 시 64+ 카드 슈퍼노드가 필요해 중소 팀은 단기간에 어렵습니다. 단일 폐쇄형 API에 완전 의존하면 컨텍스트 길이와 비용 측면에서 K3의 1M flat 요금 우위를 커버하기 어렵습니다. iOS CI/CD, Kimi Code 상시 가동, AI Agent 7×24 자동화 프로덕션 환경이 필요하다면 KVMNODE 전용 Mac Mini M4 클라우드 대여가 보통 더 나은 선택입니다. Apple Silicon 통합 메모리, sudo 개방, 일/주/월 유연 주문으로 운영할 수 있습니다. 자세한 내용은 가격 페이지, 고객 센터, 또는 바로 주문을 참고하세요.
데이터 기준: 2026년 7월 16일 · 벤치마크는 Moonshot AI 자체 보고 · 출처: kimi.com/blog/kimi-k3, API Platform docs, Artificial Analysis, OpenRouter