기반 모델 비교 평가
다섯 개의 오픈 소스 모델이 우리 테스트 세트의 50문항(전기 25, 호텔 25)으로 겨루었고, 오픈 웨이트 심사 모델이 답변을 채점했습니다. 선정된 기반 모델은 Qwen3.6-35B-A3B입니다. 전기 분야 1위이고, 라이선스는 Apache-2.0이며, 두 분야 어댑터를 GPU 한 대에서 함께 서비스하기에 적합합니다.
| 모델 | 합계 | 전기 | 호텔 |
|---|---|---|---|
| google/gemma-4-26B-A4B-it | 87.2 | 76.0 | 98.4 |
| Qwen/Qwen3.6-35B-A3B선정 | 84.6 | 86.4 | 82.8 |
| google/gemma-4-12B-it | 79.6 | 64.0 | 95.2 |
| Qwen/Qwen3.5-9B | 73.8 | 72.4 | 75.2 |
| mistralai/Mistral-Small-3.2-24B-Instruct-2506 | 64.6 | 55.2 | 74.0 |
100점 만점 · 심사: Qwen3.8-27B · 2026년 10월 19일


