집
중국의 AI 유니콘 기업 미니맥스(MiniMax)가 독창적인 스파스 어텐션(sparse attention) 아키텍처를 적용한 새로운 대형 모델 ‘M3’를 출시할 예정이다. 이 설계는 초장문 컨텍스트 환경에서 발생하는 연산 병목 현상을 극복하여, 수백만 토큰 규모의 컨텍스트를 효율적으로 처리할 수 있게 한다. M3는 이전 모델 대비 성능이 크게 향상되어 프리필링 속도는 97배, 디코딩 속도는 156배 빨라졌으며, 이로 인해 추론 비용이 대폭 절감되었다. 이러한 혁신은 대형 모델 경쟁의 초점이 파라미터 규모에서 효율성과 실용성으로 전환되고 있음을 보여준다.
의견 (0)
0/300
